Meta, propriétaire de Facebook, a annoncé vendredi avoir développé un nouveau modèle d’intelligence artificielle appelé Movie Gen, capable de créer des clips vidéo et audio réalistes en réponse aux invites des utilisateurs. La société affirme qu’elle peut rivaliser avec les outils des principales startups de génération de médias comme OpenAI et ElevenLabs.
Des échantillons des créations de Movie Gen, fournis par Meta, présentaient des vidéos d’animaux nageant et surfant, ainsi que des clips utilisant de vraies photos de personnes les représentant exécutant des actions comme peindre sur une toile.
Selon Meta, Movie Gen peut également générer de la musique de fond et des effets sonores synchronisés avec le contenu vidéo, et peut éditer des vidéos existantes.
Les vidéos créées par Movie Gen peuvent durer jusqu’à 16 secondes, tandis que les clips audio peuvent atteindre jusqu’à 45 secondes. Meta a partagé des données issues de tests aveugles indiquant que le modèle fonctionne favorablement par rapport aux offres de startups, notamment Runway, OpenAI, ElevenLabs et Kling.
Cette annonce intervient alors qu’Hollywood se demande comment exploiter la technologie vidéo générative de l’IA cette année, suite à la démonstration en février par OpenAI, soutenue par Microsoft, de son produit Sora, qui peut créer des vidéos de type long métrage en réponse à des invites textuelles.
Les technologues de l’industrie du divertissement sont impatients d’utiliser de tels outils pour améliorer et accélérer la réalisation de films, tandis que d’autres expriment leurs inquiétudes quant aux systèmes qui semblent avoir été formés sur des œuvres protégées par le droit d’auteur sans autorisation.
Les législateurs ont également exprimé leurs inquiétudes quant à la manière dont les contrefaçons générées par l’IA, ou deepfakes, sont utilisées lors des élections dans le monde entier, notamment aux États-Unis, au Pakistan, en Inde et en Indonésie.
Les porte-parole de Meta ont indiqué qu’il est peu probable que la société publie Movie Gen pour une utilisation ouverte par les développeurs, contrairement à sa série Llama de modèles en grand langage, car ils évaluent les risques associés à chaque modèle individuellement. Ils ont refusé de commenter l’évaluation spécifique de Movie Gen.
Au lieu de cela, ils ont déclaré que Meta travaillait directement avec la communauté du divertissement et d’autres créateurs de contenu sur des applications pour Movie Gen et prévoyait de l’intégrer dans les propres produits de Meta l’année prochaine.
Selon le billet de blog et un document de recherche publié par Meta, la société a utilisé une combinaison d’ensembles de données sous licence et accessibles au public pour développer Movie Gen.
OpenAI a rencontré cette année des dirigeants et des agents d’Hollywood pour discuter de partenariats potentiels impliquant Sora, bien qu’aucun accord n’ait encore été signalé. Les inquiétudes concernant l’approche de l’entreprise se sont intensifiées en mai lorsque l’actrice Scarlett Johansson a accusé le créateur de ChatGPT d’imiter sa voix sans autorisation pour son chatbot.
Lionsgate Entertainment, la société derrière « The Hunger Games » et « Twilight », a annoncé en septembre qu’elle donnait à la start-up d’IA Runway l’accès à sa bibliothèque de films et de télévision pour former un modèle d’IA. En retour, il a déclaré que le studio et ses cinéastes pouvaient utiliser le modèle pour enrichir leur travail.