Meta lanza Movie Gen, su nuevo modelo de IA que crea videos y clips de audio para competir con Sora

Meta anunció este viernes que creó un nuevo modelo de inteligencia artificial llamado Movie Gen, capaz de crear videos y clips de audio de apariencia realista en respuesta a las indicaciones de los usuarios, afirmando que puede rivalizar con herramientas de las principales empresas de generación de contenidos multimedia, como OpenAI y ElevenLabs.

Las muestras de las creaciones de Movie Gen facilitadas por Meta, dueña de Facebook, mostraban videos de animales nadando y haciendo surf, así como videos en los que se utilizaban fotos reales de personas para representarlas realizando acciones como pintar sobre un lienzo.

Movie Gen también puede generar música de fondo y efectos de sonido sincronizados con el contenido de los videos, explica Meta en una publicación de su blog, y utilizar la herramienta para editar videos existentes.

En uno de esos videos, Meta hizo que la herramienta insertara pompones en las manos de un hombre que corría solo por el desierto, mientras que en otro cambió un aparcamiento en el que un hombre se desplazaba en monopatín de un terreno seco a otro cubierto por un charco salpicado.

Los videos creados por Movie Gen pueden durar hasta 16 segundos, mientras que el audio puede durar hasta 45 segundos, según Meta. Meta ha presentado datos de pruebas a ciegas que indican que el modelo funciona favorablemente en comparación con las ofertas de nuevas empresas como Runway, OpenAI, ElevenLabs y Kling.

El anuncio se produce en un momento en el que Hollywood se ha estado debatiendo este año sobre cómo aprovechar la tecnología de video de IA generativa, después de que OpenAI, respaldada por Microsoft, mostró por primera vez en febrero cómo su producto Sora podía crear videos similares a largometrajes en respuesta a mensajes de texto.

Los tecnólogos de la industria del entretenimiento están ansiosos por utilizar este tipo de herramientas para mejorar y agilizar la creación de películas, mientras que a otros les preocupa la adopción de sistemas que parecen haber sido entrenados en obras protegidas por derechos de autor sin permiso.

Los legisladores también han expresado su preocupación por el uso de falsificaciones generadas por inteligencia artificial en elecciones de todo el mundo, como las de Estados Unidos, Pakistán, India e Indonesia.

Los portavoces de Meta dijeron que era improbable que la empresa pusiera Movie Gen a disposición de los desarrolladores, como ha hecho con su serie Llama de modelos de gran tamaño, ya que considera los riesgos individualmente para cada modelo. Se negaron a comentar la evaluación de Meta sobre Movie Gen en concreto.

En su lugar, dijeron que Meta estaba trabajando directamente con la comunidad del entretenimiento y otros creadores de contenidos sobre los usos de Movie Gen y que lo incorporaría a los propios productos de Meta en algún momento del próximo año.

Según la entrada del blog y un documento de investigación sobre la herramienta publicado por Meta, la empresa utilizó una mezcla de conjuntos de datos con licencia y de acceso público para crear Movie Gen.

OpenAI se ha reunido este año con ejecutivos y agentes de Hollywood para hablar de posibles asociaciones con Sora, aunque todavía no se ha informado de ningún acuerdo. La inquietud por el enfoque de la empresa aumentó en mayo, cuando la actriz Scarlett Johansson acusó al fabricante de ChatGPT de imitar su voz sin permiso para su chatbot.

Lions Gate Entertainment, la empresa responsable de "Los juegos del hambre" y "Crepúsculo", anunció en septiembre que iba a dar a la empresa de IA Runway acceso a su biblioteca de cine y televisión para entrenar un modelo de IA. A cambio, el estudio y sus cineastas podrán utilizar el modelo para mejorar su trabajo.