A estas alturas, probablemente te encanta la idea de crear vídeos fotorrealistas utilizando IA generativa, o crees que es un esfuerzo moralmente fallido que devalúa a los artistas y conducirá a una era desastrosa de deepfakes de la que nunca escaparemos. Es difícil encontrar un término medio. Mita no cambiará de opinión con ella. película generalel último modelo de IA para la creación de videos, pero independientemente de su opinión sobre la creación de medios de IA, eventualmente puede convertirse en un hito en la industria.
Movie Gen puede producir videos fotorrealistas junto con música y efectos de sonido a 16 fps o 24 fps con resoluciones de hasta 1080p (mejorada de 768 x 768p). También puede crear vídeos personalizados si subes una foto y, lo más importante, parece fácil editar vídeos con simples comandos de texto. En particular, también puede editar vídeos normales que no sean de IA y que contengan texto. Es fácil imaginar cómo esto podría ser útil para limpiar algo que tomaste con tu teléfono para Instagram. Movie Gen es pura investigación Por ahora, Meta no lo publicará públicamente, por lo que tenemos un poco de tiempo para pensar en lo que significa todo esto.
La empresa describe Movie Gen como la “tercera ola” de investigación en IA generativa, más allá de la fase inicial Herramientas de creación de medios como Make-A-Sceneademás Últimas ofertas Usando el modelo Llama AI. Está impulsado por un modelo convertidor de 30 mil millones de parámetros que puede generar videos de 16 segundos a 16 fps o clips de 10 segundos a 24 fps. También tiene un modelo de audio de 13 mil millones de parámetros que puede generar contenido de 45 segundos a 48 kHz, como “sonido ambiental, efectos de sonido (foley) y música de fondo instrumental” en sincronización con el video. Aún no hay soporte para sincronización de audio “debido a nuestras elecciones de diseño”, dijo el equipo de Movie Gen. escribió en su trabajo de investigación.
Meta dice que Movie Gen se entrenó inicialmente en “una variedad de conjuntos de datos con licencia y disponibles públicamente”, incluidos alrededor de 100 millones de videos, mil millones de imágenes y 1 millón de horas de audio. El lenguaje de la compañía es un poco vago cuando se trata de fuentes, y Meta ya admitió haber entrenado sus modelos de IA con datos de Cada cuenta de usuario australianoNi siquiera está claro qué utiliza la empresa fuera de sus propios productos.
En cuanto a los vídeos reales, Movie Gen ciertamente parece impresionante a primera vista. Meta dice que en sus pruebas A/B, la gente generalmente prefirió sus resultados en comparación con el modelo Sora de OpenAI y el modelo Gen3 de Runway. Los humanos con IA de Movie Gen parecen sorprendentemente realistas, sin muchos de los signos obvios del vídeo con IA (ojos y dedos molestos, en particular).
“Si bien existen muchos casos de uso interesantes para estos modelos básicos, es importante tener en cuenta que la IA generativa no reemplaza el trabajo de los artistas y animadores”, Movie Gen Team escribió en una publicación de blog. “Compartimos esta investigación porque creemos en el poder de esta tecnología para ayudar a las personas a expresarse de nuevas maneras y brindar oportunidades a personas que de otro modo no tendrían estas oportunidades”.
Sin embargo, todavía no está claro qué harán los usuarios comunes con el video generativo de IA. ¿Llenaremos nuestras transmisiones con videos de IA, en lugar de tomar nuestras propias fotos y videos? ¿O Movie Gen se dividirá en herramientas individuales que puedan ayudar a mejorar nuestro contenido? Ya podemos eliminar fácilmente objetos de fondos de fotografías en teléfonos inteligentes y computadoras, y una edición de video más avanzada usando IA parece ser el siguiente paso lógico.