La IA para la producción de vídeos se está volviendo cada vez más popular gracias a herramientas como Sora, Runway y Pika. Pero una nueva cámara de cine impulsada por inteligencia artificial lleva la idea al siguiente nivel.
La agencia de tecnología creativa SpecialGuestX y la productora multimedia 1stAveMachine han lanzado el CMR-M1 para lograr este objetivo. El resultado es una cámara que no sólo fotografía el mundo que la rodea; Más bien, lo mejora con un modelo generativo de video a video basado en IA. La película digital se envía a la nube, donde un modelo basado en difusión la convierte. Además, la IA también puede vincularse a otras API para jugar más con lo que puede hacer con la película.
“Creemos que crear películas es un proceso inherentemente físico”, dijo Miguel Espada, cofundador y CTO de SpecialGuestX. “Los cineastas están acostumbrados a usar cámaras, lentes, trípodes e iluminación, y la IA debería ser una nueva herramienta que mejore la creatividad. ” “Con el espíritu de experimentación creativa, diseñamos una cámara que actúa como interfaz física para modelos de IA”.
La cámara cuenta con una rueda en el costado del estuche, lo que permite a los operadores realizar una transición perfecta de superposiciones reales a generadas por IA. Incluso hay una ranura para una tarjeta de patrón que contiene un chip NFC que se conecta al patrón del usuario entrenado en sus fotos y mensajes personalizados.
Aunque esto no es una configuración en tiempo real debido al retraso, los modelos en desarrollo como StreamDiffusion pueden hacerlo realidad. Actualmente hay cinco filtros diferentes a través de los cuales se reproduce la película, incluida la jungla “Blooming Nature” y los esmoquin y el oro en “Old Money”. Puede ver un ejemplo de “Dinero antiguo” a continuación.
Película de inteligencia artificial
El CMR-M1 es actualmente un prototipo y no está previsto su lanzamiento comercial. Es parte de la investigación de SpecialGuestX sobre la creación de interfaces físicas para IA generativa. Sin embargo, el diseño del CMR-M1 se desarrolló teniendo en cuenta la escalabilidad, lo que permitirá una posible producción comercial en el futuro.
La CMR-M1, que proviene del simple nombre Camera Model 1, intenta deliberadamente evocar los albores del cine en su apariencia. La cámara tiene un diseño que recuerda a la cámara Cine-Kodak de 1924, una de las primeras y más populares cámaras portátiles de 16 mm.
“A veces, para imaginar cómo podría ser el futuro, hay que crear un prototipo del mismo. Este es especialmente el caso cuando se trata de la industria cinematográfica, las tecnologías creativas y la comunidad creativa”, dice Aaron Duffy, fundador y director. Director creativo ejecutivo de SpecialGuest. “El CMR-M1 es un prototipo de cómo los creativos pueden utilizar la IA en lugar de sentarse frente a un teclado”.
Es difícil decir si el CMR M1 tendrá un impacto en el mundo cinematográfico en general. La pregunta más apremiante es si abrirá un nuevo campo de competencia entre los desarrolladores de modelos de vídeo de IA como Runway y su nueva generación 3 Alpha. Abierto AI y para ella hermana modeloy los esfuerzos realizados por Pika y Luma Labs.
Inclusión de plantillas de código abierto de Estabilidad de la inteligencia artificial Esto sugiere que este tipo de acceso puede desempeñar un papel importante en la evolución de los vídeos impulsados por IA, aunque lo que aparece en el último carrete del concurso sigue representando un final muy emocionante.