Meta ha compartido otro concursante en el Carrera de vídeo AI eso aparentemente se ha apoderado de gran parte de la industria en los últimos meses. El gigante tecnológico lanzó un nuevo modelo llamado Movie Gen que, como su nombre indica, genera películas. Es notablemente más completo en su lista de funciones que muchos otros en su lanzamiento inicial, comparable a Abierto AI's modelo soraque atrajo tanta atención en su presentación inicial. Dicho esto, Movie Gen también comparte con Sora una limitación en el acceso a cineastas específicos que se asocian con Meta en lugar de un lanzamiento público.
Movie Gen es impresionante según las demostraciones de su capacidad para producir películas a partir de indicaciones de texto, como se ve arriba. El modelo puede crear vídeos de 16 segundos y ampliarlos a una resolución de 1080p. La advertencia es que el vídeo sale a 16 fotogramas por segundo, una velocidad más lenta que cualquier estándar de filmación. Para 24 fps más normales, el clip de película no puede durar más de 10 segundos.
Acción de generación de películas
Aún así, 10 segundos pueden ser suficientes con el mensaje correcto. Meta le dio a Movie Gen una función de personalización divertida que recuerda a su herramienta Imagine para crear imágenes contigo en ellas. Movie Gen puede hacer lo mismo con un vídeo, utilizando una imagen de referencia para colocar a una persona real en un clip. Si el modelo puede igualar regularmente la demostración, muchos cineastas podrían estar ansiosos por probarlo.
Y los videos no se limitan solo a un mensaje que luego debe reescribirse para crear otro video que espera que sea mejor. Movie Gen tiene una función de edición basada en texto en la que un mensaje puede ajustar de forma precisa una parte de la película o cambiar un aspecto de ella en su conjunto. Puedes pedirles a los personajes que usen atuendos diferentes o que establezcan el fondo en una ubicación diferente. Esa flexibilidad es impresionante. Los ajustes también se extienden a los movimientos de la cámara, con solicitudes de panorámica y seguimiento comprendidas por la IA e incorporadas al vídeo o sus ediciones posteriores. La conciencia de los objetos y sus movimientos probablemente surge de la modelo SAM2 Meta lanzado recientemente, que es capaz de etiquetar y rastrear objetos en videos.
Futuro de la IA de audio
Las buenas imágenes son muy comunes ahora entre los creadores de videos con IA, pero Meta también apuesta por el lado audio de la realización cinematográfica. Movie Gen utilizará las indicaciones de texto del video para producir una banda sonora que se combine con la vista, poniendo sonidos de lluvia en una escena lluviosa o motores de automóviles acelerando para acompañar una película ambientada en un atasco de tráfico. Incluso creará nueva música para reproducir en segundo plano e intentará coincidir con el estado de ánimo del vídeo mostrado. El habla humana no forma actualmente parte del repertorio de Movie Gen.
Meta ha mantenido al público impresionantes motores de IA antes, sobre todo con un generador de canciones de IA que, según dijo, era demasiado bueno para lanzarlo debido a preocupaciones sobre el mal uso. La compañía no afirmó que esa fuera la razón para mantener Movie Gen alejado de la mayoría de las personas, pero no sería sorprendente que fuera un factor contribuyente.
Aún así, seguir la ruta OpenAI Sora significa que Meta tiene que ignorar la posibilidad de que un rival más abierto gane parte de su participación de mercado. Y hay una gran cantidad de generadores de video con IA disponibles o que estarán disponibles próximamente. Eso incluye los modelos nuevos o recientemente actualizados de Pista, pika, Estabilidad IA, Hotshoty Luma Labs Máquina de sueñosentre muchos otros.
