Junto a los “AI Agents” y los pequeños modelos personalizables, es la otra gran tendencia del año en materia de IA: modelos capaces de generar vídeos con un realismo sorprendente. Meta anuncia entrar a la carrera con un modelo Movie Gen que no solo crea sino que también puede editar videos. Ten cuidado, te vas a sorprender…
Meta acaba de anunciar el lanzamiento de Generación de películasun modelo de IA generativa de vanguardia que promete transformar profundamente la creación de contenido multimedia. como los famosos sora De OpenAI, esta nueva herramienta de IA permite generar vídeos de alta definición a partir de simples descripciones textuales. Pero también permite editar vídeos existentes e incluso personalizar el contenido integrando la imagen del usuario o generando el audio que acompaña a las imágenes.
Pero al igual que Sora, esta herramienta revolucionaria aún no es de libre acceso y no está reservada para unas pocas personas creativas cuidadosamente seleccionadas.
Veamos más de cerca y en imágenes lo que nos promete Movie Gen. El modelo se distingue por cuatro capacidades principales:
1 – Generación de Vídeo
Crea lo que te inspira tu imaginación… A partir de una simple frase descriptiva (un mensaje), el modelo puede producir vídeos de alta calidad que duran hasta 16 segundos, con una fluidez de 16 fotogramas por segundo. Incluye movimientos de objetos, interacciones sujeto-objeto y movimientos de cámara. Y los resultados propuestos por Meta hablan por sí solos:
<
Aquí tenéis un ejemplo más concreto, producido directamente por la modelo y sin edición de vídeo.
Se generó con el siguiente mensaje:
Un perezoso con gafas de sol rosas yace sobre una boya con forma de donut en una piscina. El perezoso sostiene un cóctel tropical. El ambiente es tropical. La luz del sol proyecta una sombra.
2 – Personalización de vídeos
Ponte en escena… Utilizando una imagen de referencia (tu foto de perfil, por ejemplo), Movie Gen puede crear vídeos personalizados que conservan la identidad y los movimientos de la persona, incorporando elementos descritos en el texto.
A continuación se muestra un ejemplo obtenido utilizando el siguiente mensaje:
Una DJ mezcla discos en una azotea de Los Ángeles. Lleva una chaqueta rosa y unos auriculares enormes. Hay un guepardo al lado de la mujer. El fondo es un paisaje urbano. Utilice la foto adjunta para el rostro de la mujer.
3 – Edición precisa de vídeos
Aún más espectacular: ¡toma un vídeo existente y reinventalo en pocas palabras! La plantilla puede editar videos existentes según instrucciones de texto, agregando, eliminando o reemplazando elementos específicos, dejando el resto del contenido intacto. Esto es muy impresionante, especialmente porque la mayoría de los modelos de IA para generar imágenes fijas generalmente tienen mayores dificultades para comprender las instrucciones de edición.
A continuación se muestra un ejemplo útil generado utilizando indicaciones colocadas en los subtítulos de un vídeo.
4 – Generación de audio
Y como las películas no son nada sin su banda sonora, Movie Gen también puede producir bandas sonoras sincronizadas con el vídeo, incluidos sonidos ambientales, efectos de sonido y música instrumental.
Demostración con este ejemplo generado utilizando el siguiente mensaje:
Una serpiente serpentea por el suelo del bosque, deslizándose entre las hojas. Para el audio, un susurro de hojas y crujido de ramitas, acompañado de una pista musical orquestal.
¿Un nuevo paso dado?
Durante las pruebas comparativas con otros modelos del mercado, como sora de OpenAI, Pista Gen3 y saliendoMovie Gen logró resultados superiores en términos de realismo y fidelidad al texto. Evaluaciones realizadas por humanos -con toda la subjetividad que ello implica- pero que tienden a confirmar que se ha dado un nuevo paso en términos de realismo, fluidez de movimientos y comprensión de instrucciones.
Todo esto es, para Sora, tan estimulante como preocupante. Ya estamos siendo invadidos por deepfakes con IA generadora de imágenes; estas herramientas obviamente solo intensificarán los riesgos. Por no hablar del impacto en el mundo de los diseñadores gráficos, animadores y camarógrafos, particularmente en las empresas. Meta puede insistir en el hecho de que Movie Gen no pretende reemplazar a los artistas o animadores, sino proporcionarles nuevos medios de expresión, nadie se deja engañar por los riesgos.
Aunque Movie Gen representa un importante paso adelante, Meta reconoce que aún se necesitan mejoras antes de poner el modelo en manos de todos. En particular, la empresa está trabajando para reducir el tiempo de procesamiento y mejorar la calidad del vídeo, abordando problemas relacionados con artefactos visuales y sincronización de audio durante movimientos complejos.
Por ahora, Movie Gen sigue siendo un modelo experimental que la compañía sólo quiere confiar a cineastas y creadores cuidadosamente seleccionados. Meta quiere perfeccionar aún más Movie Gen para satisfacer las necesidades reales de los usuarios y garantizar que la herramienta amplifique la creatividad intrínseca de todos, sin plantear nuevos riesgos de ciberseguridad, desinformación, manipulación y otros usos no deseados. Pero con Movie Gen, Meta demuestra una vez más que es necesario contar con sus ingenieros de IA y su know-how para innovar, hacer frente a OpenAI y allanar el camino hacia un futuro en el que la línea entre imaginación y realización se vuelve cada vez más tenue.
Lea también:
OpenAI deslumbra al ámbito de Internet con su nueva IA de vídeo: Sora
Google anuncia VEO, un modelo competidor de SORA de OpenAI
Adobe reinventa la creación de vídeos con IA en Premiere Pro
OpenAI Voice Engine imita tu voz en 15 segundos…
[
