Movie Gen de Meta crea impresionantes vídeos de IA

Meta anunció recientemente su propio modelo de IA centrado en los medios, llamado Movie Gen, que se puede utilizar para generar clips de vídeo y audio en tiempo real.

La compañía compartió varios clips de 10 segundos producidos por Generación de películasincluido un hipopótamo bebé al estilo Moo Deng que nada y muestra sus habilidades. Aunque el dispositivo aún no está disponible para su uso, este anuncio de Movie Gen llega poco después de su evento Meta Connect, que mostró dispositivos nuevos y actualizados y la última versión de su idioma principal, Llama 3.2.

Más allá de la producción de clips de texto en vídeo, el modelo Movie Gen puede realizar cambios específicos en un clip existente, como agregar un objeto a las manos de otra persona o cambiar la apariencia de la superficie. En uno de los vídeos de ejemplo de Meta, una mujer que llevaba un casco de realidad virtual fue modificada para que pareciera que llevaba unos binoculares steampunk.

Se pueden producir fragmentos de sonido junto con vídeos con Movie Gen. En el metraje de muestra, un hombre de IA se encuentra junto a una cascada con sonidos audibles y los esperanzadores sonidos de una sinfonía; El motor de un coche deportivo ruge y los neumáticos chirrían al circular por la pista, y una serpiente se desliza por el suelo del bosque acompañada de bocinazos sospechosos.

Meta compartió más información sobre Movie Gen en un artículo de investigación publicado el viernes. Movie Gen Video tiene 30 mil millones de parámetros, mientras que Movie Gen Audio tiene 13 mil millones de parámetros, la versión más grande de Llama 3.1 tiene 405 mil millones de parámetros). Movie Gen puede producir videos de alta definición de hasta 16 segundos, y Meta afirma que supera a la competencia. procesos. calidad general del vídeo.

A principios de este año, el CEO Mark Zuckerberg mostró la función Imagine Me de Meta AI, donde los usuarios pueden cargar su foto y reproducir su cara en muchas situaciones, cargando una imagen de su IA. ser estrangulado con cadenas de oro en Cuerdas. Es posible una versión de vídeo del mismo formato con el modelo Movie Gen; piense en la versión de ElfYourself con esteroides.

¿En qué temas se educa Movie Gen? Los detalles son vagos en la publicación del anuncio de Meta: “Entrenamos estos modelos en una combinación de datos con licencia y disponibles públicamente”. Las fuentes de información de capacitación y lo que se obtiene directamente de la web son siempre un tema controvertido para las herramientas impulsadas por IA, y la gente rara vez sabe qué texto, video o clips de audio se han utilizado para crear una versión original.

Será interesante ver cuánto tiempo tarda Meta en hacer que Movie Gen esté ampliamente disponible. El blog del anuncio menciona vagamente un “posible lanzamiento futuro”. En comparación, OpenAI anunció su propio modelo de video AI, llamado Sora, a principios de este año y aún no lo ha puesto a disposición del público ni ha compartido ninguna fecha de lanzamiento próxima (aunque WIRED ha reconocido las características de varios Sora específicos de la compañía para investigaciones sobre sesgos). .

Teniendo en cuenta la herencia de Meta como empresa de redes sociales, es posible que las aplicaciones impulsadas por Movie Gen comiencen a aparecer, eventualmente, en Facebook, Instagram y WhatsApp. En septiembre, su rival Google compartió planes para hacer que las funciones de su modelo de video Veo estén disponibles para los creadores en YouTube Shorts en algún momento del próximo año.

Si bien las empresas de tecnología más grandes todavía están esperando lanzar modelos de video completos al público, ahora puede probar herramientas de video de inteligencia artificial de empresas emergentes más pequeñas y prometedoras, como. la forma de correr y Levantar. Prueba Pikaffects si alguna vez has sentido curiosidad por saber cómo sería verte a ti mismo. hilarantemente deprimido con una prensa de agua o derretirlo accidentalmente en el agujero.