Recientemente, el campo de la IA ha experimentado un gran avance: Captions ha lanzado oficialmente su nuevo modelo de IA, Mirage, que revoluciona por completo las técnicas tradicionales de sincronización de labios y generación de video. Mirage puede analizar guiones o clips de audio y generar en tiempo real videos de estilo UGC (contenido generado por el usuario) con personajes inexistentes. La realidad de sus expresiones faciales y lenguaje corporal supera con creces a las tecnologías anteriores, marcando un nuevo hito en la creación de videos con IA.
La principal ventaja de Mirage reside en su capacidad de "generación desde cero". Sin necesidad de material pregrabado o herramientas tradicionales de sincronización de labios, puede generar personajes originales, fondos, voces e incluso guiones completos a partir de audio o texto de entrada.
El equipo de Captions afirma que Mirage utiliza una tecnología de IA generativa avanzada, entrenada con una gran cantidad de muestras de interpretaciones humanas reales, lo que permite que la salida de microexpresiones faciales y movimientos naturales sea tan realista que resulta difícil distinguirla de la realidad. En comparación con los métodos antiguos de sincronización labial y doblaje, los personajes de Mirage no solo tienen una sincronización labial precisa, sino que también sus miradas, asentimientos y otros detalles se ajustan perfectamente al contexto.
Expertos del sector señalan que el lanzamiento de Mirage simplificará enormemente el proceso de producción de video, especialmente para la publicidad y los creadores de contenido. Desde la introducción del guion hasta la generación del video completo, solo se necesitan unos minutos, sin necesidad de actores, estudios de grabación o complejas ediciones posteriores, lo que reduce considerablemente los costes y el tiempo. Actualmente, Mirage admite la generación de videos en más de 29 idiomas, lo que facilita la promoción en el mercado global.
Z
Las pruebas de usuario muestran que los "personajes inexistentes" generados por Mirage se comportan de forma natural en los videos UGC, y los espectadores incluso tienen dificultades para detectar que son producto de la IA. Captions se compromete a optimizar aún más el modelo en el futuro y a añadir más opciones de personalización. Este salto en la tecnología de sincronización labial con IA no solo mejora la eficiencia creativa, sino que también eleva el realismo de los personajes virtuales a un nuevo nivel, por lo que merece la pena seguir de cerca su impacto futuro.
Dirección de prueba: https://www.captions.ai/mirage