Stability AI ha lanzado su último modelo de inteligencia artificial: Stable Virtual Camera. Este modelo puede convertir imágenes 2D en videos "inmersivos", mostrando profundidad y perspectiva realistas. Las cámaras virtuales se utilizan ampliamente en la producción cinematográfica digital y la animación 3D. Con Stable Virtual Camera, Stability AI espera integrar las ventajas de la IA generativa para ofrecer a los usuarios un mayor control y personalización.
Stable Virtual Camera puede generar "nuevas perspectivas" de una escena a partir de una o más imágenes (hasta 32). Los usuarios también pueden especificar el ángulo de la cámara. El modelo puede generar videos que se mueven a lo largo de trayectorias de cámara "dinámicas" o preestablecidas, incluyendo efectos como "espiral", "zoom", "movimiento" y "panorámica".
La versión actual de Stable Virtual Camera es una versión preliminar para investigación, capaz de generar videos con relaciones de aspecto cuadrado (1:1), vertical (9:16) y horizontal (16:9), con una duración máxima de 1000 fotogramas. Sin embargo, Stability AI advierte que el modelo puede producir resultados de baja calidad en algunos casos, especialmente al procesar imágenes que contienen humanos, animales o "texturas dinámicas" (como el agua).
Stability AI señala en su blog que "las escenas altamente borrosas, las complejas intersecciones de trayectorias de cámara con objetos o superficies, y los objetos de formas irregulares pueden provocar artefactos de parpadeo, especialmente cuando la perspectiva objetivo difiere significativamente de las imágenes de entrada."
Actualmente, Stable Virtual Camera está disponible en la plataforma Hugging Face bajo una licencia no comercial para fines de investigación. Los usuarios pueden descargarlo y probarlo. Stability AI es la empresa detrás del popular modelo de generación de imágenes Stable Diffusion. A pesar de los problemas de gestión y las dificultades financieras del pasado, Stability AI obtuvo una nueva ronda de financiación el año pasado gracias al apoyo de inversores, con el objetivo de cambiar la situación.
Recientemente, Stability AI ha contratado a un nuevo CEO e invitado al director de cine James Cameron a unirse a su consejo de administración. Además, Stability AI ha lanzado varios modelos nuevos de generación de imágenes y, en marzo de este año, colaboró con el fabricante de chips Arm para lanzar un modelo de IA que genera audio y efectos de sonido, con el objetivo de llevar estas funciones a dispositivos móviles con chips Arm.
Puntos clave:
🌟 Stable Virtual Camera puede convertir imágenes 2D en videos inmersivos, ofreciendo varias opciones de trayectoria de cámara.
📉 El modelo actual es una versión preliminar para investigación, y el procesamiento de ciertas escenas puede resultar en una disminución de la calidad.
💼 Stability AI, tras una crisis de gestión, se está reorganizando activamente y lanzando nuevos productos para mejorar sus perspectivas.