Stability AI a lancé son dernier modèle d'intelligence artificielle, Stable Virtual Camera, capable de transformer des images 2D en vidéos « immersives » avec une profondeur et des perspectives réalistes. Habituellement utilisées dans la production cinématographique numérique et l'animation 3D, les caméras virtuelles bénéficient désormais des avantages de l'IA générative grâce à Stable Virtual Camera, offrant ainsi aux utilisateurs un meilleur contrôle et des options de personnalisation accrues.
Stable Virtual Camera peut générer de « nouveaux points de vue » d'une scène à partir d'une ou plusieurs images (jusqu'à 32), l'utilisateur pouvant spécifier l'angle de la caméra. Le modèle peut générer des vidéos avec un mouvement de caméra le long d'un chemin « dynamique » ou prédéfini, incluant des effets tels que « spirale », « zoom », « déplacement » et « panoramique ».
La version actuelle de Stable Virtual Camera est une version préliminaire à des fins de recherche. Elle permet de générer des vidéos dans trois formats : carré (1:1), portrait (9:16) et paysage (16:9), jusqu'à 1000 images. Cependant, Stability AI avertit que le modèle peut produire des résultats de qualité inférieure dans certains cas, notamment lors du traitement d'images contenant des humains, des animaux ou des « textures dynamiques » (comme l'eau).
Stability AI indique sur son blog que « les scènes très floues, les intersections complexes de chemins de caméra avec des objets ou des surfaces, ainsi que les objets de forme irrégulière peuvent entraîner des artefacts de scintillement, notamment lorsque l'angle de vue cible diffère fortement des images d'entrée. »
Actuellement, Stable Virtual Camera est disponible sur la plateforme Hugging Face sous licence non commerciale à des fins de recherche. Les utilisateurs peuvent le télécharger et l'essayer. Stability AI est la société à l'origine de Stable Diffusion, le modèle de génération d'images très populaire. Malgré des problèmes de gestion et des difficultés financières par le passé, Stability AI a obtenu un nouveau financement l'année dernière grâce au soutien d'investisseurs, dans le but de redresser la situation.
Récemment, Stability AI a nommé un nouveau PDG et a invité le réalisateur James Cameron à rejoindre son conseil d'administration. De plus, Stability AI a publié plusieurs nouveaux modèles de génération d'images et a collaboré en mars dernier avec le fabricant de puces Arm pour lancer un modèle d'IA capable de générer de l'audio et des effets sonores, visant à intégrer ces fonctionnalités aux appareils mobiles fonctionnant avec des puces Arm.
Points clés :
🌟 Stable Virtual Camera permet de convertir des images 2D en vidéos immersives, offrant plusieurs options de chemins de caméra.
📉 Le modèle actuel est une version préliminaire à des fins de recherche, et la qualité peut diminuer pour certains types de scènes.
💼 Après une crise de gestion, Stability AI se restructure activement et lance de nouveaux produits pour améliorer ses perspectives.