Stability AI a lancé un nouveau modèle d'IA appelé Stable Zero123, capable de générer des vues d'objets 3D de haute qualité à partir d'une seule image. Stable Zero123 surpasse considérablement son prédécesseur, Zero123-XL, grâce à trois innovations clés.
Stable Zero123 utilise un ensemble de données d'entraînement rigoureusement sélectionné provenant d'Objaverse, ne retenant que des objets 3D de haute qualité. Cette amélioration garantit que les objets 3D générés sont plus réalistes.
Pendant l'entraînement et l'inférence du modèle, Stable Zero123 utilise un angle de caméra estimé pour le « conditionnement d'élévation ». Cette technique permet au modèle de faire des prédictions plus précises, améliorant considérablement la qualité des images générées. Stable Zero123 introduit également un jeu de données précalculé et un chargeur de données amélioré, ce qui augmente l'efficacité de l'entraînement de 40 fois.
Stable Zero123 est désormais disponible sur Hugging Face pour téléchargement et expérimentation par les chercheurs et les utilisateurs non commerciaux. Il est important de noter que l'utilisation de ce modèle est soumise à certaines restrictions de licence et qu'il existe deux versions : Stable Zero123 et Stable Zero123C. La première contient des objets 3D sous licence CC-BY-NC et est uniquement destinée à la recherche ; la seconde n'utilise que des objets sous licence CC-BY et CC0, et permet une utilisation commerciale aux membres Stability AI.
De plus, Stable Zero123 est combiné avec le code source ouvert threestudio, soutenant la recherche open source sur la génération d'objets 3D. Actuellement, une version simplifiée du processus Stable3D est en prévisualisation privée. Grâce à cette méthode, les utilisateurs peuvent optimiser les champs de radiance neuronaux (NeRF) à l'aide de l'échantillonnage par distillation de score (SDS) pour construire des modèles 3D texturés à partir des images générées par le modèle Stable Zero123.
Le lancement de Stable Zero123 représente non seulement une avancée technologique significative dans le domaine de la génération d'objets 3D, mais offre également de nouvelles possibilités pour la recherche et les applications commerciales.
Blog officiel : https://stability.ai/news/stable-zero123-3d-generation
Points clés :
🌟 Stable Zero123 génère des vues d'objets 3D de haute qualité à partir d'une seule image, améliorant considérablement les résultats.
📈 Le modèle permet une génération d'images plus précise grâce à un jeu de données amélioré et à la technique de conditionnement d'élévation.
🆕 Stable Zero123 est disponible en version recherche et version commerciale, cette dernière nécessitant un abonnement Stability AI.