Ouroboros3D
Un framework permettant de générer des modèles 3D par diffusion récursive avec perception 3D.
Produit OrdinaireImageGénération 3DDiffusion récursive
Ouroboros3D est un framework de génération 3D unifié qui intègre la génération d'images multivues basée sur la diffusion et la reconstruction 3D dans un processus de diffusion récursif. Ce framework entraîne conjointement ces deux modules grâce à un mécanisme d'auto-conditionnement, leur permettant de s'adapter mutuellement pour une inférence robuste. Pendant le processus de débruitage multivues, le modèle de diffusion multivues utilise une carte perceptive 3D, rendue par le module de reconstruction à l'étape temporelle précédente, comme condition supplémentaire. La combinaison du framework de diffusion récursive et du retour d'information perceptif 3D améliore la cohérence géométrique globale. Les expériences montrent qu'Ouroboros3D surpasse les méthodes entraînant séparément ces deux étapes, ainsi que les méthodes existantes combinant ces étapes en phase d'inférence.