Stability AI hat ein neues KI-Modell namens Stable Zero123 veröffentlicht, das aus einem einzigen Bild hochwertige 3D-Objektansichten generieren kann. Stable Zero123 übertrifft seinen Vorgänger Zero123-XL deutlich in der Qualität der Ergebnisse, hauptsächlich dank dreier wichtiger Innovationen.
Stable Zero123 verwendet einen sorgfältig kuratierten Datensatz aus Objaverse, der ausschließlich hochwertige 3D-Objekte enthält. Diese Verbesserung sorgt für realistischere generierte 3D-Objekte.
Während des Trainings und der Inferenz verwendet Stable Zero123 geschätzte Kamerawinkel für „Elevation Conditioning“. Diese Technik ermöglicht genauere Vorhersagen und verbessert die Qualität der generierten Bilder deutlich. Stable Zero123 führt außerdem einen vorkalkulierten Datensatz und einen verbesserten Datenlader ein, wodurch die Trainingsgeschwindigkeit um das 40-fache gesteigert wird.
Stable Zero123 ist jetzt auf Hugging Face verfügbar und kann von Forschern und nicht-kommerziellen Nutzern heruntergeladen und getestet werden. Beachten Sie, dass die Nutzung des Modells bestimmten Lizenzbeschränkungen unterliegt und in zwei Versionen verfügbar ist: Stable Zero123 und Stable Zero123C. Ersteres enthält einige 3D-Objekte unter CC-BY-NC-Lizenz und darf nur für Forschungszwecke verwendet werden; Letzteres verwendet nur Objekte unter CC-BY- und CC0-Lizenz und erlaubt die kommerzielle Nutzung für Mitglieder von Stability AI.
Darüber hinaus ist Stable Zero123 mit dem Open-Source-Code threestudio integriert und unterstützt die Open-Source-Forschung zur 3D-Objektgenerierung. Derzeit befindet sich ein vereinfachter Stable3D-Workflow in einer privaten Vorschau. Mit diesem Verfahren können Benutzer mithilfe von Score Distillation Sampling (SDS) neuronale Strahlungsfelder (NeRF) optimieren und aus den vom Stable Zero123-Modell generierten Bildern texturreiche 3D-Modelle erstellen.
Die Veröffentlichung von Stable Zero123 stellt nicht nur einen bedeutenden technischen Fortschritt im Bereich der 3D-Objektgenerierung dar, sondern bietet auch neue Möglichkeiten für Forschung und kommerzielle Anwendungen.
Offizieller Blog: https://stability.ai/news/stable-zero123-3d-generation
Highlights:
🌟 Stable Zero123 generiert aus einem einzigen Bild hochwertige 3D-Objektansichten und verbessert die Ergebnisse deutlich.
📈 Das Modell erzielt durch verbesserte Datensätze und Elevation-Conditioning-Technik genauere Bildgenerierungen.
🆕 Stable Zero123 ist in einer Forschungs- und einer kommerziellen Version verfügbar. Für die kommerzielle Version ist eine Stability AI-Mitgliedschaft erforderlich.