हाल ही में, पेकिन विश्वविद्यालय और पेंगचेंग प्रयोगशाला के शोध दल ने "HoloDreamer" नामक एक नए प्रकार का 3D दृश्य निर्माण ढांचा पेश किया है, जिसका उद्देश्य उपयोगकर्ता के पाठ वर्णन के माध्यम से एक वास्तविक, पूर्ण 3D दृश्य उत्पन्न करना है।
यह ढांचा दो मुख्य मॉड्यूल शामिल करता है: पहला "शैलीबद्ध समांतर दृश्य निर्माण", जो उपयोगकर्ता के संकेत के आधार पर उच्च गुणवत्ता वाली समांतर छवियाँ उत्पन्न कर सकता है; दूसरा "संवर्धित दो-चरणीय समांतर पुनर्निर्माण", जो 3D गॉसियन स्प्रे तकनीक का उपयोग करके समांतर को तेजी से पुनर्निर्माण करता है, जिससे उत्पन्न दृश्य का दृष्टिकोण एक समान होता है।
प्रोजेक्ट लिंक: https://top.aibase.com/tool/holodreamer
वर्तमान में, वर्चुअल रियलिटी, गेमिंग और फिल्म उद्योग में 3D दृश्य निर्माण की मांग तेजी से बढ़ रही है। शक्तिशाली पाठ से छवि प्रसार मॉडल की मदद से, सरल पाठ वर्णन के माध्यम से 3D दृश्य उत्पन्न करना संभव हो गया है। यह अभूतपूर्व प्रगति पाठ-प्रेरित 3D दृश्य निर्माण अनुसंधान को आगे बढ़ाएगी।
पारंपरिक विधियाँ अक्सर दृश्य निर्माण के लिए विस्तारित छवियों का उपयोग करती हैं, जिससे दृश्य की एकरूपता और पूर्णता में कमी आती है। HoloDreamer उच्च गुणवत्ता वाली समांतर छवियों को 3D दृश्य के बुनियादी प्रारंभिककरण के रूप में उत्पन्न करता है, और फिर 3D गॉसियन स्प्रे तकनीक का उपयोग करके 3D दृश्य को तेजी से पुनर्निर्माण करता है, जिससे दृष्टिकोण एक समान और पूर्ण 3D दृश्य उत्पन्न होता है।
विशिष्ट रूप से, इस ढांचे का "शैलीबद्ध समांतर दृश्य निर्माण" मॉड्यूल विभिन्न प्रसार मॉडलों का संयोजन करता है, जो जटिल पाठ संकेतों के आधार पर शैलीबद्ध और विस्तृत समांतर छवियाँ उत्पन्न कर सकता है। साथ ही, इस ढांचे में चक्रीय मिश्रण तकनीक का उपयोग किया गया है, जिससे समांतर के घुमाव के दौरान दरारें नहीं आती हैं। इसके बाद, टीम द्वारा पेश किया गया "संवर्धित दो-चरणीय समांतर पुनर्निर्माण" मॉड्यूल गहराई का अनुमान लगाता है और RGBD डेटा को प्रक्षिप्त करता है, जिससे बिंदु बाद की जानकारी प्राप्त होती है।
विभिन्न दृश्यों में दो प्रकार के कैमरे तैयार करके, शोध दल 3D गॉसियन स्प्रे अनुकूलन के विभिन्न चरणों में छवि सेट की निगरानी कर सकता है, जिससे अंतिम पुनर्निर्मित दृश्य को अनुकूलित किया जा सके।
व्यापक प्रयोगों के बाद, HoloDreamer दृश्य एकरूपता, सामंजस्य और पुनर्निर्माण गुणवत्ता और रेंडरिंग Robustness में पिछले शोध परिणामों को पार कर गया है। यह नवोन्मेषी ढांचा भविष्य के विभिन्न अनुप्रयोगों में महत्वपूर्ण भूमिका निभाने की उम्मीद है, जिससे 3D दृश्य अनुभव को और समृद्ध किया जा सके।
मुख्य बिंदु:
🌟 HoloDreamer एक नया 3D दृश्य निर्माण ढांचा है, जो पाठ वर्णन के माध्यम से पूर्ण 3D दृश्य उत्पन्न करता है।
🖼️ ढांचा दो मॉड्यूल शामिल करता है: शैलीबद्ध समांतर निर्माण और संवर्धित समांतर पुनर्निर्माण, जो उत्पन्न परिणाम की उच्च गुणवत्ता और एकरूपता सुनिश्चित करता है।
🚀 HoloDreamer प्रयोगों में उत्कृष्ट प्रदर्शन करता है, पिछले 3D निर्माण विधियों को पार करता है, वर्चुअल रियलिटी और गेमिंग जैसे क्षेत्रों के लिए नए समाधान प्रदान करता है।
