3D मॉडलिंग के क्षेत्र में, यथार्थवादी बनावट उत्पन्न करना हमेशा एक चुनौती रहा है। हाल ही में, अल्बर्टा विश्वविद्यालय, टोरंटो विश्वविद्यालय और हुआवेई नोआह आर्क प्रयोगशाला के शोधकर्ताओं ने एक नई विधि - TexGen पेश की है। यह तकनीक उपयोगकर्ता के पाठ विवरण के अनुसार संबंधित 3D बनावट उत्पन्न कर सकती है, और इसका प्रभाव मौजूदा समान तकनीकों की तुलना में काफी बेहतर है।

image.png

उत्पाद का लिंक: https://top.aibase.com/tool/texgen

TexGen का मुख्य आधार एक मल्टी-व्यू सैंपलिंग और रिसैंपलिंग ढांचा है, जो एक पूर्व-प्रशिक्षित टेक्स्ट-टू-इमेज डिफ्यूजन मॉडल का उपयोग करता है। पारंपरिक विधियों में बनावट उत्पन्न करते समय अक्सर स्पष्ट सीमाएं या अत्यधिक चिकनाई की समस्या उत्पन्न होती है।

TexGen RGB स्पेस को पैरामीटर के रूप में उपयोग करके एक बनावट मानचित्र को बनाए रखता है, और हर बार डिफ्यूजन मॉडल के सैंपलिंग चरण के बाद इसे अपडेट करता है, जिससे दृष्टिकोणों के बीच भिन्नता को प्रभावी ढंग से कम किया जा सके। यह दृष्टिकोण-संगत सैंपलिंग विधि हर दृष्टिकोण के बीच की बनावट को अधिक सुसंगत और प्राकृतिक बनाती है।

image.png

TexGen में एक ध्यान-निर्देशित मल्टी-व्यू सैंपलिंग रणनीति भी शामिल की गई है, जिससे बनावट की दृश्यता जानकारी विभिन्न दृष्टिकोणों के बीच प्रसारित की जा सकती है, जिससे सुनिश्चित होता है कि उत्पन्न की गई बनावट सभी दृष्टिकोणों में संगत है।

इसके अलावा, बनावट विवरणों की रक्षा के लिए, शोध टीम ने एक शोर रिसैंपलिंग तकनीक विकसित की है, जो शोर का अनुमान लगाने में मदद करती है और आगे की शोर-मुक्त करने की प्रक्रिया के लिए उचित इनपुट उत्पन्न करती है। इस तरह, TexGen न केवल बनावट उत्पन्न करने में एक प्रगति करता है, बल्कि बनावट संपादन में भी उत्कृष्टता दिखाता है, जिससे मौलिक पहचान को बनाए रखते हुए समायोजन संभव होता है।

कई गुणात्मक और मात्रात्मक मूल्यांकन के बाद, शोध टीम ने पाया कि TexGen विविध 3D वस्तुओं की बनावट गुणवत्ता, दृष्टिकोण संगति और समृद्ध दृश्यता विवरण में काफी उत्कृष्ट प्रदर्शन करता है, जो वर्तमान में सबसे उन्नत विधियों को पार करता है।

नीचे TexGen की तुलना TEXTure, Text2Tex, Fantasia3D और ProlificDreamer के साथ की गई है

image.png

image.png

नीचे कुछ प्रभाव प्रदर्शित किए गए हैं:

image.png

image.png

image.png

मुख्य बिंदु:

🌟 TexGen पाठ विवरण के आधार पर उच्च गुणवत्ता वाली 3D बनावट उत्पन्न कर सकता है, पारंपरिक विधियों में सीमाओं और अत्यधिक चिकनाई की समस्याओं को हल करता है।  

👀 मल्टी-व्यू सैंपलिंग और रिसैंपलिंग ढांचे का उपयोग करते हुए, विभिन्न दृष्टिकोणों के बीच बनावट संगति सुनिश्चित करता है।  

🖌️ नई शोर रिसैंपलिंग तकनीक TexGen को बनावट संपादन में भी उत्कृष्टता प्रदान करती है, जिससे मौलिक शैली को बनाए रखा जा सकता है।