हाल ही में, अलीबाबा समूह की अनुसंधान टीम ने UniPortrait नामक एक नया ढांचा जारी किया है, जो पोर्ट्रेट छवियों की व्यक्तिगत प्रक्रिया पर केंद्रित है, जिसमें एकल चरित्र संगति, बहु-चरित्र संगति और शैली संदर्भ शामिल हैं।
यह ढांचा न केवल एकल पहचान की छवियों को संसाधित कर सकता है, बल्कि बहु-चरित्र परिदृश्यों में उच्च गुणवत्ता की व्यक्तिगत अनुकूलन भी कर सकता है। UniPortrait की विशेषता यह है कि यह चेहरे की विशेषताओं को अत्यधिक यथार्थवादी बनाए रखता है और चेहरे संपादन की विस्तृत सुविधाओं का समर्थन करता है, उपयोगकर्ता यहां तक कि स्वतंत्र रूप से पाठ विवरण का उपयोग करके अपनी इच्छित छवि उत्पन्न कर सकते हैं, बिना किसी निश्चित लेआउट की आवश्यकता के।
एकल चरित्र संगति
UniPortrait का मुख्य भाग दो मॉड्यूल से बना है: ID एम्बेडिंग मॉड्यूल और ID राउटिंग मॉड्यूल। ID एम्बेडिंग मॉड्यूल प्रत्येक पहचान की संपादित करने योग्य चेहरे की विशेषताओं को निकालने के लिए जिम्मेदार है, और इन विशेषताओं को विसरण मॉडल के संदर्भ स्थान में अलग-अलग तरीके से एम्बेड करता है। इसके बाद, ID राउटिंग मॉड्यूल छवि संश्लेषण में विभिन्न क्षेत्रों के आधार पर इन विशेषताओं को स्वचालित रूप से संयोजित और वितरित करता है, जिससे एकल और कई पहचान की व्यक्तिगत अनुकूलन की सुविधा मिलती है।
बहु-चरित्र संगति
प्रशिक्षण प्रक्रिया के दौरान, UniPortrait ने सावधानीपूर्वक डिज़ाइन किए गए दो-चरणीय प्रशिक्षण कार्यक्रम को अपनाया। पहला चरण एकल पहचान के प्रशिक्षण पर केंद्रित है, जबकि दूसरा चरण बहु- पहचान के लिए ट्यूनिंग है। इस प्रशिक्षण विधि के माध्यम से, UniPortrait एकल और बहु पहचान के अनुकूलन प्रदर्शन में मौजूदा विधियों से बेहतर प्रदर्शन करता है, और प्रयोगात्मक परिणाम इसके अच्छे विस्तारशीलता को भी दर्शाते हैं, जो मौजूदा उत्पन्न नियंत्रण उपकरणों के साथ सामान्य संगतता प्रदान करता है।
UniPortrait का लॉन्च पोर्ट्रेट छवियों के व्यक्तिगत अनुकूलन में नए संभावनाओं को लाता है, विशेष रूप से स्वतंत्र रूप से पाठ संकेत और विविध लेआउट उत्पन्न करने के मामले में। अनुसंधान टीम ने कई एकल और बहु पहचान के व्यक्तिगत उदाहरणों को प्रदर्शित किया, जो इस ढांचे के वास्तविक अनुप्रयोग में विशाल संभावनाओं को दर्शाते हैं। संक्षेप में, UniPortrait न केवल छवि उत्पन्न करने की गुणवत्ता को बढ़ाता है, बल्कि भविष्य के विभिन्न अनुप्रयोग परिदृश्यों के लिए रास्ता भी तैयार करता है।
उत्पाद परियोजना प्रवेश: https://top.aibase.com/tool/uniportrait
परीक्षण प्रवेश: https://huggingface.co/spaces/Junjie96/UniPortrait
महत्वपूर्ण बिंदु:
🌟Portrait एक नया ढांचा है, जो एकल और बहु पहचान की छवि व्यक्तिगत प्रक्रिया पर ध्यान केंद्रित करता है, जिसमें उच्च गुणवत्ता की चेहरे की विशेषताओं को बनाए रखता है।
✍️ यह ढांचा ID एम्बेडिंग मॉड्यूल और ID राउटिंग मॉड्यूल से बना है, जो दो-चरणीय प्रशिक्षण योजना के माध्यम से प्रभावी अनुकूलन को सक्षम बनाता है।
🚀 UniPortrait पोर्ट्रेट व्यक्तिगत अनुकूलन के लिए समृद्ध संभावनाएँ प्रदान करता है, स्वतंत्र पाठ विवरण और विविध लेआउट उत्पन्न करने का समर्थन करता है।
