Fashion-3DLR: A Controllable 3D Garment Generation Using Pairwise Fashion Elements for Intelligent Design
यह शोधपत्र Fashion-3DLR का परिचय देता है, जो एक 'गारमेंट फीचर फ्यूजन डिफ्यूजन ट्रांसफॉर्मर' का उपयोग करता है ताकि विविध 2D डिज़ाइन तत्वों को लेटेंट स्पेस में एकीकृत किया जा सके, जिससे उच्च गुणवत्ता वाले, नियंत्रणीय 3D गारमेंट्स उत्पन्न किए जा सकें जो भौतिक सिमुलेशन और वर्चुअल ट्राई-ऑन में सक्षम हैं, और इस प्रकार मौजूदा अत्याधुनिक विधियों से बेहतर प्रदर्शन कर सकें।
मूल पेपर CC BY 4.0 (http://creativecommons.org/licenses/by/4.0/) के तहत लाइसेंस किया गया है। नीचे दिए गए पेपर की यह व्याख्या AI से तैयार की गई है। इसे लेखकों ने न तो लिखा है, न इसका समर्थन किया है। तकनीकी सटीकता के लिए मूल पेपर देखें। पूरा डिस्क्लेमर पढ़ें
कल्पना कीजिए कि आप एक कलाकार हैं जो मिट्टी से एक दुनिया बनाने की कोशिश कर रहे हैं। आपके पास एक किले का रेखाचित्र (स्केच) है, एक ईंट की बनावट (टेक्सचर) की फोटो है, और एक सूर्यास्त की पेंटिंग है। 2D कला की दुनिया में, कंप्यूटर इन सुरागों को मिलाकर एक तस्वीर बनाने में बहुत माहिर हो गए हैं। लेकिन क्या होगा अगर आप एक वास्तविक, त्रि-आयामी (3D) किला बनाना चाहते हैं जिसे आप चारों ओर से देख सकें, छू सकें, और यहाँ तक कि इसके बुर्जों से हवा को गुजरते हुए भी देख सकें? यह "3D जनरेटिव एआई" (3D generative AI) की कठिन सीमा है। यह एक केक बनाने जैसा है जहाँ आपको एक साथ रेसिपी, सामग्री और ओवन, तीनों का आविष्कार करना पड़ता है, और साथ ही यह भी सुनिश्चित करना होता है कि केक बाहर निकालते समय ढह न जाए। फिलहाल, 3D कपड़े बनाना विशेष रूप से कठिन है क्योंकि कपड़ा लचीला, जटिल होता है और उसे हर कोण से असली दिखना चाहिए। यदि कंप्यूटर गलत करता है, तो शर्ट प्लास्टिक के एक ठोस ब्लॉक या एक चपटे पैनकेक में बदल सकती है जिसे पहना नहीं जा सकता। यह वह पहेली है जिसे हल करने के लिए शोधकर्ताओं की एक टीम ने हाथ लगाया है: हम कंप्यूटर को 3D कपड़े कैसे डिज़ाइन करना सिखाएं जो असली कपड़े की तरह दिखें, असली कपड़े की तरह हिलें, और जिन्हें केवल एक स्केच और टेक्सचर के साथ कस्टमाइज़ किया जा सके?
यहाँ Fashion-3DLR आता है, एक नया डिजिटल टूल जो एक अत्यंत बुद्धिमान फैशन आर्किटेक्ट की तरह काम करता है। केवल एक शर्ट का चित्र बनाने के बजाय, यह सिस्टम एक 3D वस्तु बनाता है जिसे आप वास्तव में वीडियो गेम या वर्चुअल फिटिंग रूम में उपयोग कर सकते हैं। इसका असली रहस्य यह है कि यह विभिन्न प्रकार के सुरागों को कैसे मिलाता है। कल्पना कीजिए कि आपने कंप्यूटर को एक ड्रेस का एक कच्चा स्केच (आकार) और रेशम के पैटर्न की एक फोटो (दिखावट) दी। पुराने तरीके अक्सर भ्रमित हो जाते थे, आकार और पैटर्न को मिलाकर एक गड़बड़ ढेर बना देते थे। हालाँकि, Fashion-3DLR एक विशेष "फ्यूजन इंजन" का उपयोग करता है जिसे GFF-DiT कहा जाता है। इस इंजन को एक मास्टर शेफ के रूप में समझें जो जानता है कि दो अलग-अलग सामग्रियों—जैसे कि एक तीखी चटनी और एक मीठे फल—को बिना किसी का स्वाद खोए, बिल्कुल कैसे मिलाना है। यह स्केच और टेक्सचर को लेता है, उन्हें एक छिपे हुए डिजिटल स्थान में मिलाता है, और फिर उन्हें एक 3D परिधान में "बेक" (तैयार) करता है।
जो बात इस पेपर को वास्तव में रोमांचक बनाती है वह यह है कि परिणाम केवल एक स्थिर मूर्ति नहीं है। टीम ने दिखाया कि उनके 3D कपड़े वास्तव में हिल सकते हैं। उन्होंने कपड़े का प्रतिनिधित्व करने के लिए छोटे, चमकते बिंदुओं (जिन्हें 3D गॉसियन्स कहा जाता है) वाली एक तकनीक का उपयोग किया। कपड़े को एक कठोर जाल (रिजिड मेश) की तरह मानने के बजाय, उन्होंने इसे कणों के एक झुंड की तरह मॉडल किया जो खिंच सकते हैं, मुड़ सकते हैं और झूम सकते हैं। अपने सिमुलेशन में, उन्होंने कपास, रेशम, ऊन और नायलॉन जैसे विभिन्न सामग्रियों का परीक्षण किया। जब उन्होंने हवा का सिमुलेशन किया, तो डिजिटल रेशम, डिजिटल ऊन की तुलना में अलग तरह से लहराया, ठीक वैसे ही जैसे वास्तविक जीवन में होता है। वे ऐसे कपड़े बनाने में भी सफल रहे जो "वॉटरटाइट" (मतलब जिनमें हाथ और गर्दन के लिए छेद हों) नहीं हैं, जो एक बड़ी उपलब्धि है क्योंकि कई एआई मॉडल गलती से ठोस, पहनने के अयोग्य ढेर बना देते हैं।
शोधकर्ताओं ने अपने निर्माण का परीक्षण अन्य शीर्ष स्तर के एआई मॉडलों के विरुद्ध किया। उन्होंने पाया कि Fashion-3DLR स्केच के आकार को बनाए रखते हुए सही टेक्सचर जोड़ने में बहुत बेहतर था। अपने परीक्षणों में, नई विधि ने पिछले उपकरणों की तुलना में सटीकता और यथार्थवाद पर काफी अधिक स्कोर किया। उन्होंने यह भी दिखाया कि आप इन 3D कपड़ों को एक डिजिटल मानव मॉडल पर "वर्चुअल ट्राई-ऑन" के लिए लगा सकते हैं, और कपड़े फिट और स्वाभाविक दिखते हैं, जबकि अन्य विधियाँ अक्सर अजीब, विकृत आस्तीन या बेमेल पैटर्न पैदा करती हैं।
हालाँकि, लेखक यह ध्यान दिलाना चाहते हैं कि यह अभी तक सब कुछ हल करने वाली कोई जादुई छड़ी नहीं है। हालाँकि कपड़े कंप्यूटर में शानदार दिखते हैं और अच्छी तरह से हिलते हैं, वे वर्तमान में एक अलग प्रकार के डिजिटल मेश से बने 3D मानव शरीर के साथ इंटरैक्ट नहीं कर सकते। यह एक आदर्श डिजिटल ड्रेस रखने जैसा है जो एक डिजिटल पुतले के पास तैर रही है लेकिन अभी तक उस पर पूरी तरह से "फिट" नहीं हुई है। टीम का सुझाव है कि इन विभिन्न 3D शैलियों को जोड़ना और अधिक विस्तृत सिलाई पैटर्न जोड़ना अगला बड़ा कदम है। लेकिन फिलहाल, Fashion-3DLR सरल स्केच और टेक्सचर को उच्च-गुणवत्ता वाले, चलने योग्य और कस्टमाइज़ करने योग्य 3D फैशन में बदलने का एक शक्तिशाली तरीका है, जो हमें एक ऐसे भविष्य के करीब लाता है जहाँ वार्डरोब डिजाइन करना एआई के साथ चैट करने जितना आसान होगा।
अपने क्षेत्र के पेपरों की भीड़ में उलझे हुए हैं?
आपके रिसर्च कीवर्ड से मेल खाने वाले सबसे नए और अलग सोच वाले पेपरों का रोज़ाना Digest पाएँ—तकनीकी सारांश के साथ, आपकी भाषा में।