← नवीनतम पेपर
🤖 machine learning

Analytic Distribution of Classifier-Free Guidance for Schedule Design

यह शोध पत्र क्लासिफायर-फ्री गाइडेंस (Classifier-Free Guidance) वितरणों के लिए सटीक विश्लेषणात्मक पाथ-इंटिग्रल निरूपण व्युत्पन्न करता है ताकि यह प्रकट किया जा सके कि गाइडेंस शेड्यूल्स सैंपलिंग को कैसे प्रभावित करते हैं, जिससे प्रस्तावित डिस्ट्रीब्यूशन-गाइडेड CFG (DG-CFG) शेड्यूलिंग प्राप्त होती है जो डिफ्यूजन मॉडल्स में डाइवर्सिटी-फिडेलिटी ट्रेड-ऑफ और सैंपलिंग दक्षता में महत्वपूर्ण सुधार करती है।

मूल लेखक: Enze Jiang, Zheng Ma

प्रकाशित 2026-07-23
📖 7 मिनट में पढ़ें🧠 गहराई से पढ़ें

मूल लेखक: Enze Jiang, Zheng Ma

मूल पेपर CC BY 4.0 (http://creativecommons.org/licenses/by/4.0/) के तहत लाइसेंस किया गया है। नीचे दिए गए पेपर की यह व्याख्या AI से तैयार की गई है। इसे लेखकों ने न तो लिखा है, न इसका समर्थन किया है। तकनीकी सटीकता के लिए मूल पेपर देखें। पूरा डिस्क्लेमर पढ़ें

कल्पना कीजिए कि आप एक रोबोट को आपके द्वारा दिए गए विवरण के आधार पर एक चित्र बनाने के लिए सिखाने की कोशिश कर रहे हैं, जैसे कि "एक टोपी पहने हुए बिल्ली।" रोबोट खाली कैनवास से शुरुआत नहीं करता है; वह शोर के एक अराजक तूफान से शुरू करता है, जैसे कि एक मृत चैनल वाला टीवी। उस शोर को एक स्पष्ट छवि में बदलने के लिए, रोबोट एक चतुर तकनीक का उपयोग करता है जिसे "डिफ्यूजन मॉडल" कहा जाता है। इस प्रक्रिया को रिवर्स में चली एक स्लो-मोशन फिल्म के रूप में समझें: रोबोट धीरे-धीरे शोर को हटाता है, कदम-दर-कदम, जब तक कि एक स्पष्ट छवि उभर न आए।

लेकिन पेचीदा हिस्सा यह है: रोबोट को यह जानने की जरूरत है कि क्या हटाना है और क्या रखना है ताकि वह आपके विवरण से मेल खा सके। यदि आप केवल इसे शोर हटाने के लिए कहते हैं, तो यह एक यादृच्छिक (random) बिल्ली या एक यादृच्छिक टोपी बना सकता है। इसे ठीक करने के लिए, हम "क्लासिफायर-फ्री गाइडेंस" (CFG) नामक एक तकनीक का उपयोग करते हैं। कल्पना कीजिए कि रोबोट के पास दो आंतरिक आवाजें हैं। एक आवाज "विशेषज्ञ" (Expert) की है जो जानता है कि टोपी पहने हुए बिल्ली कैसी दिखती है। दूसरी आवाज "सामान्यज्ञ" (Generalist) की है जो केवल बिल्लियों और टोपियों को अलग-अलग जानता है, बिना उनके विशिष्ट संयोजन के। CFG इस तरह काम करता है कि यह रोबोट को विशेषज्ञ की बात अधिक सुनने और सामान्यज्ञ की बात कम सुनने के लिए कहता है। यदि आप विशेषज्ञ का "वॉल्यूम" अधिक बढ़ाते हैं, तो चित्र आपके विवरण से अधिक मेल खाता है, लेकिन यदि आप इसे बहुत अधिक बढ़ा देते हैं, तो चित्र अजीब, अत्यधिक संतृप्त (oversaturated) या विविधता खो सकता है।

लंबे समय तक, वैज्ञानिकों को लगा कि वे समझते थे कि यह वॉल्यूम नॉब कैसे काम करता है। उनका मानना था कि यदि आप वॉल्यूम को एक विशिष्ट स्तर पर सेट करते हैं, तो रोबोट बस दो आवाजों को एक निश्चित अनुपात में मिला देगा ताकि अंतिम चित्र बन सके। हालांकि, शंघाई जियाओ टोंग विश्वविद्यालय के एनज़े जियांग और झेंग मा द्वारा लिखे गए एक नए शोध पत्र ने सुझाव दिया है कि यह सरल "मिश्रण" वाला विचार वास्तव में थोड़ा झूठ है। उन्होंने खोजा कि रोबोट केवल अंत में दो आवाजों को एक बार नहीं मिलाता है; बल्कि, जिस तरह से वह सुनता है, वह शोर को हटाते समय लगातार बदलता रहता है, और प्रत्येक चरण में वह "वॉल्यूम" जो वह सुनता है, एक जटिल, छिपे हुए तरीके से जुड़ता जाता है जिसे पुराने सिद्धांत ने मिस कर दिया था।

छिपी हुई यात्रा और नया मानचित्र

लेखकों को एहसास हुआ कि CFG के बारे में सोचने का मानक तरीका एक सड़क यात्रा को केवल उसके शुरुआती बिंदु और गंतव्य को देखकर समझने जैसा था, बीच के घुमावों और मोड़ को अनदेखा करते हुए। उन्होंने इस यात्रा को मैप करने के लिए उन्नत गणित (विशेष रूप से "प्रोबेबिलिटी फ्लो ODEs" नामक कुछ) का उपयोग किया।

उन्होंने जो पाया वह आश्चर्यजनक था। उन्होंने एक सटीक गणितीय सूत्र निकाला जिससे पता चला कि अंतिम चित्र केवल दो आवाजों का एक साधारण मिश्रण नहीं है। इसके बजाय, अंतिम परिणाम वह लक्ष्य चित्र है जिसे एक "सुधार कारक" (correction factor) से गुणा किया गया है। यह कारक एक लंबे, घुमावदार पथ की तरह है जिस पर रोबोट यात्रा करता है। इस पथ के दौरान, रोबोट लगातार यह जांचता है कि विशेषज्ञ क्या चाहता है और सामान्यज्ञ क्या चाहता है, और उनके बीच के अंतर को देखता है। यदि दो आवाजें किसी भी बिंदु पर दृढ़ता से असहमत होती हैं, तो रोबोट को एक "जुर्माना" (penalty) भुगतना पड़ता है जो अंतिम चित्र को बदल देता है।

यह पेपर तर्क देता है कि पुराने तरीके में केवल एक स्थिर वॉल्यूम सेट करना (जैसे पूरी यात्रा के दौरान नॉब को "5" पर रखना) वास्तव में अक्षम है। क्यों? क्योंकि रोबोट के मस्तिष्क में "शोर" एक समान नहीं है। प्रक्रिया की शुरुआत में, छवि ज्यादातर स्टैटिक (static) होती है, और शोर बहुत तेज होता है। अंत में, छवि स्पष्ट होती है, और शोर शांत होता है। लेखक दिखाते हैं कि एक स्थिर वॉल्यूम नॉब अनजाने में तब वॉल्यूम बहुत अधिक बढ़ा देता है जब शोर तेज होता है (यात्रा की शुरुआत में) और तब बहुत कम कर देता है जब शोर शांत होता है (यात्रा के अंत में)। यह असंतुलन रोबोट को अजीब, अत्यधिक चमकीले रंगों पर अटक जाने या चित्र के सूक्ष्म विवरणों को खो देने का कारण बनता है।

समाधान: एक स्मार्ट, बदलता हुआ वॉल्यूम

इसे ठीक करने के लिए, लेखकों ने एक नया, स्मार्ट तरीका डिजाइन किया है, जिसे वे DG-CFG (डिस्ट्रीब्यूशन-गाइडेड क्लासिफायर-फ्री गाइडेंस) कहते हैं। वॉल्यूम को स्थिर रखने के बजाय, उनका तरीका सफाई प्रक्रिया के हर चरण में वॉल्यूम को स्वचालित रूप से समायोजित करता है।

इसे एक कार में स्मार्ट क्रूज कंट्रोल की तरह समझें। यदि सड़क ऊबड़-खाबड़ है (उच्च शोर), तो कार धीमी हो जाती है और अपने सस्पेंशन को एडजस्ट करती है। यदि सड़क चिकनी है (कम शोर), तो वह गति पकड़ती है और विवरणों पर ध्यान केंद्रित करती है। DG-CFG इमेज जनरेटर के लिए भी ऐसा ही करता है:

  1. यह शोर को संतुलित करता है: यह वॉल्यूम को कम कर देता है जब शोर तेज होता है ताकि रोबोट अभिभूत न हो जाए।
  2. यह सिग्नल पर ध्यान केंद्रित करता है: यह वॉल्यूम को बढ़ाता है जब वास्तविक छवि दिखाई देने लगती है, ताकि रोबोट विवरणों पर ध्यान दे सके।
  3. यह त्रुटियों से बचाता है: यह अंत में वॉल्यूम को थोड़ा कम कर देता है ताकि रोबोजन गलतियाँ न करे क्योंकि जब छवि लगभग पूर्ण होती है तो गणित जटिल हो जाता है।

क्या यह वास्तव में काम करता है?

लेखकों ने केवल गणित नहीं किया; उन्होंने इसका परीक्षण भी किया। पहले, उन्होंने एक छोटा, सरल "टॉय" मॉडल बनाया जहाँ वे सटीक उत्तर की गणना कर सकते थे। जब उन्होंने अपने नए तरीके को इस टॉय मॉडल पर चलाया, तो परिणाम उनके जटिल गणितीय सूत्रों से पूरी तरह मेल खाए, जिससे सिद्ध हुआ कि उनका सिद्धांत सही है।

फिर, उन्होंने स्टेबल डिफ्यूजन 1.5 नामक एक वास्तविक, शक्तिशाली इमेज जनरेटर पर इसका परीक्षण किया। उन्होंने रोबोट को विभिन्न वॉल्यूम सेटिंग्स (हल्के से चरम तक) का उपयोग करके चित्र बनाने के लिए कहा।

  • पुराना तरीका (Constant CFG): जब उन्होंने बहुत विस्तृत चित्र प्राप्त करने के लिए वॉल्यूम को बहुत अधिक बढ़ाया, तो चित्र अक्सर बदसूरत हो गए, जिनमें नियॉन-चमकीले रंग और अजीब, फीके टेक्सचर दिखने लगे।
  • नया तरीका (DG-CFG): उन समान उच्च वॉल्यूम सेटिंग्स पर भी, चित्र प्राकृतिक बने रहे। रंग अत्यधिक संतृप्त नहीं थे, विवरण स्पष्ट थे, और छवियां अधिक यथार्थवादी दिखीं।

उन्होंने यह भी मापा कि रोबोट को एक अच्छा चित्र बनाने के लिए कितने चरणों की आवश्यकता थी। उन्होंने पाया कि DG-CFG के साथ, रोबोट पुराने तरीकों की तुलना में कम चरणों में उच्च गुणवत्ता वाला परिणाम प्राप्त कर सकता है। दूसरे शब्दों में, नया तरीका न केवल सुंदर चित्र बनाने में बेहतर है, बल्कि यह तेज और चलाने में सस्ता भी है।

निष्कर्ष

यह पेपर केवल यह नहीं कहता कि "नॉब को अलग तरह से घुमाने की कोशिश करें।" यह एक गणितीय मानचित्र प्रदान करता है जो दिखाता है कि पुराना तरीका क्यों टूटा हुआ था और इसे कैसे ठीक किया जाए। यह समझकर कि शोर के माध्यम से रोबोट की यात्रा एक ऐसा पथ है जहाँ बदलाव जमा होते हैं, लेखकों ने एक ऐसा शेड्यूल बनाया है जो रोबोट को अधिक सावधानी से निर्देशित करता है। परिणाम एक ऐसा तरीका है जो उच्च-गुणवत्ता वाली छवियां उत्पन्न करता है जो अधिक विविध हैं, रंग की त्रुटियों के प्रति कम संवेदनशील हैं, और जिन्हें प्राप्त करने के लिए कम कंप्यूटिंग पावर की आवश्यकता होती है। यह हमें याद दिलाता है कि AI की दुनिया में, कभी-कभी रहस्य केवल कड़ी मेहनत करने में नहीं है, बल्कि सही समय पर सही आवाज सुनने में स्मार्ट बनने में है।

अपने क्षेत्र के पेपरों की भीड़ में उलझे हुए हैं?

आपके रिसर्च कीवर्ड से मेल खाने वाले सबसे नए और अलग सोच वाले पेपरों का रोज़ाना Digest पाएँ—तकनीकी सारांश के साथ, आपकी भाषा में।

Digest आज़माएँ →