← नवीनतम पेपर
🤖 machine learning

D2PO: Optimizing Diffusion Samplers via Dynamic Preference

यह शोध पत्र D2PO का प्रस्ताव करता है, जो एक नवीन ढांचा है जो डिफ्यूजन सैंपलिंग नीतियों को प्री-ट्रेन्ड स्कोर नेटवर्क्स से व्युत्पन्न एक ऊर्जा-आधारित मॉडल का उपयोग करके कार्य को एक गतिशील प्राथमिकता संरेखण समस्या के रूप में पुनर्गठित करके अनुकूलित करता है, जिससे पारंपरिक रिग्रेशन-आधारित विधियों की फिडेलिटी सीमाओं को दूर किया जा सके और कम-NFE बाधाओं के तहत बेहतर प्रत्यक्ष गुणवत्ता प्राप्त की जा सके।

मूल लेखक: Jinkyu Kim, Jinyoung Choi, Bohyung Han

प्रकाशित 2026-07-09
📖 6 मिनट में पढ़ें🧠 गहराई से पढ़ें

मूल लेखक: Jinkyu Kim, Jinyoung Choi, Bohyung Han

मूल पेपर CC BY 4.0 (http://creativecommons.org/licenses/by/4.0/) के तहत लाइसेंस किया गया है। नीचे दिए गए पेपर की यह व्याख्या AI से तैयार की गई है। इसे लेखकों ने न तो लिखा है, न इसका समर्थन किया है। तकनीकी सटीकता के लिए मूल पेपर देखें। पूरा डिस्क्लेमर पढ़ें

यहाँ D2PO पेपर का सरल, रोज़मर्रा की भाषा में अनुवाद दिया गया है, जिसमें उपमाओं (analogies) का उपयोग किया गया है।

बड़ी समस्या: "नकलची" का जाल (The "Copycat" Trap)

कल्पना कीजिए कि आप एक मास्टरपीस पेंटिंग बनाना सीख रहे हैं, लेकिन आपको केवल 4 ब्रशस्ट्रोक (इसे "लो NFE" या कम कंप्यूटेशनल लागत कहा जाता है) लगाने की अनुमति है। आपके पास एक मास्टर पेंटर (जिसे "टीचर" कहा जाता है) है जो एक सटीक, विस्तृत चित्र बनाने के लिए 100 ब्रशस्ट्रोक लेता है।

अतीत में, शोधकर्ताओं ने 4-स्ट्रोक वाले पेंटर को यह कहकर सिखाने की कोशिश की: "मास्टर की 100-स्ट्रोक वाली पेंटिंग को देखो। अपनी 4-स्ट्रोक वाली वर्शन को बिल्कुल वैसा ही बनाने की कोशिश करो।"

खामी: क्योंकि छात्र (स्टूडेंट) बहुत सीमित है, वह बारीक विवरणों (जैसे फर की बनावट या पानी की लहरें) की नकल नहीं कर सकता। सही आकार बनाने के चक्कर में, वे विवरणों को धुंधला (smudge) कर देते हैं। परिणाम एक ऐसी पेंटिंग होती है जिसमें बड़े आकार तो सही होते हैं, लेकिन वह धुंधली और नकली दिखती है। छात्र को या तो बड़ी तस्वीर को सही करने या विवरणों को सही करने में से किसी एक को चुनना पड़ता है, और वे आमतौर पर विवरणों का बलिदान दे देते हैं।

समाधान: D2PO (डायनेमिक डायरेक्ट प्रेफरेंस ऑप्टिमाइज़ेशन)

इस पेपर के लेखक, किम, चोई और हान कहते हैं: "एक स्थिर मास्टर की नकल करना बंद करें। इसके बजाय, छात्र को खुद से बेहतर बनना सिखाएं।"

उन्होंने एक नई प्रशिक्षण विधि बनाई जिसे D2PO कहा जाता है। यह कैसे काम करता है, इसे तीन सरल अवधारणाओं में विभाजित किया गया है:

1. "स्व-सुधार लूप" (Self-Improving Loop - डायनेमिक प्रेफरेंस)

एक स्थिर शिक्षक जो कभी नहीं बदलता, के बजाय, D2PO एक डायनेमिक टीचर का उपयोग करता है।

  • छात्र (Student): 4-स्ट्रोक वाला पेंटर।
  • शिक्षक (Teacher): उसी छात्र का एक थोड़ा बेहतर संस्करण, जिसे उसी चीज़ को बनाने के लिए 8 स्ट्रोक (दोगुने अधिक) की अनुमति है।

हर बार जब छात्र चित्र बनाने की कोशिश करता है, तो सिस्टम 4-स्ट्रोक वाले वर्शन की तुलना 8-स्ट्रोक वाले वर्शन से करता है। 8-स्ट्रोक वाला वर्शन हमेशा "पसंदीदा" (preferred) होता है क्योंकि उसमें अधिक विवरण होते हैं। छात्र सीखता है: "मुझे अपने 4-स्ट्रोक वाले ड्राइंग को अपने ही 8-स्ट्रोक वाले सामर्थ्य (potential) के जितना संभव हो सके उतना करीब बनाना है।"

यह बेहतर क्यों है: छात्र एक दूर के, असंभव लक्ष्य (100-स्ट्रोक मास्टर) तक पहुँचने की कोशिश नहीं कर रहा है। वह अपने स्वयं के उच्चतम रूप तक पहुँचने की कोशिश कर रहा है। जैसे-जैसे छात्र बेहतर होता है, "8-स्ट्रोक वाला टीचर" भी बेहतर होता जाता है। यह एक स्व-सुधार लूप है जहाँ छात्र के बेहतर होने के साथ-साथ लक्ष्य भी ऊपर की ओर बढ़ता है, जिससे वे कम गुणवत्ता के स्तर पर फंसने से बच जाते हैं।

2. "जादुई स्कोरकार्ड" (Magic Scorecard - स्कोर-आधारित ऊर्जा)

आप कंप्यूटर को कैसे बताएंगे कि कौन सी पेंटिंग बेहतर है?

  • पुराना तरीका: एक मानक रूलर (जैसे LPIPS या FID) का उपयोग करना। ये देखते हैं कि पिक्सेल कितने करीब हैं। ये यह देखने में अच्छे हैं कि कुत्ते का आकार सही है या नहीं, लेकिन ये अक्सर यह नहीं देख पाते कि फर कितना वास्तविक लग रहा है।
  • D2PO का तरीका: AI के अपने मस्तिष्क से निकला हुआ एक जादुई स्कोरकार्ड उपयोग करना। पेपर "स्कोर नेटवर्क" (AI का वह हिस्सा जो समझता है कि शोर/noise को इमेज में कैसे बदलना है) का उपयोग चित्रों का न्याय करने के लिए करता है।

AI के मस्तिष्क की कल्पना एक संगीत समीक्षक (music critic) के रूप में करें जो जानता है कि एक गाना कैसा होना चाहिए। यदि आप थोड़ा सा बेसुरा नोट बजाते हैं, तो समीक्षक तुरंत जान जाता है। D2PO इस समीक्षक से पूछता है: "क्या यह 4-स्ट्रोक वाली पेंटिंग उसी 'संगीत के नियमों' का पालन करती है जिसका पालन 8-स्ट्रोक वाली पेंटिंग करती है?" यह सिस्टम को उन सूक्ष्म, हाई-फ्रीक्वेंसी विवरणों (जैसे बनावट और महीन रेखाएं) को पकड़ने की अनुमति देता जिन्हें मानक रूलर मिस कर देते हैं।

3. "परिष्करण" का खेल (The Refinement Game)

प्रशिक्षण प्रक्रिया "हॉट एंड कोल्ड" (पास या दूर) के खेल की तरह है।

  1. छात्र 4 स्ट्रोक के साथ एक चित्र बनाता है।
  2. सिस्टम उसी ड्राइंग को लेकर और उसे 8 स्ट्रोक के साथ परिष्कृत (refine) करके एक "विजेता" (winning) वर्शन बनाता है।
  3. सिस्टम उस 4-स्ट्रोक वाली ड्राइंग को थोड़ा धुंधला या खराब करके एक "हारने वाला" (losing) वर्शन बनाता है।
  4. AI को बताया जाता है: "8-स्ट्रोक वाला वर्शन विजेता है। धुंधला वर्शन हारने वाला है। अपनी 4-स्ट्रोक तकनीक को इस तरह समायोजित करें कि वह विजेता की तरह दिखे।"

परिणाम

इस पेपर ने लोकप्रिय इमेज जनरेटर्स (जैसे Stable Diffusion) पर इसका परीक्षण किया और पाया कि:

  • तेज विवरण (Sharper Details): बहुत कम स्टेप्स (4 या 5) के साथ इमेज जेनरेट करते समय, D2PO पिछले तरीकों की तुलना में बहुत अधिक शार्प टेक्सचर और कम "धुंधलेपन" (artifacts) के साथ इमेज बनाता है।
  • बेहतर एलाइनमेंट (Better Alignment): इमेज टेक्स्ट प्रॉम्प्ट के साथ बेहतर मेल खाती हैं (उदाहरण के लिए, यदि आप "लाल बस" मांगते हैं, तो बस वास्तव में लाल होती है और एक बस की तरह दिखती है, न कि केवल एक लाल धब्बे की तरह)।
  • अतिरिक्त प्रशिक्षण की आवश्यकता नहीं: यह विधि विशाल AI मॉडल को फिर से प्रशिक्षित (retrain) नहीं करती है। यह केवल "सैंपलिंग शेड्यूल" (वह चरण जो AI चित्र बनाने के लिए लेता है) को ऑप्टिमाइज़ करती है, जो कार के पूरे ढांचे को फिर से बनाए बिना उसके इंजन को ट्यून करने जैसा है।

सारांश उपमा (Summary Analogy)

कल्पना कीजिए कि आप दौड़ सीखना रहे हैं।

  • पुराना तरीका: आप ठीक उसी तरह दौड़ने की कोशिश करते हैं जैसे एक ओलंपिक चैंपियन जो 100 मीटर 9 सेकंड में दौड़ता है। आपको केवल 40 मीटर दौड़ने की अनुमति है। आप उनकी चाल की नकल करने की कोशिश करते हैं, लेकिन आप लड़खड़ा जाते हैं क्योंकि आपके पैर बहुत छोटे हैं।
  • D2PO तरीका: आप अपने 40 मीटर दौड़ते हैं। फिर, आप कल्पना करते हैं कि आप पूर्ण फॉर्म के साथ 80 मीटर दौड़ रहे हैं। आप अपनी 40-मीटर की दौड़ की तुलना अपनी 80-मीटर की क्षमता से करते हैं। आप अपनी चाल को अपने स्वयं के सामर्थ्य से मिलाने के लिए समायोजित करते हैं। जैसे-जैसे आप तेज़ होते हैं, आपकी 80-मीटर की क्षमता भी तेज़ होती जाती है। आप बिना ओलंपिक चैंपियन बने लगातार बेहतर होते रहते हैं।

संक्षेप में: D2PO डिफ्यूजन मॉडल्स को एक दूर के, पूर्ण शिक्षक की नकल करने के बजाय, उन्हें लगातार अपने काम को परिष्कृत करना सिखाता है, जिसके परिणामस्वरूप उच्च-गुणवत्ता वाली छवियां प्राप्त होती हैं, भले ही कंप्यूटिंग शक्ति सीमित क्यों न हो।

अपने क्षेत्र के पेपरों की भीड़ में उलझे हुए हैं?

आपके रिसर्च कीवर्ड से मेल खाने वाले सबसे नए और अलग सोच वाले पेपरों का रोज़ाना Digest पाएँ—तकनीकी सारांश के साथ, आपकी भाषा में।

Digest आज़माएँ →