← नवीनतम पेपर
🤖 machine learning

Conf-Gen: Conformal Uncertainty Quantification for Generative Models

यह शोध पत्र Conf-Gen को प्रस्तुत करता है, जो एक सामान्य ढांचा है जो अनसुपरवाइज्ड जनरेटिव मॉडल्स जैसे कि LLMs और इमेज जनरेटर्स के लिए कॉन्फॉर्मल रिस्क कंट्रोल को अनुकूलित करता है, जिससे गैर-मेमोराइज्ड इमेज जनरेशन को सत्यापित करने, संवादात्मक स्पष्टता और एजेंट की शुद्धता जैसे विविध कार्यों के लिए औपचारिक अनिश्चितता गारंटी प्रदान की जा सके।

मूल लेखक: Gabriel Loaiza-Ganem, Kevin Zhang, Wei Cui, Marc T. Law, Kin Kwan Leung

प्रकाशित 2026-05-29
📖 7 मिनट में पढ़ें🧠 गहराई से पढ़ें

मूल लेखक: Gabriel Loaiza-Ganem, Kevin Zhang, Wei Cui, Marc T. Law, Kin Kwan Leung

मूल पेपर CC BY 4.0 (http://creativecommons.org/licenses/by/4.0/) के तहत लाइसेंस किया गया है। नीचे दिए गए पेपर की यह व्याख्या AI से तैयार की गई है। इसे लेखकों ने न तो लिखा है, न इसका समर्थन किया है। तकनीकी सटीकता के लिए मूल पेपर देखें। पूरा डिस्क्लेमर पढ़ें

कल्पना कीजिए कि आपका एक बहुत ही बुद्धिमान लेकिन कभी-कभी अति-आत्मविश्वासी मित्र है जिसे विचार उत्पन्न करना, कहानियाँ लिखना या चित्र बनाना पसंद है। कभी-कभी वे शानदार होते हैं, लेकिन कभी-कभी वे बातें बना सकते हैं, पुराने चुटकुलों को दोहरा सकते हैं, या एक ही चक्र में फंस सकते हैं। आप उन पर भरोसा करना चाहते हैं, लेकिन आपको एक तरीके की आवश्यकता है जिससे आप जान सकें: "क्या यह विशिष्ट आउटपुट वास्तव में अच्छा है, या मुझे चिंतित होना चाहिए?"

यह वह समस्या है जिसे Conf-Gen नामक शोध पत्र हल करने का प्रयास करता है। यह AI जनरेटरों (जैसे इमेज क्रिएटर्स या चैटबॉट्स) के लिए एक नया "क्वालिटी कंट्रोल" सिस्टम पेश करता है जो आपको आउटपुट की गुणवत्ता के बारे में एक गणितीय गारंटी (mathematical guarantee) देता है, बिना यह जाने कि AI वास्तव में कैसे सोचता है।

यह कैसे काम करता है, इसे सरल उपमाओं (analogies) के साथ नीचे समझाया गया है:

1. समस्या: "ब्लैक बॉक्स" जनरेटर

पारंपरिक AI सुरक्षा उपकरण सरल कार्यों (जैसे "क्या यह ईमेल स्पैम है?") के लिए अच्छी तरह से काम करते हैं। लेकिन आधुनिक AI जनरेटर अलग हैं। वे केवल एक उत्तर नहीं चुनते; वे संभावनाओं की एक पूरी धारा (शब्दों का एक क्रम, छवियों की एक श्रृंखला, या कार्यों की एक श्रृंखला) बनाते हैं।

  • समस्या: यदि आप AI को एक चित्र बनाने के लिए कहते हैं, तो आप कैसे जानते हैं कि उसने अपने ट्रेनिंग डेटा से किसी कॉपीराइट वाली छवि की नकल तो नहीं की है? यदि आप एक चैटबॉट से कोई प्रश्न पूछते हैं, तो आप कैसे जानते हैं कि उसने केवल अनुमान तो नहीं लगाया?
  • पुराना तरीका: पिछले तरीकों ने इन जटिल जनरेटर्स को सरल बक्सों में फिट करने की कोशिश की, जो अक्सर विफल हो जाते थे या जिनमें AI को यह बताने की बहुत विशिष्ट आवश्यकता होती थी कि वह क्या कर रहा है।

2. समाधान: "Conf-Gen" फ़िल्टर

लेखक Conf-Gen (Conformal Generation) का प्रस्ताव देते हैं। इसे एक स्मार्ट छलनी या क्वालिटी फ़िल्टर के रूप में सोचें जो AI और आपके बीच में स्थित है।

यहाँ चरण-दर-चरण प्रक्रिया दी गई है:

चरण A: "कैलिब्रेशन पार्टी" (नियम सीखना)

AI द्वारा वास्तविक काम शुरू करने से पहले, आप उसे कुछ उदाहरण दिखाते हैं ("कैलिब्रेशन डेटासेट")।

  • उपमा: कल्पना कीजिए कि आप एक नए सुरक्षा गार्ड को प्रशिक्षित कर रहे हैं। आप उन्हें "अच्छे" और "बुरे" लोगों के 100 फोटो दिखाते हैं। आप उन्हें यह नहीं सिखाते कि कोई व्यक्ति क्यों बुरा है; आप बस उन्हें पैटर्न दिखाते हैं।
  • Conf-Gen क्या करता है: यह इन उदाहरणों को देखता है और एक "थ्रेशोल्ड" (जिसे हम सुरक्षा स्तर/Safety Level कह सकते हैं) निर्धारित करता है। यह पूछता है: "मुझे कितना सख्त होना चाहिए ताकि यह सुनिश्चित हो सके कि 90% बार, जो आउटपुट मैं आगे जाने देता हूँ, वह वास्तव में अच्छा है?"

चरण B: "स्कोरकार्ड" (विश्वास मापना)

AI संभावित उत्तरों या छवियों की एक सूची बनाता है। Conf-Gen केवल अंतिम परिणाम को नहीं देखता; यह प्रत्येक आइटम के लिए एक स्कोर को देखता है।

  • उपमा: कल्पना कीजिए कि एक शेफ 10 अलग-अलग सूप बना रहा है। Conf-Gen एक टेस्ट-टेस्टर है जो प्रत्येक सूप को इस आधार पर स्कोर देता है कि वह कितना "सुरक्षित" या "सही" दिखता है।
  • जादू: यह सिस्टम विभिन्न प्रकार के स्कोर संभाल सकता है। एक चैटबॉट के लिए, स्कोर "प्रश्न कितना स्पष्ट है?" हो सकता है। एक इमेज जनरेटर के लिए, स्कोर "क्या यह एक वास्तविक फोटो की नकल जैसा दिखता है?" हो सकता है।

चरण C: "कट-ऑफ" (गारंटी लागू करना)

एक बार जब AI एक अनुक्रम (sequence) उत्पन्न करता है, तो Conf-Gen उस सुरक्षा स्तर को लागू करता है जो उसने चरण A में सीखा था।

  • उपमा: कल्पना कीजिए कि एक क्लब के बाहर एक बाउंसर खड़ा है। यदि "सुरक्षा स्तर" 90% पर सेट है, तो बाउंसर केवल उन्हीं मेहमानों को अंदर जाने देता है जिनका स्कोर पर्याप्त रूप से उच्च है।
  • परिणाम: सिस्टम कह सकता है, "मैं आपको केवल पहले 3 उत्तर दिखाऊंगा जो AI ने दिए हैं, क्योंकि उसके बाद, आत्मविश्वास गिर जाता है।" या, "मैं केवल वही छवि दिखाऊंगा जो निश्चित रूप से एक कॉपी नहीं है।"

गारंटी: यह शोध पत्र सिद्ध करता है कि यदि आप इन नियमों का पालन करते हैं, तो आप 90% सुनिश्चित (या जो भी संख्या आप चुनें) हो सकते हैं कि प्राप्त आउटपुट आपके गुणवत्ता मानक को पूरा करता है। यह कोई अनुमान नहीं है; यह एक औपचारिक वादा है।

3. यह क्या विशेष बनाता है? ("शिथिल" नियम)

पिछले तरीके बहुत कठोर थे। उन्हें AI के एक बहुत ही विशिष्ट, अनुमानित तरीके से व्यवहार करने की आवश्यकता थी (जैसे एक सीधी रेखा)।

  • Conf-Gen का नवाचार: यह बहुत अधिक लचीला है। यह महसूस करता है कि AI हमेशा एक सीधी रेखा में नहीं चलता। कभी-कभी, एक प्रॉम्प्ट को "अधिक विशिष्ट" बनाने से अनजाने में इमेज खराब (कम सुरक्षित) हो सकती है।
  • उपमा: पुराने तरीके पटरी पर चलने वाली ट्रेन की तरह थे—उन्हें सीधा जाना था। Conf-Gen एक नक्शे के साथ हाइकर (पैदल यात्री) की तरह है। हाइकर ऊपर, नीचे या बगल में जा सकता है, जब तक कि वह अंततः "सुरक्षित क्षेत्र" तक न पहुँच जाए। Conf-Gen इन घुमावों और मोड़ों को संभाल सकता है और फिर भी आपको गारंटी दे सकता है।

4. शोध पत्र से वास्तविक दुनिया के उदाहरण

लेखकों ने इसकी लचीलापन दिखाने के लिए कई "नोवेल" (नवीन) कार्यों पर इसका परीक्षण किया:

  • "एंटी-प्लेजरिज्म" कलाकार: उन्होंने एक इमेज जनरेटर (Stable Diffusion) पर इसका उपयोग किया। लक्ष्य यह सुनिश्चित करना था कि AI ने किसी प्रसिद्ध पेंटिंग की नकल नहीं की है। Conf-Gen ने एक फ़िल्टर के रूप में कार्य किया, यह सुनिश्चित करते हुए कि दिखाई गई छवियां उच्च विश्वास के साथ "गैर-यादगार" (मौलिक) थीं।
  • "स्पष्टीकरण करने वाला" चैटबॉट: उन्होंने एक संवादात्मक AI पर इसका उपयोग किया। लक्ष्य यह सुनिश्चित करना था कि बॉट उत्तर देने से पहले पर्याप्त फॉलो-अप प्रश्न पूछे। Conf-Gen ने गारंटी दी कि बॉट एक अस्पष्ट प्रश्न का उत्तर देने के लिए केवल अनुमान नहीं लगाएगा; यह तब तक सवाल पूछता रहेगा जब तक कि प्रश्न पर्याप्त स्पष्ट न हो जाए।
  • "एजेंट" प्लानर: उन्होंने एक AI एजेंट पर इसका उपयोग किया जो होटल बुक करने या ऑनलाइन पेपर खोजने की कोशिश कर रहा था। Conf-Gen ने सुनिश्चित किया कि AI के प्लान के सफल होने की उच्च संभावना है, इससे पहले कि उपयोगकर्ता उसे आज़माए।
  • "ट्री" सेलेक्टर: उन्होंने एक क्लासिक रैंडम फॉरेस्ट (एक प्रकार का पुराना AI) पर भी इसका उपयोग किया। पूरे 100 पेड़ों के बजाय, Conf-Gen ने सही उत्तर की गारंटी देने के लिए आवश्यक पेड़ों के सबसे छोटे समूह को चुना, जिससे कंप्यूटर पावर की बचत हुई।

सारांश

Conf-Gen एक नया टूलकिट है जो आपको किसी भी जेनेरेटिव AI के नीचे एक "सुरक्षा जाल" (safety net) रखने की अनुमति देता है।

  • इसे यह जानने की आवश्यकता नहीं है कि AI कैसे काम करता है।
  • इसे AI के पूर्ण होने की आवश्यकता नहीं है।
  • इसे बस आउटपुट को स्कोर करने के एक तरीके की आवश्यकता है।

इस पद्धति का उपयोग करके, आप अपने AI से कह सकते हैं: "मुझे परवाह नहीं है कि आप उत्तर कैसे निकालते हैं, लेकिन मैं वादा करता हूँ कि 95% बार, जो उत्तर आप मुझे देंगे वह सही (या सुरक्षित, या मौलिक) होगा।" यह इसे उच्च-दांव वाली स्थितियों में शक्तिशाली, रचनात्मक AI का उपयोग करने में सक्षम बनाता है जहाँ आप गलत होने का जोखिम नहीं उठा सकते।

अपने क्षेत्र के पेपरों की भीड़ में उलझे हुए हैं?

आपके रिसर्च कीवर्ड से मेल खाने वाले सबसे नए और अलग सोच वाले पेपरों का रोज़ाना Digest पाएँ—तकनीकी सारांश के साथ, आपकी भाषा में।

Digest आज़माएँ →