← नवीनतम पेपर
📊 statistics

Generalized Conformal Predictive Systems Under Distributional Shifts

यह शोध पत्र अवलोकन-विशिष्ट क्रमपरिवर्तन भार (permutation weights) और भार-अनिश्चितता बॉक्स (weight-uncertainty boxes) को शामिल करके गैर-विनिमेय (non-exchangeable) परिवेशों में सामान्यीकृत अनुरूप भविष्य कहनेवाला प्रणालियों (generalized conformal predictive systems) का विस्तार करता है, ताकि वितरण संबंधी बदलावों (distributional shifts) के तहत वितरण संबंधी बदलावों के तहत परिमित-नमूना या अनंत-नमूना गारंटी के साथ वैध, शिफ्ट-जागरूक भविष्य कहनेवाला बैंड प्रदान किए जा सकें।

मूल लेखक: Jef Jonkers, Johanna Ziegel

प्रकाशित 2026-06-10
📖 6 मिनट में पढ़ें🧠 गहराई से पढ़ें

मूल लेखक: Jef Jonkers, Johanna Ziegel

मूल पेपर CC BY 4.0 (http://creativecommons.org/licenses/by/4.0/) के तहत लाइसेंस किया गया है। नीचे दिए गए पेपर की यह व्याख्या AI से तैयार की गई है। इसे लेखकों ने न तो लिखा है, न इसका समर्थन किया है। तकनीकी सटीकता के लिए मूल पेपर देखें। पूरा डिस्क्लेमर पढ़ें

कल्पना कीजिए कि आप एक मौसम विज्ञानी हैं। आपका काम सिर्फ यह कहना नहीं है कि "कल बारिश होगी"; बल्कि यह कहना है कि "मुझे 90% यकीन है कि बारिश होगी, और यहाँ संभावनाओं की एक सीमा (range) दी गई है।" मशीन लर्निंग की दुनिया में, इसे अनिश्चितता का परिमाणीकरण (uncertainty quantification) कहा जाता है। आप चाहते हैं कि आपके पूर्वानुमान "कैलिब्रेटेड" हों, जिसका अर्थ है कि यदि आप कहते हैं कि बारिश की 90% संभावना है, तो जब भी आप यह भविष्यवाणी करते हैं, वास्तव में 90% बार बारिश होनी चाहिए।

लंबे समय से, एक लोकप्रिय उपकरण जिसे कॉन्फॉर्मल प्रेडिक्टिव सिस्टम्स (CPS) कहा जाता है, स्वर्ण मानक (gold standard) रहा है। यह एक सुरक्षा जाल (safety net) की तरह काम करता है: यह परिणामों की एक "बैंड" (एक निचली और ऊपरी सीमा) देता है जो गणितीय रूप से सत्य को समाहित करने की गारंटी देता है, लेकिन केवल तभी जब पिछला डेटा बिल्कुल भविष्य के डेटा जैसा ही हो।

समस्या: "नई दुनिया" की स्थिति
यह शोध पत्र इस सुरक्षा जाल की एक बड़ी खामी को संबोधित करता है: डिस्ट्रीब्यूशनल शिफ्ट (Distributional Shift)

कल्पना कीजिए कि आपने कैलिफोर्निया की एक धूप वाली गर्मियों के डेटा पर अपना मौसम मॉडल प्रशिक्षित किया है। अब, आप लंदन की एक बरसाती सर्दियों में मौसम की भविष्यवाणी करने की कोशिश कर रहे हैं। डेटा बदल गया है। नियम बदल गए हैं। यदि आप पुराने सुरक्षा जाल का उपयोग करते हैं, तो यह टूट जाएगा क्योंकि यह मानता है कि अतीत (कैलिफोर्निया) और भविष्य (लंदन) एक दूसरे के समान हैं। वास्तव में, वे नहीं हैं।

समाधान: भारित टिकट और अनिश्चितता बॉक्स (Weighted Tickets and Uncertainty Boxes)
लेखक, जेफ जोनर्स और जोहाना ज़िगेल, इस सुरक्षा जाल को ठीक करने का एक तरीका प्रस्तावित करते हैं ताकि यह तब भी काम कर सके जब दुनिया बदल जाए। वे इसे दो चतुर चरणों में करते हैं:

1. भारित लॉटरी (परम्यूटेशन वेट्स - Permutation Weights)

अपने प्रशिक्षण डेटा को कंचों (marbles) के एक थैले के रूप में सोचें। पुराने तरीके में, हर कंचे की "भविष्य का कंचा" होने की समान संभावना थी। लेकिन जब दुनिया बदलती है, तो कुछ कंचों के भविष्य का हिस्सा होने की संभावना अधिक होती है।

लेखक भार (weights) पेश करते हैं।

  • यदि कोई कंचा (डेटा पॉइंट) ऐसा दिखता है जैसे कि वह नए, बरसाती लंदन का हिस्सा है, तो उसे भारी भार (heavy weight) (लॉटरी में एक बड़ा टिकट) दिया जाता है।
  • यदि कोई कंचा कैलिफोर्निया की धूप वाले मौसम का हिस्सा लगता है, तो उसे हल्का भार (light weight) (एक छोटा टिकट) दिया जाता है।

इन भारित टिकटों का उपयोग करके, सिस्टम थैले को "पुनः संतुलित" (re-balance) कर सकता है ताकि पिछला डेटा प्रभावी रूप से भविष्य के डेटा की नकल कर सके। यह सुरक्षा जाल को नई वास्तविकता को कवर करने के लिए फैलने की अनुमति देता है।

2. अनिश्चितता बॉक्स (जब हमें भार का पता नहीं होता)

यहाँ पेचीदा हिस्सा आता है: वास्तविक दुनिया में, हमारे पास शायद ही कभी सटीक भार होता है। हमें उनका अनुमान लगाना पड़ता है।

  • उपमा: कल्पना कीजिए कि आप एक टिकट के वजन का अनुमान लगाने की कोशिश कर रहे हैं, लेकिन आपका तराजू थोड़ा डगमगा रहा है। आप अनुमान लगा सकते हैं कि एक टिकट "10 ग्राम" का है, लेकिन यह 8 और 12 ग्राम के बीच कहीं भी हो सकता है।

लेखक वेट-अनसर्टेन्टी बॉक्सेस (Weight-Uncertainty Boxes) की अवधारणा पेश करते हैं। अपने अनुमान के इर्द-गिर्द संभावनाओं का एक "बॉक्स" बनाने के बजाय, वे एक "बॉक्स" बनाते हैं।

  • वे पूछते हैं: "क्या होगा यदि भार बॉक्स के बिल्कुल निचले स्तर पर है? क्या होगा यदि यह बॉक्स के बिल्कुल ऊपरी स्तर पर है?"
  • फिर वे एक सुपर-सेफ्टी नेट बनाते हैं जो उन सभी संभावनाओं को कवर करता है जो उस बॉक्स के भीतर हैं।

यह सिस्टम को मजबूत (robust) बनाता है। यदि आपके भार के बारे में आपका अनुमान थोड़ा गलत था, तो भी सुरक्षा जाल सत्य को पकड़ने के लिए पर्याप्त चौड़ा होगा। इस जाल की "मोटाई" आपको बताती है कि आपको कितना अनिश्चित होना चाहिए। एक पतला जाल मतलब आप आश्वस्त हैं; एक मोटा जाल मतलब डेटा तेजी से बदल रहा है, और आपको सावधान रहना चाहिए।

यह व्यवहार में कैसे काम करता है

यह शोध पत्र तीन अलग-अलग प्रकार के "पूर्वानुमानकर्ताओं" पर परीक्षण करता है:

  1. बिनिंग (Binning): डेटा को बकेटों में समूहबद्ध करना।
  2. कॉन्फॉर्मल स्कोर (Conformal Scores): इस बात की रैंकिंग करना कि एक नया डेटा पॉइंट पुराने डेटा की तुलना में कितना "अजीब" दिखता है।
  3. आइसोटोनिक रिग्रेशन (Isotonic Regression): एक सुचारू वक्र-फिटिंग (curve-fitting) विधि।

उन्होंने इन्हें दो परिदृश्यों पर परखा:

  • सिंथेटिक डेटा: एक कंप्यूटर सिमुलेशन जहाँ उन्होंने डेटा को कृत्रिम रूप से शिफ्ट किया ताकि देखा जा सके कि गणित काम करता है या नहीं।
  • वास्तविक दुनिया का जीव विज्ञान: AAV वायरस (जीन थेरेपी के लिए उपयोग किए जाने वाले) पर एक अध्ययन। इस प्रयोग में, वैज्ञानिक नए वायरस अनुक्रमों (sequences) को डिज़ाइन करते हैं जो पैकेजिंग में "बेहतर" होने के लिए होते हैं। हालाँकि, सबसे अच्छे वाले चुनने की प्रक्रिया डेटा वितरण को बदल देती है (एक फीडबैक लूप)। पुराने तरीके इस नए वातावरण में परिणामों की सटीक भविष्यवाणी करने में विफल रहे, लेकिन लेखकों के भारित तरीके (weighted method) ने भविष्यवाणियों को सफलतापूर्वक पुन: कैलिब्रेट किया, जिससे यह सुनिश्चित हुआ कि सुरक्षा जाल बना रहे।

मुख्य निष्कर्ष (The Takeaway)

यह शोध पत्र केवल यह नहीं कहता कि "हमने गणित को ठीक कर दिया।" यह दिखाता है कि:

  • जब डेटा बदलता है, तो मानक तरीके अति-आत्मविश्वासी और गलत हो जाते हैं।
  • भारित टिकटों का उपयोग करके, आप सुरक्षा जाल को नई दुनिया के अनुकूल बना सकते हैं।
  • अनिश्चितता बॉक्सों का उपयोग करके, आप इस तथ्य को ध्यान में रख सकते हैं कि आपके भार केवल अनुमान हैं, जिससे यह सुनिश्चित होता है कि आप कभी भी अपना सुरक्षा जाल न खोएं, भले ही आपके अनुमान अपूर्ण हों।
  • परिणाम एक ऐसा सिस्टम है जो शिफ्ट (बदलाव) मजबूत होने पर चौड़ा (अधिक अनिश्चित) हो जाता है, और आपके पास अधिक डेटा होने पर सटीक (अधिक सुस्पष्ट) हो जाता है, जिससे आपको यह ईमानदारी से पता चलता है कि आप अपनी भविष्यवाणी पर कितना भरोसा कर सकते हैं।

संक्षेप में, उन्होंने एक स्मार्ट, अनुकूलनीय सुरक्षा जाल बनाया है जो जानता है कि कब उसके नीचे की जमीन खिसकी है, जिससे यह सुनिश्चित होता है कि बदलती दुनिया में मशीन लर्निंग की भविष्यवाणियां भरोसेमंद बनी रहें।

अपने क्षेत्र के पेपरों की भीड़ में उलझे हुए हैं?

आपके रिसर्च कीवर्ड से मेल खाने वाले सबसे नए और अलग सोच वाले पेपरों का रोज़ाना Digest पाएँ—तकनीकी सारांश के साथ, आपकी भाषा में।

Digest आज़माएँ →