← नवीनतम पेपर
📊 statistics

Selective Randomization Inference for Adaptive Experiments

यह शोध पत्र 'सेलेक्टिव रैंडमाइजेशन इन्फरेंस' (selective randomization inference) नामक एक सामान्य ढांचे का प्रस्ताव करता है जो मॉडलिंग धारणाओं या i.i.d. डेटा पर निर्भर हुए बिना एडेप्टिव प्रयोगों के लिए वैध सांख्यिकीय परीक्षण करने और कॉन्फिडेंस इंटरवल (confidence intervals) बनाने के लिए कंडीशनल पोस्ट-सिलेक्शन इन्फरेंस (conditional post-selection inference) और डायरेक्टेड एसाइक्लिक ग्राफ्स (directed acyclic graphs) का उपयोग करता है।

मूल लेखक: Tobias Freidling, Qingyuan Zhao, Zijun Gao

प्रकाशित 2026-05-26
📖 7 मिनट में पढ़ें🧠 गहराई से पढ़ें

मूल लेखक: Tobias Freidling, Qingyuan Zhao, Zijun Gao

मूल पेपर CC BY 4.0 (http://creativecommons.org/licenses/by/4.0/) के तहत लाइसेंस किया गया है। नीचे दिए गए पेपर की यह व्याख्या AI से तैयार की गई है। इसे लेखकों ने न तो लिखा है, न इसका समर्थन किया है। तकनीकी सटीकता के लिए मूल पेपर देखें। पूरा डिस्क्लेमर पढ़ें

कल्पना कीजिए कि आप एक जासूस हैं जो एक रहस्य को सुलझाने की कोशिश कर रहे हैं। एक मानक जांच में, आप सुरागों को देखना शुरू करने से पहले ही यह तय कर लेते हैं कि आपको कौन से प्रश्न पूछने हैं और सबूत कैसे जुटाने हैं। आप उस योजना पर टिके रहते हैं, और अंत में, आप अपनी योजना के आधार पर अपने सही होने की संभावनाओं की गणना करते हैं।

लेकिन वास्तविक दुनिया में, विज्ञान अक्सर अलग तरह से काम करता है। यह एक ऐसे जासूस की तरह है जो पहले कुछ सुराग देखता है, यह महसूस करता है कि संदिग्ध एक विशिष्ट पड़ोस में छिपा हुआ है, और फिर अपनी पूरी ऊर्जा उस विशेष पड़ोस पर केंद्रित करने का निर्णय लेता है। इसे एक एडेप्टिव एक्सपेरिमेंट (अनुकूलनशील प्रयोग) कहा जाता है। यह स्मार्ट है क्योंकि यह समय और संसाधनों की बचत करता है, लेकिन यह एक जटिल सांख्यिकीय समस्या पैदा करता है: सिलेक्शन बायस (चयन पूर्वाग्रह)

समस्या: एक "अनुचित" तुलना

लेख बताता है कि यदि आप जो देखते हैं उसके आधार पर अपनी योजना बदलते हैं, तो आप अपने परिणामों का न्याय करने के लिए पुराने नियमों का उपयोग नहीं कर सकते।

पासे का उदाहरण:
कल्पना कीजिए कि आप यह देखने के लिए पासे फेंक रहे हैं कि क्या एक नया खेल निष्पक्ष है।

  1. राउंड 1: आप 10 बार पासा फेंकते हैं। आप देखते हैं कि संख्या "6" बार-बार आ रही है।
  2. निर्णय: क्योंकि "6" आशाजनक लग रहा है, इसलिए आप तय करते हैं, "ठीक है, अब से, मैं केवल संख्या 6 पर ध्यान दूंगा। मैं अन्य सभी संख्याओं को अनदेखा कर दूंगा।"
  3. राउंड 2: आप 10 बार और पासा फेंकते हैं, लेकिन इस बार आप केवल "6" को गिनते हैं।

यदि आप मानक गणित का उपयोग करके इतने सारे "6" आने की संभावना की गणना करने का प्रयास करते हैं, तो आप गलत होंगे। क्यों? क्योंकि आपने केवल पासा नहीं फेंका; आपने "6" पर ध्यान केंद्रित करने का निर्णय इसलिए लिया क्योंकि आपने राउंड 1 में इसे होते हुए देखा था। आपने डेटा को "चेरी-पिक" किया (अपनी पसंद से चुना)। यदि आप अपने परिणामों की तुलना एक मानक पासा फेंकने से करते हैं (जहाँ आपने कोई नंबर नहीं चुना था), तो आप सेब की तुलना संतरों से कर रहे हैं। आप खेल का आधा हिस्सा देखने के बाद नियम बदलकर वास्तव में धोखाधड़ी कर रहे हैं।

समाधान: "सिलेक्टिव रैंडमाइजेशन इन्फरेंस" (चयनात्मक यादृच्छिक अनुमान)

लेखक, टोबियास फ्रीडलिंग, किंगयुआन झाओ और ज़ीजुन गाओ, एक नया तरीका प्रस्तावित करते हैं जिसे सिलेक्टिव रैंडमाइजेशन इन्फरेंस कहा जाता है।

इसे एक "क्या-होता-अगर" सिमुलेशन (What-If Simulation) के रूप में सोचें जो आपके जासूसी कार्य का सम्मान करता है।

यह पूछने के बजाय कि, "क्या होता अगर मैंने अपनी मूल योजना का पालन किया होता?" (जो अनुचित है क्योंकि आपने योजना का पालन नहीं किया), वे पूछते हैं:

"यदि मैंने राउंड 1 में अलग तरह से पासा फेंका होता, लेकिन फिर भी मैं संख्या 6 पर ध्यान केंद्रित करने का निर्णय लेता, तो मेरे परिणाम कितने संभावित होते?"

पेपर की भाषा में यह कैसे काम करता है:

  1. सेटअप: वे एक "डायरेक्टेड एसाइक्लिक ग्राफ" (DAG) का उपयोग करते हैं, जो केवल एक फैंसी फ्लोचार्ट है जो दिखाता है कि एक चीज़ कैसे दूसरी चीज़ की ओर ले जाती है (जैसे: डेटा देखें \to उपसमूह चुनें \to उपचार असाइन करें)।
  2. शर्त: वे आपके वास्तविक प्रयोग की तुलना केवल उन अन्य संभावित प्रयोगों से करते जो उस विशिष्ट उपसमूह पर ध्यान केंद्रित करने का बिल्कुल वही निर्णय लेते।
  3. परिणाम: यह आपको एक "सिलेक्टिव पी-वैल्यू" देता है। यह बताता है कि आपके परिणाम होने की कितनी संभावना है यह देखते हुए कि आपने वह विशिष्ट चुनाव किया जो आपने किया

यह "डेटा स्प्लिटिंग" से बेहतर क्यों है

इस समस्या के लिए इस पेपर से पहले, सामान्य सलाह डेटा स्प्लिटिंग थी।

  • पुराना तरीका: अपने डेटा के पहले आधे हिस्से को फेंक दें (वह हिस्सा जिसने आपको अपना मन बदलने के लिए प्रेरित किया) और केवल दूसरे आधे हिस्से का उपयोग गणित करने के लिए करें।
  • रूपक: यह एक शेफ की तरह है जो सूप चखता है, यह तय करता है कि इसमें अधिक नमक की आवश्यकता है, और फिर यह साबित करने के लिए कि नमक काम करता है, वह सूप का पहला आधा हिस्सा फेंक देता है। यह सुरक्षित है, लेकिन यह बर्बादी है। आप बहुत सारी जानकारी खो देते हैं।

लेखकों का नया तरीका "डेटा कार्विंग" (डेटा तराशना) जैसा है।

  • नया तरीका: आप सारा डेटा रखते हैं। आप बस इस बात को स्वीकार करते हैं कि कुछ "स्वाद" (जानकारी) का उपयोग निर्णय लेने के लिए किया गया था। आप गणितीय रूप से उस हिस्से को "तराशते" हैं जिसका उपयोग निर्णय के लिए किया गया था और केवल शेष "बचे हुए" जानकारी की तुलना समान परिदृश्यों से करते हैं।
  • लाभ: आपको एक अधिक शक्तिशाली परीक्षण मिलता है। आप अपने पास उपलब्ध सभी डेटा का उपयोग करते हैं, लेकिन आप इस तथ्य से धोखा नहीं खाते कि आपने बीच में एक विकल्प चुना था।

"होल्ड-आउट" ट्रिक

पेपर में एक व्यावहारिक ट्रिक का भी उल्लेख है जो गणित को आसान और परिणामों को सुचारू बनाती है। कभी-कभी, यदि आप निर्णय लेने के लिए पूरे डेटा का उपयोग करते हैं, तो गणित ऊबड़-खाबड़ और अस्थिर हो जाता है (जैसे एक ऊबड़-खाबड़ रास्ता)।

इसे ठीक करने के लिए, वे एक "होल्ड-आउट" समूह का सुझाव देते हैं।

  • रूपक: कल्पना कीजिए कि आप एक कक्षा को ग्रेड दे रहे हैं। आप यह तय करने के लिए कि कौन सा विषय सबसे कठिन है, पहले 10 छात्रों के टेस्ट देखते हैं। फिर, आप अंतिम परीक्षा को उस विषय पर केंद्रित करने का निर्णय लेते हैं। लेकिन, अंतिम परीक्षा को निष्पक्ष रूप से ग्रेड करने के लिए, आप केवल अंतिम 10 छात्रों के स्कोर देखते हैं, जो उस समूह का हिस्सा नहीं थे जिसका उपयोग आपने निर्णय लेने के लिए किया था।
  • पेपर में, वे दिखाते हैं कि यदि आप एक "होल्ड-आउट" समूह (डेटा जिसका उपयोग निर्णय के लिए नहीं किया गया था) का उपयोग करते हैं, तो गणित बहुत अधिक सुचारू और विश्वसनीय हो जाता है, जबकि यह अभी भी बहुत शक्तिशाली रहता है।

दावों का सारांश

पेपर दावा करता है कि:

  1. एडेप्टिव प्रयोग आम हैं (चिकित्सा, सामाजिक विज्ञान आदि में) लेकिन विश्लेषण करना कठिन है क्योंकि नियम डेटा के आधार पर बदलते हैं।
  2. मानक तरीके विफल हो जाते हैं क्योंकि वे इस तथ्य को अनदेखा करते हैं कि शोधकर्ता ने डेटा के आधार पर एक विकल्प चुना था, जिससे गलत सकारात्मक परिणाम (यह सोचना कि एक उपचार काम करता है जबकि वह नहीं करता) मिल सकते हैं।
  3. उनका नया तरीका (सिलेक्टिव रैंडमाइजेशन इन्फरेंस) इसे ठीक करता है क्योंकि यह वास्तविक प्रयोग की तुलना केवल उन "समानांतर ब्रह्मांडों" से करता है जहाँ शोधकर्ता वही निर्णय लेता।
  4. इसके लिए डेटा वितरण के बारे में किसी धारणा की आवश्यकता नहीं है (यह यह धारणा नहीं बनाता कि डेटा बेल कर्व या स्वतंत्र है), यह केवल उपचार असाइनमेंट की यादृच्छिकता (randomness) पर निर्भर करता है।
  5. यह डेटा फेंकने (डेटा स्प्लिटिंग) की तुलना में अधिक शक्तिशाली है क्योंकि यह उपलब्ध सभी जानकारी का उपयोग करता है, बस एक अधिक सावधानीपूर्ण गणितीय फिल्टर के साथ।

संक्षेप में, यह पेपर वैज्ञानिकों को उनके प्रयोगों का विश्लेषण करने के लिए एक नया, निष्पक्ष नियम पुस्तिका देता है, जहाँ वे खेल के बीच में अपनी रणनीति बदलते हैं, यह सुनिश्चित करते हुए कि उनके निष्कर्ष ठोस हैं और केवल डेटा को देखने के उनके तरीके का एक भाग्यशाली संयोग नहीं हैं।

अपने क्षेत्र के पेपरों की भीड़ में उलझे हुए हैं?

आपके रिसर्च कीवर्ड से मेल खाने वाले सबसे नए और अलग सोच वाले पेपरों का रोज़ाना Digest पाएँ—तकनीकी सारांश के साथ, आपकी भाषा में।

Digest आज़माएँ →