← नवीनतम पेपर
💻 computer science

From Human Approval to Current Authority: Adaptive Runtime Governance at the Execution Boundary of AI-Enabled Organizational Workflows

यह अध्ययन एआई वर्कफ़्लो में दर्ज मानव अनुमोदनों और वर्तमान निष्पादन अधिकार के बीच नैतिक अंतराल को संबोधित करने के लिए एडेप्टिव रनटाइम गवर्नेंस (ARG) को एक ढांचे के रूप में प्रस्तावित करता है, जो एक नियतात्मक प्रोटोटाइप के माध्यम से यह प्रदर्शित करता है कि निष्पादन से ठीक पहले प्राधिकरण और नीति की शर्तों को पुन: सत्यापित करना तकनीकी रूप से उत्तरदायी मानव अधिकार को लागू कर सकता है।

मूल लेखक: Maria Kollia

प्रकाशित 2026-08-13
📖 7 मिनट में पढ़ें🧠 गहराई से पढ़ें

मूल लेखक: Maria Kollia

मूल पेपर CC BY 4.0 (https://creativecommons.org/licenses/by/4.0/) के तहत लाइसेंस किया गया है। नीचे दिए गए पेपर की यह व्याख्या AI से तैयार की गई है। इसे लेखकों ने न तो लिखा है, न इसका समर्थन किया है। तकनीकी सटीकता के लिए मूल पेपर देखें। पूरा डिस्क्लेमर पढ़ें

कल्पना कीजिए कि एक ऐसी दुनिया है जहाँ आपका पसंदीदा रोबोट सहायक सिर्फ आपसे बातें ही नहीं करता, बल्कि आपके लिए काम भी करता है—जैसे पैसे ट्रांसफर करना, आपके बैंक खाते की सेटिंग्स बदलना, या किसी बड़े निर्माण प्रोजेक्ट को मंजूरी देना। हम इसे "कार्यस्थल में AI" (AI in the workplace) कहते हैं। लेकिन यहाँ एक पेचीदा बात है: सिर्फ इसलिए कि कल एक इंसान बॉस ने रोबोट को "हाँ" कहा था, क्या इसका मतलब यह है कि रोबकट आज भी वह काम कर सकता है?

इसे एक कॉन्सर्ट टिकट की तरह समझें। यदि आप शुक्रवार के शो के लिए एक टिकट खरीदते हैं, तो वह टिकट केवल उस विशिष्ट रात के लिए मान्य है। यदि आप उसी टिकट का उपयोग शनिवार को करने की कोशिश करते हैं, तो बाउंसर को आपको रोकना चाहिए, भले ही आपके हाथ में अभी भी कागज हो। AI की दुनिया में, "मानवीय स्वीकृति" (human approval) एक टिकट की तरह है। कभी-कभी, जिस बॉस ने हस्ताक्षर किए थे, उसे नौकरी से निकाल दिया जाता है, खेल के नियम बदल जाते हैं, या टिकट बस एक्सपायर हो जाता है। यदि रोबोट काम करने से ठीक पहले यह जांच नहीं करता है कि टिकट अभी भी वैध है या नहीं, तो वह कानून तोड़ सकता है या गड़बड़ी पैदा कर सकता है, भले ही उसके पास किसी इंसान का "हस्ताक्षरित नोट" हो। यह पेपर एक बहुत ही सख्त बाउंसर बनाने के बारे में है जो AI रोबोट्स के लिए काम करता है और काम होने जाने से ठीक पहले टिकट की वैधता की आखिरी बार जांच करता है।


द पेपर: रोबोटिक कार्यों के लिए एक बाउंसर

मारिया कोलिया द्वारा लिखित यह अध्ययन एक नया विचार पेश करता है जिसे एडैप्टिव रनटाइम गवर्नेंस (Adaptive Runtime Governance - ARG) कहा जाता है। आप ARG को एक स्मार्ट, अदृश्य सुरक्षा परत के रूप में देख सकते हैं जो AI की निर्णय लेने की प्रक्रिया के निकास द्वार पर बैठी होती है। इसका काम यह तय करना नहीं है कि AI का विचार एक अच्छा विचार है या नहीं (जैसे, "क्या यह ऋण उचित है?"); इसके बजाय, यह एक बहुत सरल, लेकिन महत्वपूर्ण प्रश्न पूछता है: "क्या मानव बॉस के पास अभी भी इस पर 'हाँ' कहने की शक्ति है?"

यह पेपर इस बड़े सिस्टम के एक विशिष्ट भाग का परीक्षण करने पर केंद्रित है: एक डिटरमिनिस्टिक एक्जीक्यूशन गेट (deterministic execution gate)। कल्पना कीजिए कि यह गेट एक वीडियो गेम में अंतिम चेकपॉइंट की तरह है। इससे पहले कि पात्र खजाना पाने के लिए चट्टान से नीचे कूदे, गेम रुक जाता है और नियमों की एक सूची की जांच करता है:

  1. क्या आदेश देने वाला खिलाड़ी वास्तव में गेम छोड़कर चला गया है?
  2. क्या खिलाड़ी की भूमिका बदल गई है (शायद उन्हें "एडमिन" से "गेस्ट" के पद पर पदावनत कर दिया गया हो)?
  3. क्या आदेश दिए जाने के बाद से खेल के नियम अपडेट हुए हैं?
  4. क्या आदेश उपयोग के लिए बहुत पुराना हो गया है?

यदि इनमें से कोई भी जांच विफल होती है, तो गेट बंद हो जाता है और कहता है, "नहीं, कार्रवाई अस्वीकृत!" रोबोट वह काम कभी नहीं कर पाता, भले ही उसके पास स्वीकृतियों का इतिहास हो।

उन्होंने वास्तव में क्या बनाया और परीक्षण किया

लेखिका ने केवल सपना नहीं देखा; उन्होंने पायथन (Python) और फास्टएपीआई (FastAPI - वेब ऐप बनाने के उपकरण) का उपयोग करके एक वर्किंग प्रोटोटाइप बनाया और इसे एक सुरक्षित, अलग वातावरण (एक निजी डेटाबेस) में टेस्ट किया। उन्होंने इसे वास्तविक बैंकों या अस्पतालों पर टेस्ट नहीं किया, बल्कि उन्होंने एक "सिमुलेशन लैब" बनाई जिसमें 223 विशिष्ट टेस्ट केस थे ताकि यह देखा जा सके कि क्या गेट अपने वादे के अनुसार काम करता है।

उनके लैब में क्या हुआ:

  • अच्छी चीजें: उन्होंने 30 परिदृश्य (scenarios) बनाए जहाँ सब कुछ एकदम सही था। मानव बॉस अभी भी सक्रिय था, नियम नहीं बदले थे, और टिकट ताजा था। सभी 30 मामलों में, गेट ने "ग्रीन लाइट" (एक HTTP 200 स्टेटस) दी, और कार्रवाई को आगे बढ़ने की अनुमति दी।
  • "रुकने वाली" चीजें: उन्होंने 192 परिदृश्य बनाए जहाँ कुछ गलत था। शायद बॉस को निकाल दिया गया था, नीति बदल गई थी, या स्वीकृति 25 घंटे पुरानी थी (नियम 24 घंटे का था)। सभी 192 मामलों में, गेट ने सही ढंग से "ना" कहा और कार्रवाई को रोक दिया।
  • पेपर ट्रेल: उन्होंने "ऑडिट ट्रेल" (डिजिटल लॉग) की भी जांच की—हर घटना का एक डिजिटल रिकॉर्ड। उन्होंने सत्यापित किया कि 492 ऑडिट इवेंट्स सही ढंग से आपस में जुड़े हुए थे, जिससे यह साबित हुआ कि सिस्टम ने किसका, क्या और कब किया, इसका सटीक रिकॉर्ड रखा।

परिणाम स्पष्ट थे: इस नियंत्रित परीक्षण में, गेट ने बिल्कुल वैसा ही काम किया जैसा इसे डिजाइन किया गया था। इसने उन कार्यों को सफलतापूर्वक रोका जो नहीं होने चाहिए थे और उन्हें होने दिया जो होने चाहिए थे।

यह पेपर क्या नहीं कह रहा है

यह समझना बहुत महत्वपूर्ण है कि यह पेपर क्या दावा नहीं करता है, क्योंकि लेखिका बहुत सावधानी बरत रही हैं कि वे बहुत अधिक बड़े दावे न करें।

  • यह AI को स्मार्ट नहीं बनाता: गेट यह जांच नहीं करता कि AI का विचार निष्पक्ष, सुरक्षित या सटीक है या नहीं। यदि एक मानव बॉस एक बुरा, पक्षपाती या खतरनाक प्लान अप्रूव करता है, और बॉस के पास उसे अप्रूव करने का अधिकार है, तो गेट उसे जाने देगा। गेट केवल अधिकार (authority) की जांच करता है, बुद्धिमत्ता (wisdom) की नहीं।
  • यह अभी वास्तविक दुनिया के लिए तैयार उत्पाद नहीं है: लेखिका स्पष्ट रूप से कहती हैं कि यह एक प्रोटोटाइप है। उन्होंने इसे एक स्थानीय कंप्यूटर लैब में टेस्ट किया, न कि किसी विशाल नेटवर्क पर जहाँ असली हैकर्स, असली पासवर्ड और लाखों उपयोगकर्ता हों। वे स्वीकार करती हैं कि "कन्करेंसी" (क्या होता है जब दो लोग एक ही मिलीसेकंड में एक ही चीज़ को अप्रूव करने की कोशिश करते हैं) और "प्रोडक्शन सिक्योरिटी" (वास्तविक दुनिया के हैकिंग बचाव) जैसी चीजों का परीक्षण नहीं किया गया था।
  • यह सब कुछ हल नहीं करता: पेपर अन्य दिलचस्प विचारों का भी उल्लेख करता है जैसे "इमरजेंसी गवर्नेंस" (संकट के दौरान क्या करें) या "एडैप्टिव क्रिटिकैलिटी" (जोखिम के आधार पर यह तय करना कि कितना सख्त होना है), लेकिन ये केवल प्रस्ताव हैं। इस अध्ययन में इनका निर्माण या परीक्षण नहीं किया गया था।

मुख्य निष्कर्ष

मुख्य निष्कर्ष एक सरल लेकिन शक्तिशाली सत्य है: अतीत की मानवीय स्वीकृति वर्तमान अधिकार के समान नहीं है। सिर्फ इसलिए कि एक इंसान ने कल किसी चीज़ पर हस्ताक्षर किए थे, इसका मतलब यह नहीं है कि आज उसके पास उसे अप्रूव करने की शक्ति है।

यह पेपर साबित करता है कि हम ऐसा सॉफ्टवेयर बना सकते हैं जो इन स्थितियों की स्वचालित रूप से जांच करता है, ठीक कार्रवाई होने से पहले। यदि स्थितियाँ पूरी नहीं होती हैं, तो सॉफ्टवेयर कार्रवाई करने से इनकार कर सकता है, जिससे "मानवीय निरीक्षण" (human oversight)—जो शायद केवल एक औपचारिक मुहर बनकर रह गया होता—एक वास्तविक, कार्यशील सुरक्षा जाल बन जाता है।

हालाँकि, लेखिका स्पष्ट हैं: यह केवल पहला कदम है। हमारे पास सिमुलेशन के लिए एक वर्किंग "बाउंसर" है, लेकिन हमें अभी भी पूरा सुरक्षा सिस्टम बनाना है, इसे वास्तविक दुनिया में टेस्ट करना है, और यह सुनिश्चित करना है कि यह दबाव के समय में काम करे। फिलहाल, हम जानते हैं कि कम से कम कुछ नियम जिन्हें हमें AI को नियंत्रण में रखने के लिए चाहिए, उन्हें एक ऐसे गेट में कोड किया जा सकता है जो तब "ना" कहता है जब अधिकार समाप्त हो जाता है।

अपने क्षेत्र के पेपरों की भीड़ में उलझे हुए हैं?

आपके रिसर्च कीवर्ड से मेल खाने वाले सबसे नए और अलग सोच वाले पेपरों का रोज़ाना Digest पाएँ—तकनीकी सारांश के साथ, आपकी भाषा में।

Digest आज़माएँ →