← नवीनतम पेपर
💬 NLP

AgentGUI: An Interface for Observing and Steering Long-Running AI Agents

यह शोध पत्र AgentGUI को प्रस्तुत करता है, जो एक स्थानीय रूप से होस्ट किया गया ग्राफिकल इंटरफेस है जिसे समृद्ध प्रक्षेपवक्र विज़ुअलाइज़ेशन (trajectory visualizations) और स्टीयरिंग क्षमताओं के माध्यम से लंबे समय तक चलने वाले AI एजेंटों की मानवीय निगरानी को बढ़ाने के लिए डिज़ाइन किया गया है, जो एक उपयोगकर्ता अध्ययन से पता चलता है कि यह ट्रेस विश्लेषण की गति और कार्य पूर्णता दरों में महत्वपूर्ण रूप से सुधार करता है।

मूल लेखक: Xuan Zhao, Jiwoong Sohn, Qinyue Zheng, Michael Moor

प्रकाशित 2026-07-30
📖 7 मिनट में पढ़ें🧠 गहराई से पढ़ें

मूल लेखक: Xuan Zhao, Jiwoong Sohn, Qinyue Zheng, Michael Moor

मूल पेपर CC BY 4.0 (http://creativecommons.org/licenses/by/4.0/) के तहत लाइसेंस किया गया है। नीचे दिए गए पेपर की यह व्याख्या AI से तैयार की गई है। इसे लेखकों ने न तो लिखा है, न इसका समर्थन किया है। तकनीकी सटीकता के लिए मूल पेपर देखें। पूरा डिस्क्लेमर पढ़ें

कल्पना कीजिए कि आपने अभी-अभी अपने लिए एक बहुत ही बुद्धिमान, अथक रोबोट सहायक को काम पर रखा है जो आपके एक विशाल और जटिल प्रोजेक्ट को संभाल सकता है—जैसे कि कोई वीडियो गेम बनाना, एक उपन्यास लिखना, या हजारों मेडिकल रिकॉर्ड का विश्लेषण करना। आप उसे बताते हैं कि क्या करना है, और वह काम पर लग जाता है। लेकिन यहाँ एक पेंच है: हर पाँच मिनट में आपसे संपर्क करने के बजाय, यह रोबोट बिना रुके घंटों या यहाँ तक कि दिनों तक लगातार काम करने का फैसला करता है। यह बिल्कुल वैसा ही है जैसे किसी शेफ को सामग्री की एक सूची और एक लक्ष्य देकर रसोई में भेजना, लेकिन आपको भोजन परोसे जाने तक अंदर झाँकने की अनुमति नहीं है। यदि शेफ गलती से सूप जला देता है या गलत मसालों का उपयोग करने लगता है, तो आपको तब तक पता नहीं चलेगा जब तक कि बहुत देर न हो जाए। यह "AI एजेंट्स" (AI agents) की दुनिया है—ऐसे कंप्यूटर प्रोग्राम जो खुद से तर्क कर सकते हैं, टूल्स का उपयोग कर सकते हैं और कार्य कर सकते हैं। जबकि वे जटिल कार्यों को करने में अविश्वसनीय रूप से सक्षम हो रहे हैं, एक बढ़ती हुई समस्या यह है कि इंसान उनके साथ तालमेल बिठाने में संघर्ष कर रहे हैं। हमारे पास यह देखने का कोई अच्छा तरीका नहीं है कि वे काम करते समय क्या कर रहे हैं, और यदि वे पटरी से उतर जाते हैं (एक समस्या जिसे शोधकर्ता "ड्रिफ्ट" कहते हैं), तो हम अक्सर पूरी प्रक्रिया को फिर से शुरू किए बिना उन्हें वापस सही दिशा में नहीं मोड़ पाते हैं।

यहीं पर AgentGUI नामक एक नया टूल आता है। इसे अपने रोबोट वर्कफोर्स के लिए एक हाई-टेक, इंटरैक्टिव कंट्रोल रूम के रूप में समझें। यह पेपर AgentGUI को एक उपयोगकर्ता के अनुकूल, स्थानीय रूप से होस्ट किए गए डैशबोर्ड के रूप में पेश करता है जो आपको अपने AI एजेंट्स को वास्तविक समय (real-time) में देखने, यह समझने की अनुमति देता है कि वे वास्तव में क्या सोच रहे हैं और क्या कर रहे हैं, और यदि वे भ्रमित हो जाते हैं तो हस्तक्षेप करने की सुविधा देता है। टेक्स्ट के उबाऊ, बिखरे हुए लॉग को देखने के बजाय, जो एक कंप्यूटर एरर मैसेज जैसा दिखता है, AgentGUI रोबोट की गतिविधि को एक रंगीन, आसानी से समझ आने वाली विजुअल कहानी में बदल देता है। यह रोबोट के दिमाग में एक लाइव कैमरा फीड रखने जैसा है, जो आपको उसके कदमों, उसकी गलतियों और उसकी सफलताओं को होते हुए दिखाता है। शोधकर्ताओं ने यह देखना चाहा कि क्या यह विजुअल दृष्टिकोण वास्तव में लोगों को रोबोट को बेहतर ढंग से समझने और उन्हें पटरी से उतरने से रोकने में मदद करता है।

समस्या: रोबोट के काम का "ब्लैक बॉक्स"

जब AI एजेंट्स लंबे कार्यों को चलाते हैं, तो वे विचारों, टूल्स के उपयोग और फ़ाइल परिवर्तनों का एक अराजक निशान छोड़ देते हैं। एक इंसान के लिए, इस निशान को पढ़ने की कोशिश करना ऐसा है जैसे किसी ऐसी किताब में विशिष्ट वाक्य खोजने की कोशिश करना जिसे फाड़ दिया गया हो और ढेर सारे कंफेटी (रंगीन कागज के टुकड़ों) के साथ मिला दिया गया हो। यह बहुत अधिक बोझिल है। यदि आप यह समझने में घंटों बिताते हैं कि रोबole ने क्या किया, तो आप रोबोट रखने के मूल लाभ यानी समय बचाने के फायदे को खो देते हैं। इससे भी बदतर यह है कि यदि आप नहीं समझते कि वह क्या कर रहा है, तो आप उसे बेहतर करने के लिए सिखा नहीं सकते या उसे बड़ी गलती करने से रोक नहीं सकते।

समाधान: रोबोट्स के लिए एक पिक्सेल-आर्ट ऑफिस

लेखकों ने इसे हल करने के लिए AgentGUI बनाया है। कल्पना कीजिए कि एक पिक्सेल-आर्ट ऑफिस है जहाँ प्रत्येक AI एजेंट के पास अपना डेस्क है।

  • डैशबोर्ड: आप अपने सभी एजेंट्स को उनके डेस्क पर काम करते हुए देखते हैं। आप एक खाली डेस्क पर फ़ाइल खींचकर (drag करके) या प्रॉम्प्ट टाइप करके एक नया कार्य शुरू कर सकते हैं।
  • दृश्य (The View): जब आप किसी डेस्क पर क्लिक करते हैं, तो आप केवल टेक्स्ट नहीं देखते। आप एजेंट के जीवन की एक टाइमलाइन देखते हैं। इसमें एक "लाइव फीड" है जो दिखाती है कि एजेंट अभी ठीक क्या कर रहा है (जैसे "फ़ाइल पढ़ना" या "कोड लिखना"), एक "वॉल-क्लॉक" दृश्य जो दिखाता है कि उसने प्रत्येक चरण पर कितना समय बिताया, और यहाँ तक कि एक टर्मिनल विंडो भी जो वह चल रहा कोड दिखाती है।
  • टीम: आप एजेंट्स को टीमों में समूहबद्ध कर सकते हैं। एक शक्तिशाली एजेंट एक छोटे, स्थानीय एजेंट के काम की समीक्षा भी कर सकता है, ठीक वैसे ही जैसे एक वरिष्ठ संपादक एक कनिष्ठ लेखक के ड्राफ्ट की जांच करता है।

यह कैसे मदद करता है: देखना और निर्देशित करना

पेपर ने दो मुख्य चीजों का परीक्षण किया: लोग रोबोट को कितनी अच्छी तरह समझ सकते हैं, और क्या यह टूल रोबोट को पटरी से उतरने से रोक सकता है।

1. रोबोट के दिमाग को समझना
शोधकर्ताओं ने 8 छात्रों (जो गणित और विज्ञान के विशेषज्ञ थे लेकिन पेपर के लेखक नहीं थे) के साथ एक अध्ययन चलाया। उन्होंने इन छात्रों को रोबोट के वर्क लॉग में विशिष्ट जानकारी खोजने के लिए कहा।

  • परिणाम: AgentGUI का उपयोग करते समय, छात्रों ने मानक, टेक्स्ट-भारी डैशबोर्ड की तुलना में जानकारी 38% तेजी से पाई। औसतन, उन्होंने AgentGUI के साथ प्रति प्रश्न 90 सेकंड का समय लिया, जबकि पुराने टूल के साथ 145 सेकंड लगे।
  • सटीकता: उन्होंने अधिक प्रश्नों के सही उत्तर भी दिए (93% सटीकता बनाम 80%)।
  • अनुभव: छात्रों ने कम तनाव और हताशा महसूस की। यह केवल तेज़ नहीं था; यह मस्तिष्क के लिए आसान भी था।

2. रोबोट को भटकने (Drift) से रोकना
कभी-कभी, रोबोट अटक जाते हैं या गलत काम करने लगते हैं (ड्रिफ्ट)। AgentGUI में एक स्वचालित "मैनेजर" फीचर है। यह एक दूसरा AI है जो चुपचाप पहले रोबोट की निगरानी करता है। यदि पहला रोबोट अटक जाता है या गलती करता है, तो मैनेजर हस्तक्षेप करता है, स्थिति को पढ़ता है, और रोबोट को बताता है कि इसे कैसे ठीक किया जाए।

  • प्रयोग: उन्होंने इसे छोटे, स्थानीय AI मॉडल्स (0.8 बिलियन से 9 बिलियन पैरामीटर्स तक) के साथ टेस्ट किया, जो 98 फाइलों को 15 अलग-अलग रिपोर्टों में व्यवस्थित करने की कोशिश कर रहे थे।
  • परिणाम: बिना मदद के, छोटे मॉडल्स अक्सर विफल रहे। लेकिन मैनेजर के हस्तक्षेप के साथ, सफलता दर काफी बढ़ गई। सबसे छोटे मॉडल (0.8B) के लिए, सफलता दर 10% से बढ़कर 26% हो गई। 4B मॉडल के लिए, यह 44% से बढ़कर 78% हो गई। सबसे मजबूत मॉडल्स (9B) ने भी 92% से 98% तक मामूली बढ़त देखी।
  • लागत: यह "मैनेजर" चलाना बहुत सस्ता था, जिसने कार्य के लिए आवश्यक कुल कंप्यूटिंग पावर का 1% से भी कम उपयोग किया।

इसका क्या अर्थ है

यह पेपर दिखाता है कि मनुष्यों को AI एजेंट्स के काम में एक स्पष्ट, विजुअल खिड़की देने से बहुत बड़ा अंतर पड़ता है। यह साबित करता है कि हमें बस रोबोट पर भरोसा करने और अच्छे की उम्मीद करने की ज़रूरत नहीं है; हम वास्तव में उन्हें देख सकते हैं, समझ सकते हैं और निर्देशित कर सकते हैं। लेखक सावधानी से नोट करते हैं कि उनका अध्ययन छोटा था और विशिष्ट प्रकार के कार्यों पर केंद्रित था, इसलिए हालांकि परिणाम आशाजनक हैं, अभी भी बहुत कुछ सीखना बाकी है। हालाँकि, मूल विचार स्पष्ट है: शक्तिशाली AI के साथ सुरक्षित रूप से काम करने के लिए, हमें ऐसे टूल्स की आवश्यकता है जो अदृश्य को दृश्य बनाते हैं। AgentGUI उन भ्रमित करने वाले, बिखरे हुए रोबोट लॉग को एक ऐसी कहानी में बदलने की दिशा में एक कदम है जिसे हम पढ़ सकते हैं, समझ सकते हैं और निर्देशित कर सकते हैं।

अपने क्षेत्र के पेपरों की भीड़ में उलझे हुए हैं?

आपके रिसर्च कीवर्ड से मेल खाने वाले सबसे नए और अलग सोच वाले पेपरों का रोज़ाना Digest पाएँ—तकनीकी सारांश के साथ, आपकी भाषा में।

Digest आज़माएँ →