← नवीनतम पेपर
💬 NLP

Bayesian-Agent: Posterior-Guided Skill Evolution for LLM Agent Harnesses

यह शोध पत्र Bayesian-Agent को प्रस्तुत करता है, जो एक ऐसा ढांचा है जो पुन: प्रयोज्य कौशलों (reusable skills) और SOPs को पोस्टीरियर-गाइडेड हार्नेस ऑप्टिमाइज़ेशन (posterior-guided harness optimization) के माध्यम से उनके विकास को निर्देशित करने के लिए संभाव्य परिकल्पनाओं (probabilistic hypotheses) के रूप में मानता है, जो मॉडल के भार (weights) को संशोधित किए बिना SOP-Bench और Lifelong AgentBench जैसे बेंचमार्क पर LLM एजेंट के प्रदर्शन में उल्लेखनीय सुधार करता है।

मूल लेखक: Xiaojun Wu, Cehao Yang, Honghao Liu, Xueyuan Lin, Wenjie Zhang, Zhichao Shi, Xuhui Jiang, Chengjin Xu, Jia Li, Jian Guo

प्रकाशित 2026-06-09
📖 6 मिनट में पढ़ें🧠 गहराई से पढ़ें

मूल लेखक: Xiaojun Wu, Cehao Yang, Honghao Liu, Xueyuan Lin, Wenjie Zhang, Zhichao Shi, Xuhui Jiang, Chengjin Xu, Jia Li, Jian Guo

मूल पेपर CC BY 4.0 (http://creativecommons.org/licenses/by/4.0/) के तहत लाइसेंस किया गया है। नीचे दिए गए पेपर की यह व्याख्या AI से तैयार की गई है। इसे लेखकों ने न तो लिखा है, न इसका समर्थन किया है। तकनीकी सटीकता के लिए मूल पेपर देखें। पूरा डिस्क्लेमर पढ़ें

कल्पना कीजिए कि आपके पास एक बहुत ही बुद्धिमान, लेकिन थोड़ी जिद्दी, रोबोटिक सहायक है। यह सहायक सोचने में तो बहुत अच्छा है, लेकिन यह इंसानों की तरह अपनी गलतियों से नहीं सीखता। यदि आप इसे केक बनाने के लिए कहते हैं और यह पहला केक जला देता है, तो यह अपने आप नहीं जान पाएगा कि यह क्यों जला जब तक कि आप इसे स्पष्ट रूप से न बताएं।

आमतौर पर, जब हम इन रोबोटों को ठीक करने की कोशिश करते हैं, तो हम या तो उन्हें निर्देशों की एक लंबी सूची दे देते हैं या इस उम्मीद में छोड़ देते हैं कि वे अपने पिछले सफलताओं और विफलताओं को एक साधारण स्कोरकार्ड (जैसे, "मैं 3 बार सफल हुआ, 2 बार विफल हुआ, इसलिए मैं 60% अच्छा हूँ") की तरह देखकर खुद ही "समझ" जाएंगे। समस्या यह है कि यह स्कोरकार्ड भ्रामक हो सकता है। एक विफलता एक इत्तेफाक हो सकती थी, या एक सफलता किस्मत से मिली हो सकती थी।

Bayesian-Agent एक नया फ्रेमवर्क है जो इन रोबोट सहायकों को प्रबंधित करने का तरीका बदल देता है। केवल जीत और हार को गिनने के बजाय, यह हर निर्देश या "कौशल" (skill) जिसे रोबोट उपयोग करता है, उसे एक वैज्ञानिक परिकल्पना (scientific hypothesis) के रूप में मानता है जिसे वास्तविक साक्ष्य के साथ परीक्षण और अपडेट किया जाना चाहिए।

यह कैसे काम करता है, सरल उपमाओं का उपयोग करते हुए:

1. "स्किल लाइब्रेरी" एक परिकल्पना पुस्तक के रूप में

कल्पना कीजिए कि रोबोट के पास "कौशलों" की एक लाइब्रेरी है (जैसे, "एक फ़ाइल कैसे खोलें" या "बैंक बैलेंस कैसे जांचें")।

  • पुराना तरीका: रोबोट जब भी कोई गलती करता है, तो वह बस लाइब्रेरी में नए टिप्स जोड़ देता है, इस उम्मीद में कि अगली बार बेहतर होगा। यह एक अंतर्ज्ञान के आधार पर नोटबुक में एक नया नियम लिखने जैसा है।
  • Bayesian-Agent का तरीका: लाइब्रेरी में प्रत्येक कौशल एक परिकल्पना की तरह है। सिस्टम पूछता है: "दी गई विशिष्ट स्थिति में, यह कौशल काम करने की कितनी संभावना है?" यह केवल "1 सफलता, 1 विफलता" नहीं गिनता। यह प्रत्येक कौशल के लिए एक विश्वास प्रोफाइल (belief profile) बनाता है, जो ट्रैक करता है कि वह कब और क्यों काम करता है या विफल होता है।

2. "जासूस" का तर्क (The Posterior)

सिस्टम बेयसियन इन्फरेंस (Bayesian inference) का उपयोग करता है। इसे एक जासूस के रूप में सोचें जो नए सुराग मिलने पर अपने सिद्धांत को अपडेट करता है।

  • सुराग: हर बार जब रोबमा कार्य करने का प्रयास करता है, तो सिस्टम "सत्यापित प्रक्षेपवक्र" (verified trajectory) को रिकॉर्ड करता है। इसका मतलब है कि यह केवल रोबोट की आत्म-रिपोर्ट ("मुझे लगता है कि मैंने इसे सही किया!") को नहीं सुनता; यह वास्तविक परिणाम की जांच करता है (जैसे, "क्या फ़ाइल वास्तव में खुली?")।
  • अपडेट: यदि एक कौशल एक ही परिस्थितियों में लगातार दो बार विफल होता है, तो जासूस उस विशिष्ट स्थिति के लिए इस विश्वास को अपडेट कर देता है कि यह कौशल खराब है। यदि यह तीन बार काम करता है, तो इसके विश्वसनीय होने का विश्वास मजबूत हो जाता है।

3. पाँच "क्रियाएं" (मैकेनिक का टूलकिट)

इन अपडेट किए गए विश्वासों के आधार पर, सिस्टम केवल चीजों को "ठीक" नहीं करता है। इसके पास स्किल लाइब्रेरी को प्रबंधित करने के लिए विशिष्ट उपकरण हैं, ठीक वैसे ही जैसे एक मैकेनिक कार के पुर्जों को प्रबंधित करता है:

  • एक्सप्लोर (Explore): यदि रोबोट ने पहले कभी कोई कौशल आज़माया नहीं है, तो सिस्टम कहता है, "चलो इसे आजमाते हैं और देखते हैं कि क्या होता है।"
  • पैच (Patch): यदि रोबोट एक ही तरीके से विफल होता है (जैसे, यह हमेशा फ़ाइल को सेव करना भूल जाता है), तो सिस्टम निर्देशों में एक विशिष्ट "गार्डरेल" या रिमाइंडर जोड़ता है ताकि उस विशिष्ट त्रुटि को रोका जा सके।
  • स्प्लिट (Split): यदि कोई कौशल बहुत व्यापक है (जैसे, "सभी बैंक लेनदेन संभालें") और कुछ मामलों में विफल होता है लेकिन अन्य मामलों में काम करता है, तो सिस्टम इसे दो छोटे, अधिक विशिष्ट कौशलों में विभाजित कर देता है।
  • कंप्रेस (Compress): यदि कोई कौशल बहुत विश्वसनीय है और पूरी तरह से काम करता है, तो सिस्टम स्थान बचाने के लिए निर्देशों को छोटा कर देता है, जिससे रोबोट तेज़ हो जाता है।
  • रिटायर (Retire): यदि कोई कौशल बहुत बार विफल होता है और साक्ष्य दिखाते हैं कि यह अविश्वसनीय है, तो सिस्टम इसे कचरे में फेंक देता है ताकि रोबोट इसे उपयोग करने की कोशिश करना बंद कर दे।

4. परिणाम: "जला हुआ केक" ठीक करना

शोधकर्ताओं ने इस प्रणाली का परीक्षण तीन अलग-अलग प्रकार के कार्यों पर किया:

  1. SOP-Bench: जटिल, चरण-दर-चरण व्यावसायिक प्रक्रियाओं का पालन करना।
  2. Lifelong AgentBench: कार्यों की एक लंबी श्रृंखला करना जहाँ आपको पहले जो हुआ उसे याद रखने की आवश्यकता होती है।
  3. RealFin-Bench: वित्तीय तर्क संबंधी समस्याओं को हल करना जहाँ कुछ जानकारी गायब हो सकती है।

क्या हुआ?

  • "रिपेयर" मोड: उन्होंने एक ऐसे रोबोट को लिया जो पहले से ही कुछ कार्यों में विफल रहा था, उसमें साक्ष्य डाले, और Bayesian-Agent को निर्देशों को "पैच" करने दिया।
    • व्यावसायिक प्रक्रिया परीक्षण पर, इसने विफलताओं को ठीक किया और 95% सफलता प्राप्त की।
    • लंबी श्रृंखला वाले परीक्षण पर, इसने विफलताओं को ठीक किया और 100% सफलता प्राप्त की।
    • वित्तीय परीक्षण पर, इसने सफलता को 45% से बढ़ाकर 65% कर दिया।
  • "फ्रॉम स्क्रैच" मोड: उन्होंने रोबोट को इस प्रणाली का उपयोग करके पूरी तरह से शुरुआत से सीखने दिया। इसने अच्छा प्रदर्शन किया, लेकिन कभी-कभी "करते-करते सीखना" थोड़ा अस्त-व्यस्त था, जो दर्शाता है कि कभी-कभी एक ठोस आधार होने के बाद "पैच" लागू करना बेहतर होता है।

5. यह क्यों महत्वपूर्ण है

यह पेपर तर्क देता है कि बेहतर AI एजेंट बनाना केवल AI को स्मार्ट बनाने (इसके मस्तिष्क/वेट्स को बदलने) के बारे में नहीं है। यह उस वातावरण को अनुकूलित करने के बारे में है जिसमें यह काम करता है।

इसे इस तरह सोचें: यदि आपके पास एक बेहतरीन ड्राइवर (AI मॉडल) है, लेकिन सड़क के संकेत भ्रमित करने वाले हैं, मानचित्र गलत है, या कार का स्टीयरिंग ढीला है (द "हार्नेस"), तो ड्राइवर दुर्घटनाग्रस्त हो जाएगा। Bayesian-Agent ड्राइवर के मस्तिष्क को फिर से प्रशिक्षित करने की कोशिश नहीं करता; यह सड़क के संकेतों को ठीक करता है, मानचित्र को अपडेट करता है, और स्टीयरिंग को कसता है, जो इस बात के सत्यापित साक्ष्य पर आधारित है कि कार कहाँ गलत हुई थी।

संक्षेप में: Bayesian-Agent "कोशिश करने और उम्मीद करने" की अव्यवस्थित प्रक्रिया को "परीक्षण, विश्वास और सुधार" की एक संरचित, ऑडिट योग्य प्रक्रिया में बदल देता है, यह सुनिश्चित करता है कि रोबोट के निर्देश केवल अनुमानों पर नहीं, बल्कि तथ्यों के आधार पर विकसित हों।

अपने क्षेत्र के पेपरों की भीड़ में उलझे हुए हैं?

आपके रिसर्च कीवर्ड से मेल खाने वाले सबसे नए और अलग सोच वाले पेपरों का रोज़ाना Digest पाएँ—तकनीकी सारांश के साथ, आपकी भाषा में।

Digest आज़माएँ →