Declarative Skills for AI Agents in Knowledge-Grounded Tool-Use Workflows
यह शोध पत्र तर्क देता है कि डिक्लेरेटिव एजेंट (declarative agents), जो ऑर्केस्ट्रेशन के लिए प्राकृतिक-भाषा कौशल फ़ाइलों का उपयोग करते हैं, अधूरे साक्ष्य की प्रमुख बाधा को दूर करने के लिए उच्च-गुणवत्ता वाली रिट्रीवल (retrieval) की उपलब्धता होने पर, ज्ञान-आधारित टूल-उपयोग वर्कफ़्लो में कठोर इम्पैरेटिव स्टेट मशीनों (imperative state machines) की तुलना में सटीकता में सुधार करके और त्रुटियों को कम करके बेहतर प्रदर्शन करते हैं।
मूल पेपर CC BY 4.0 (http://creativecommons.org/licenses/by/4.0/) के तहत लाइसेंस किया गया है। नीचे दिए गए पेपर की यह व्याख्या AI से तैयार की गई है। इसे लेखकों ने न तो लिखा है, न इसका समर्थन किया है। तकनीकी सटीकता के लिए मूल पेपर देखें। पूरा डिस्क्लेमर पढ़ें
कल्पना कीजिए कि आप अपने बैंक खाते को प्रबंधित करने में मदद करने के लिए एक नया सहायक नियुक्त कर रहे हैं। आपके पास नियमपुस्तिकाओं, नीति दस्तावेजों और टूल मैनुअलों का एक विशाल, अव्यवस्थित पुस्तकालय (ज्ञान आधार या "Knowledge Base") है। आपका लक्ष्य सहायक को विशिष्ट कार्य करने के लिए प्रेरित करना है, जैसे कि खाता बंद करना या किसी शुल्क पर विवाद करना, इसके लिए सही नियमों को खोजना और सही उपकरणों का उपयोग करना।
यह शोध पत्र इस बात की एक दौड़ है कि इस सहायक को प्रबंधित करने के तीन अलग-अलग तरीकों में से कौन सा वास्तव में काम पूरा करता है।
तीन "प्रबंधक" (The Three "Managers")
शोधकर्ताओं ने अपने AI सहायक के लिए तीन अलग-अलग प्रबंधन शैलियों का परीक्षण किया:
1. "नग्न" सहायक (बेसलाइन - The "Naked" Assistant)
यह वह सहायक है जिसके पास कोई विशेष निर्देश नहीं हैं। आप उन्हें बस बातचीत का कच्चा इतिहास देते हैं और कहते हैं, "जाओ और इसे समझ लो।" उन्हें संचालन के क्रम का अनुमान लगाना होगा, अपनी पहचान सत्यापित करना याद रखना होगा, और स्वयं सही टूल खोजने होंगे।
- उपमा: एक पर्यटक को किसी विदेशी शहर का नक्शा देकर कहना, "संग्रहालय खोजो और टिकट खरीदो।"
2. "घोषणात्मक" सहायक (स्किल-फाइल मैनेजर - The "Declarative" Assistant)
इस सहायक को "स्किल फाइल्स" (Skill Files) मिलती हैं—सरल, प्राकृतिक भाषा में लिखे गए 'चीट शीट्स' (जैसे मार्कडाउन दस्तावेज़) जो उनके निर्देशों के साथ जुड़े होते हैं। ये फाइलें सहायक को एक कठोर पथ का पालन करने के लिए मजबूर नहीं करती हैं; इसके बजाय, वे कहती हैं जैसे, "हे, खाता बंद करने से पहले, सुनिश्चित करें कि कोई लंबित विवाद (pending disputes) न हो," या "यदि आप टूल का नाम नहीं जानते हैं तो हमेशा लाइब्रेरी में खोजें।" सहायक इन फाइलों को पढ़ता है और उनके आधार पर निर्णय लेता है कि उसे कैसे कार्य करना है।
- उपमा: पर्यटक को हाइलाइट किए गए सुझावों वाली एक गाइडबुक देना: "ड्राइव करने से पहले ट्रैफिक चेक करना याद रखें," और "यदि आप रास्ता भटक जाएं तो दिशा-निर्देश पूछें।" पर्यटक अभी भी कार चलाता है, लेकिन उसके पास बेहतर सलाह होती है।
3. "आदेशात्मक" सहायक (स्टेट-मशीन मैनेजर - The "Imperative" Assistant)
यह सहायक एक सख्त, कंप्यूटर-प्रोग्रामित फ्लोचार्ट द्वारा संचालित होता है। प्रबंधक सहायक को विशिष्ट चरणों से गुजरने के लिए मजबूर करता है: अभिवादन (Greeting) → ट्राइएज (Triage) → सत्यापन (Verification) → योजना (Planning) → निष्पादन (Execution)। कंप्यूटर पुष्टि किए बिना कि सहायक ने "सत्यापन" चरण पार कर लिया है, वह "निष्पादन" चरण (वास्तविक बैंकिंग करने) पर नहीं जा सकता। कंप्यूटर ट्रैफिक लाइट को नियंत्रित करता है; सहायक तभी चलता है जब लाइट हरी होती है।
- उपमा: पर्यटक को एक सेल्फ-ड्राइविंग कार में बिठाना जिसका रूट GPS द्वारा प्रोग्राम किया गया है। कार को हर रेड लाइट पर रुकना ही होगा और वह तब तक बाएं नहीं मुड़ सकती जब तक GPS उसे ऐसा करने के लिए न कहे। ड्राइवर (AI) के पास विचलन करने की कोई स्वतंत्रता नहीं है।
बड़ी खोज: "लाइब्रेरी" ही बाधा है (The Big Discovery: The "Library" is the Bottleneck)
शोधकर्ताओं ने एक चौंकाने वाला सच पाया: यह मायने नहीं रखता कि आपका प्रबंधक कितना अच्छा है यदि लाइब्रेरी अव्यवस्थित है।
- "स्वर्ण" लाइब्रेरी (The "Golden" Library): जब शोधकर्ताओं ने सहायकों को सटीक सही दस्तावेज़ दिए (पूर्ण जानकारी), तो घोषणात्मक सहायक (स्किल फाइल्स के साथ) स्पष्ट विजेता था। उसने कम गलतियाँ कीं और कार्यों को अधिक बार सही ढंग से पूरा किया। "नग्न" सहायक ठीक था, लेकिन "आदेशात्मक" सहायक वास्तव में खराब प्रदर्शन कर गया क्योंकि उसके कठोर नियम बहुत नाजुक (brittle) थे; यदि AI ने किसी चरण को गलत वर्गीकृत कर दिया, तो पूरा सिस्टम अटक जाता या विफल हो जाता।
- "शोरयुक्त" लाइब्रेरी (The "Noisy" Library): जब शोधकर्ताओं ने एक मानक खोज उपकरण का उपयोग किया जो अक्सर गलत दस्तावेज़ वापस लाता था (शोरयुक्त रिट्रीवल), तो सभी विफल रहे। स्किल फाइल्स उस तथ्य को ठीक नहीं कर सकीं कि सहायक गलत नियम पढ़ रहा था। कठोर फ्लोचार्ट भी मदद नहीं कर सका क्योंकि AI गलत जानकारी के आधार पर गलतियाँ कर रहा था।
निष्कर्ष: यदि आपका AI एक अव्यवस्थित, असंरचित डेटाबेस में जानकारी खोज रहा है, तो कोई भी चतुर प्रबंधन (स्किल फाइल्स या कठोर कोड) उसे बचा नहीं सकता। आपको पहले बेहतर खोज उपकरण (search tools) चाहिए।
"अनुपालन" का मिथक (The "Compliance" Myth)
शोधकर्ता यह देखना चाहते थे कि क्या आदेशात्मक सहायक (सख्त फ्लोचार्ट) सुरक्षा नियमों का पालन करने में बेहतर है, जैसे कि "खाते में बदलाव करने से पहले उपयोगकर्ता की आईडी सत्यापित करें।"
- सिद्धांत: सख्त फ्लोचार्ट AI को खाता छूने से पहले पहचान सत्यापित करने के लिए मजबूर करेगा।
- वास्तविकता: यह काम नहीं आया। AI ने अभी भी गलतियाँ कीं। क्योंकि AI अव्यवस्थित जानकारी से भ्रमित था, उसने कभी-कभी "भ्रम" (hallucinate) किया कि उसने सत्यापन चरण पार कर लिया है, या कठोर फ्लोचार्ट AI की त्रुटियों के कारण भ्रमित हो गया। सख्त नियमों ने वास्तव में अनधिकृत परिवर्तन करने से नहीं रोका। वास्तव में, कठोर प्रणाली के विफल होने की संभावना अधिक थी, जिससे वह बार-बार असफल कार्यों को दोहराने के लूप में फंस जाता था, जिससे समय और पैसा बर्बाद होता था।
परिणामों का सारांश (Summary of Results)
- स्किल फाइल्स काम करती हैं (जब जानकारी अच्छी हो): AI को प्राकृतिक भाषा के "चीट शीट्स" (Declarative) देने से उसे नग्न AI की तुलना में बेहतर प्रदर्शन करने में मदद मिलती है, खासकर यदि AI मॉडल बहुत स्मार्ट नहीं है।
- कठोर कोड नाजुक होता है: AI को एक सख्त चरण-दर-चरण फ्लोचार्ट में धकेलना (Imperative) उसे सुरक्षित या अधिक अनुपालन योग्य नहीं बनाता। वास्तव में, इसने इसे अधिक नाजुक और त्रुटियों के प्रति संवेदनशील बना दिया जब चीजें योजना के अनुसार नहीं हुईं।
- खोज (Search) ही सर्वोपरि है: सबसे बड़ी समस्या यह नहीं थी कि AI को कैसे प्रबंधित किया जा रहा था; बल्कि यह थी कि क्या AI सही जानकारी खोज पा रहा था। यदि खोज परिणाम खराब हैं, तो दुनिया की सबसे अच्छी प्रबंधन शैली भी काम नहीं आएगी।
संक्षेप में: यदि आप चाहते हैं कि आपका AI एजेंट जटिल कार्यों में कुशल हो, तो उसके चारों ओर केवल एक कठोर पिंजरा न बनाएं। उसे अच्छे, प्राकृतिक भाषा के निर्देश (स्किल फाइल्स) दें, लेकिन सबसे महत्वपूर्ण बात यह है कि सुनिश्चित करें कि वह सबसे पहले सही जानकारी खोज सके।
अपने क्षेत्र के पेपरों की भीड़ में उलझे हुए हैं?
आपके रिसर्च कीवर्ड से मेल खाने वाले सबसे नए और अलग सोच वाले पेपरों का रोज़ाना Digest पाएँ—तकनीकी सारांश के साथ, आपकी भाषा में।