VIDEE: Visual and Interactive Decomposition, Execution, and Evaluation of Text Analytics with Intelligent Agents
यह शोध पत्र VIDEE को प्रस्तुत करता है, जो एक मानव-एजेंट सहयोगात्मक प्रणाली है जो प्रवेश स्तर के विश्लेषकों को अपघटन (decomposition), निष्पादन (execution) और मूल्यांकन (evaluation) के तीन-चरणीय वर्कफ़्लो के माध्यम से उन्नत टेक्स्ट एनालिटिक्स करने में सक्षम बनाती है, और विशेषज्ञता के विभिन्न स्तरों पर इसकी प्रभावशीलता और उपयोगिता का प्रदर्शन करती है।
मूल पेपर CC BY 4.0 (http://creativecommons.org/licenses/by/4.0/) के तहत लाइसेंस किया गया है। नीचे दिए गए पेपर की यह व्याख्या AI से तैयार की गई है। इसे लेखकों ने न तो लिखा है, न इसका समर्थन किया है। तकनीकी सटीकता के लिए मूल पेपर देखें। पूरा डिस्क्लेमर पढ़ें
कल्पना कीजिए कि आपके पास ढेर सारे बिखरे हुए अक्षरों, समाचार लेखों या ग्राहकों की समीक्षाओं का एक विशाल ढेर है, और आप उनके भीतर छिपी कहानियों को खोजना चाहते हैं। अतीत में, ऐसा करने के लिए आपको एक कंप्यूटर जादूगर होने की आवश्यकता थी जो जटिल कोडिंग भाषाओं (जैसे Python) और उन्नत गणित को जानता हो। यह बिल्कुल वैसा ही था जैसे बिना बोनट खोले कार के इंजन को ठीक करने की कोशिश करना।
हाल ही में, "AI एजेंट" (स्मार्ट कंप्यूटर प्रोग्राम) इन कार्यों को स्वचालित रूप से करने में बेहतर हो गए हैं। लेकिन इस शोध पत्र के लेखकों ने एक समस्या पाई: यदि आप केवल एक AI को कहते हैं, "इस टेक्स्ट का विश्लेषण करें," तो वह अक्सर आलसी हो जाता है, मनगढ़ंत बातें बनाने लगता है (hallucinations), या एक अस्त-व्यस्त, टूटा हुआ प्लान बना देता है। यह एक बहुत ही आत्मविश्वासी लेकिन अनुभवहीन इंटर्न को काम पर रखने जैसा है जो एक ही विशाल, अराजक चरण में सब कुछ करने की कोशिश करता है और अंत में गलत तथ्यों से भरी रिपोर्ट दे देता है।
इसे ठीक करने के लिए, शोधकर्ताओं ने VIDEE नामक एक प्रणाली बनाई है। VIDEE को एक ऐसे रोबोट के रूप में न सोचें जो आपके लिए काम करता है, बल्कि इसे एक स्मार्ट कंस्ट्रक्शन साइट के रूप में देखें जहाँ आप साइट मैनेजर हैं और AI आपकी क्रू (टीम) है।
यहाँ बताया गया है कि VIDEE कैसे काम करता है, जिसे तीन सरल चरणों में विभाजित किया गया है:
1. ब्लूप्रिंट चरण (Decomposition - विघटन)
समस्या: यदि आप AI से कहते हैं, "इन 2,000 पत्रों में से विषय (themes) खोजो," तो वह शायद केवल एक सरल तरीका चुन लेगा और उसी पर टिका रहेगा, भले ही वह विचार बुरा क्यों न हो।
VIDEE का समाधान: VIDEE एक विशेष खोज उपकरण (जिसे Monte-Carlo Tree Search कहा जाता है) का उपयोग करता है जो एक शाखाओं वाले मानचित्र (branching map) की तरह कार्य करता है।
- कल्पना कीजिए कि आप एक रोड ट्रिप की योजना बना रहे हैं। केवल एक रास्ता चुनने के बजाय, AI दर्जनों संभावित रास्तों के साथ एक पेड़ (tree) बनाता है।
- जैसे-जैसे AI इन रास्तों का पता लगाता है, वह आपसे (मानव से) रुककर पूछता है: "क्या यह चरण बहुत जटिल है? क्या पिछला चरण पूरा होने के बाद यह चरण समझ में आता है? क्या यह चरण वास्तव में महत्वपूर्ण है?"
- आप मानचित्र को बदल सकते हैं, खराब शाखाओं को हटा सकते हैं, या AI को एक अलग दिशा में जाने के लिए कह सकते हैं। आप जहाज को नियंत्रित कर रहे हैं, यह सुनिश्चित कर रहे हैं कि कोई भी काम शुरू करने से पहले योजना ठोस हो।
2. निर्माण चरण (Execution - निष्पादन)
समस्या: एक बार योजना बन जाने के बाद, AI अक्सर इसे करने के लिए कोड लिखने की कोशिश करता है। लेकिन यदि योजना जटिल है, तो AI ऐसा कोड लिख सकता है जो क्रैश हो जाए, या वह यह दिखावा कर सकता है कि उसने कार्य पूरा कर लिया है जबकि वास्तव में उसने नहीं किया।
VIDEE का समाधान: VIDEE आपके "ब्लूप्रिंट" को एक चरण-दर-चरण असेंबली लाइन में बदल देता है।
- AI बड़े लक्ष्य को छोटे, ठोस कार्यों में तोड़ देता है (जैसे "पत्र पढ़ें," "नाम खोजें," "नामों को समूह में बांटें")।
- यह एक पाइपलाइन बनाता है जहाँ आप प्रत्येक चरण को देख सकते हैं।
- आप यह देखने के लिए केवल एक चरण पर "Execute" क्लिक कर सकते हैं कि क्या वह काम करता है। यदि AI कुछ अजीब करने की कोशिश करता है, तो आप उसे तुरंत पकड़ सकते हैं। यह घर की नींव डालने से पहले नींव की जाँच करने जैसा है।
3. निरीक्षण चरण (Evaluation - मूल्यांकन)
समस्या: आप कैसे जानेंगे कि AI ने केवल परिणाम मनगढ़ंत तो नहीं बनाए?
VIDEE का समाधान: VIDEE एक क्वालिटी कंट्रोल इंस्पेक्टर की तरह कार्य करता है।
- एक चरण पूरा होने के बाद, यह स्वचालित रूप से उस चरण के लिए एक "रिपोर्ट कार्ड" तैयार करता है।
- यह आपके द्वारा निर्धारित नियमों के आधार पर काम को ग्रेड देने के लिए अन्य AI "जजों" का उपयोग करता है (जैसे, "क्या इस सारांश ने मुख्य विचार को पकड़ा?")।
- ये परिणाम आपको विजुअल (दृश्य रूप) में दिखाए जाते हैं। उदाहरण के लिए, यदि आप ग्राहकों की शिकायतों का विश्लेषण कर रहे हैं, तो VIDEE एक रंगीन चार्ट दिखा सकता है जहाँ आप देख सकते हैं कि कौन सी शिकायतें "खुश" हैं और कौन सी "नाराज़" हैं, और वास्तव में कौन से पत्र किस समूह में आते हैं। आप वास्तविक पत्र पढ़ने के लिए चार्ट में एक बिंदु पर क्लिक कर सकते हैं।
जब उन्होंने इसका परीक्षण किया तो क्या हुआ?
शोधकर्ताओं ने दो प्रकार के परीक्षण किए:
"केवल रोबोट" परीक्षण: उन्होंने एक मानक AI को अपने आप टेक्स्ट का विश्लेषण करने की कोशिश करने दी।
- परिणाम: रोबोट अक्सर विफल रहा। इसने डेटा मनगढ़ंत बनाया, लंबे दस्तावेजों से भ्रमित हो गया, और अव्यवस्थित, अतार्किक योजनाएं बनाईं। यह एक ऐसे ड्राइवर की तरह था जो दीवार के माध्यम से गाड़ी चलाने की कोशिश करता रहता है क्योंकि उसे लगता है कि वह एक दरवाजा है।
"मानव + रोबोट" परीक्षण (VIDEE): उन्होंने लोगों को VIDEE सिस्टम का उपयोग करने दिया।
- परिणाम: सिस्टम बहुत बेहतर तरीके से काम कर गया। बिना कोडिंग के अनुभव वाले लोग भी इसका उपयोग करके टेक्स्ट डेटा में अंतर्दृष्टि (insights) खोजने में सक्षम थे।
- मुख्य खोज: लोग परिणामों पर अधिक भरोसा करते थे क्योंकि वे चरण-दर-चरण प्रक्रिया को देख सकते थे। जब एक AI केवल आपको उत्तर देता है (एक "ब्लैक बॉक्स"), तो आपको नहीं पता होता कि वह झूठ बोल रहा है या नहीं। लेकिन जब आप देखते हैं कि AI चरण-दर-चरण उत्तर बना रहा है और आप उसके काम की जाँच कर सकते हैं, तो आप आश्वस्त महसूस करते हैं।
बड़ी सीख
VIDEE यह सिद्ध करता है कि हमें "AI सब कुछ करता है" और "इंसान सब कुछ करते हैं" के बीच चयन करने की आवश्यकता नहीं है। सबसे अच्छा दृष्टिकोण एक साझेदारी है।
- AI विचार उत्पन्न करने, कोड लिखने और भारी काम करने में बहुत अच्छा है।
- इंसान तर्क की जाँच करने, नकली चीजों को पकड़ने और यह सुनिश्चित करने के लिए आवश्यक है कि योजना सही मायने में समझ में आए।
इंसानों को AI को नियंत्रित करने के लिए एक विजुअल मैप देकर, VIDEE शक्तिशाली टेक्स्ट विश्लेषण को सामान्य लोगों (जैसे पत्रकारों या शोधकर्ताओं) के लिए सुलभ बनाता है, बिना उन्हें कंप्यूटर वैज्ञानिक बनाए, जबकि परिणामों को विश्वसनीय और ईमानदार भी रखता है।
अपने क्षेत्र के पेपरों की भीड़ में उलझे हुए हैं?
आपके रिसर्च कीवर्ड से मेल खाने वाले सबसे नए और अलग सोच वाले पेपरों का रोज़ाना Digest पाएँ—तकनीकी सारांश के साथ, आपकी भाषा में।