← नवीनतम पेपर
💬 NLP

VISTA: A Controllable Platform for Generating and Auditing Egocentric Assistance Scenarios

VISTA एक नियंत्रणीय प्लेटफॉर्म है जो प्राकृतिक भाषा के बीजों (natural language seeds) से ऑडिट करने योग्य, संपादन योग्य और विविध अमिकेंद्रित (egocentric) सहायता परिदृश्य उत्पन्न करता है, जो एक छह-चरणीय पाइपलाइन के माध्यम से AI एजेंटों की सक्रिय सहायता क्षमताओं के मूल्यांकन के लिए यथार्थवादी दृश्य डेटा के निर्माण को सक्षम बनाता है और वास्तविक दुनिया के संग्रह तथा मौजूदा सिमुलेशन की सीमाओं को दूर करता है।

मूल लेखक: Yu-Hsiang Liu, Yu-Chien Tang, An-Zi Yen

प्रकाशित 2026-07-31
📖 7 मिनट में पढ़ें🧠 गहराई से पढ़ें

मूल लेखक: Yu-Hsiang Liu, Yu-Chien Tang, An-Zi Yen

मूल पेपर CC BY 4.0 (http://creativecommons.org/licenses/by/4.0/) के तहत लाइसेंस किया गया है। नीचे दिए गए पेपर की यह व्याख्या AI से तैयार की गई है। इसे लेखकों ने न तो लिखा है, न इसका समर्थन किया है। तकनीकी सटीकता के लिए मूल पेपर देखें। पूरा डिस्क्लेमर पढ़ें

कल्पना कीजिए कि आप एक रोबोट को एक मददगार दोस्त बनना सिखाने की कोशिश कर रहे हैं। आप चाहते हैं कि उसे पता हो कि आपको पानी का गिलास कब थमाना है क्योंकि आप प्यासे दिख रहे हैं, या आपको गर्म चूल्हा छूने से कब रोकना है। लेकिन पेचीदा बात यह है कि आप यह कैसे जांचेंगे कि रोबोट वास्तव में इसमें अच्छा है या नहीं, बिना असली लोगों को असली खतरे में डाले? यदि आप इन स्थितियों को वास्तविक दुनिया में फिल्माने की कोशिश करते हैं, तो यह महंगा, कठिन और कभी-कभी नकली दुर्घटना को मंच पर दिखाने के लिए बहुत जोखिम भरा होता है। दूसरी ओर, यदि आप बस कंप्यूटर से कहें कि "एक रोबोट की मदद करने का वीडियो बनाओ," तो परिणाम अक्सर एक अराजक गड़बड़ी जैसा होता है जहाँ रोबोट भूल जाता है कि उसे क्या करना था, या दृश्य वैसा बिल्कुल नहीं दिखता जैसा आपने मांगा था। यह बिल्कुल वैसा ही है जैसे सभी सामग्रियों को एक ब्लेंडर में डालकर एक बेहतरीन केक बनाने की उम्मीद करना, बजाय इसके कि एक रेसिपी का पालन किया जाए।

यहीं पर "नियंत्रणीय पीढ़ी" (controllable generation) का विचार आता है। केवल एक अच्छे परिणाम की उम्मीद करने के बजाय, वैज्ञानिक ऐसे उपकरण बना रहे हैं जो आपको कंप्यूटर द्वारा चित्र बनाना शुरू करने से पहले ही चरण-दर-चरण कहानी डिजाइन करने की अनुमति देते हैं। इसे एक फिल्म निर्देशक की तरह समझें जो कैमरे रोल होने से पहले स्क्रिप्ट लिखता है, अभिनेताओं की गतिविधियों को तय करता है और लाइटिंग की जांच करता है। यह नया पेपर VISTA नामक एक टूल पेश करता है, जो इन "मददगार रोबोट" की कहानियाँ बनाने के लिए एक अत्यंत व्यवस्थित निर्देशक के सहायक के रूप में कार्य करता है। यह केवल अनुमान नहीं लगाता; यह आपको दृश्य बनाने, विवरणों की जांच करने और वीडियो देखने से पहले गलतियों को सुधारने की अनुमति देता है, जिससे यह सुनिश्चित होता है कि रोबोट के कार्य वास्तव में उस कहानी से मेल खाते हैं जिसे आप बताना चाहते थे।


VISTA से मिलें: रोबोट सहायकों के लिए निर्देशक का सहायक

मिलिए VISTA से, एक नया प्लेटफॉर्म जो रोबोट (या AI एजेंट) द्वारा मनुष्यों की मदद करने के वीडियो बनाने के लिए एक हाई-टेक स्टोरीबोर्ड कलाकार की तरह काम करता है। VISTA के पीछे के शोधकर्ताओं ने एक बड़ी समस्या देखी: AI को मददगार बनाने के लिए, हमें लोगों के मदद पाने के बहुत सारे उदाहरणों की आवश्यकता है। लेकिन वास्तविक जीवन को फिल्माना अव्यवस्थित है, और वास्तविक दुनिया में नकली दुर्घटनाओं को बनाना खतरनाक है। इसलिए, उन्होंने एक ऐसा सिस्टम बनाया है जो आपको शब्दों का उपयोग करके इन परिदृश्यों को "लिखने" देता है, और फिर उन शब्दों को वीडियो में बदल देता है, लेकिन एक बहुत ही महत्वपूर्ण मोड़ के साथ: आप पूरे समय नियंत्रण में रहते हैं।

रेसिपी बनाम जादू की छड़ी

अधिकांश AI वीडियो जनरेटर एक जादू की छड़ी की तरह काम करते हैं। आप "एक व्यक्ति कप गिराता है, और एक रोबोट उसे पकड़ लेता है" जैसा प्रॉम्प्ट टाइप करते हैं, और AI अनुमान लगाने की कोशिश करता है कि वह कैसा दिखेगा। अक्सर, परिणाम भ्रमित करने वाला होता है—रोबोट अदृश्य हो सकता है, कप तैर सकता है, या टाइमिंग पूरी तरह से गलत हो सकती है।

VISTA अलग है। यह वीडियो निर्माण को एक सख्त रेसिपी के साथ जटिल केक बनाने की तरह मानता है। केवल एक कटोरे में आटा और अंडे डालने के बजाय, VISTA इस प्रक्रिया को छह स्पष्ट चरणों में तोड़ देता है:

  1. डिज़ाइन ब्रीफ: आप एक सरल विचार ("सीड") के साथ शुरू करते हैं, जैसे "कोई गर्म कॉफी गिराने वाला है।"
  2. सीन सेटअप: सिस्टम यह पता लगाता है कि कमरे में कौन सी वस्तुएं हैं और वे कहाँ हैं।
  3. इवेंट स्क्रिप्ट: यह सेकंड-दर-सेकंड एक समयबद्ध स्क्रिप्ट लिखता है, जो ठीक से बताता है कि क्या हो रहा है।
  4. इंटरैक्शन प्लान: यह तय करता है कि मदद कैसे होती है। क्या व्यक्ति मदद मांगता है? क्या वे भ्रमित दिखते हैं? या क्या वे बस चुपचाप संघर्ष करते हैं?
  5. रेंडरिंग प्लान: यह सभी निर्देशों को एक ऐसे प्रारूप में पैक करता है जिसे वीडियो जनरेटर समझ सके।
  6. अंतिम वीडियो: इन सभी चरणों की जांच और अनुमोदन के बाद ही सिस्टम वास्तव में वीडियो बनाता है।

मदद मांगने के तीन तरीके

VISTA इतना स्मार्ट है कि वह समझता है कि लोग अलग-अलग तरीकों से मदद मांगते हैं। शोधकर्ताओं ने इन्हें तीन "इंटरैक्शन मोड" में व्यवस्थित किया है:

  • रिएक्टिव (प्रतिक्रियात्मक): व्यक्ति सीधे कहता है, "मेरी मदद करो!" (जैसे किसी दोस्त से नमक पास करने के लिए कहना)।
  • एक्सप्लिसिट प्रोएक्टिव (स्पष्ट सक्रिय): व्यक्ति मदद नहीं मांगता, लेकिन वह कुछ ऐसा कहता है जो दर्शाता है कि उसे मदद की जरूरत है, जैसे "मुझे यकीन नहीं है कि मैं इसे सही से कर रहा हूँ या नहीं।"
  • इम्प्लिसिट प्रोएक्टिव (अंतर्निहित सक्रिय): व्यक्ति कुछ भी नहीं कहता। रोबोट को दृश्य संकेतों को पहचानना होगा, जैसे किसी का डगमगाना या टूटे हुए उपकरण की ओर देखना, और यह समझना होगा कि उन्हें मदद की आवश्यकता है।

सिस्टम सुरक्षा-महत्वपूर्ण (Safety-Critical) स्थितियों (जैसे गर्म चूल्हा छूना) और रोजमर्रा की असुविधाओं (जैसे पेन गिराना) के बीच अंतर भी करता है। यह महत्वपूर्ण है क्योंकि यह AI को यह सोचने से रोकता है कि हर बार जब कोई रोबोट मदद करता है, तो यह जीवन-मरण का मामला होना चाहिए। कभी-कभी, मदद केवल जीवन को थोड़ा आसान बनाने के बारे में होती है।

"ह्यूमन-इन-द-लूप" सुरक्षा जाल

VISTA का सबसे शानदार हिस्सा यह है कि यह केवल वीडियो जेनरेट करके उम्मीद नहीं करता। यह एक रिव्यू ट्रेल (समीक्षा मार्ग) बनाता है। कल्पना कीजिए कि आप एक फिल्म संपादित कर रहे हैं। यदि स्क्रिप्ट कहती है "रोबोट कप पकड़ता है," लेकिन वीडियो में रोबंड उसे गिराते हुए दिखता है, तो VISTA आपको अंतिम वीडियो लॉक होने से पहले उस गलती को पकड़ने की अनुमति देता है।

आप "VISTA एजेंट" (सिस्टम के भीतर एक सहायक) से बात कर सकते हैं और कह सकते हैं, "हे, रोबोट को कप पहले पकड़ लेना चाहिए था," या "सुनिश्चित करें कि व्यक्ति भ्रमित दिखे।" एजेंट एक बदलाव का प्रस्ताव देता है, आप अंतर की समीक्षा करते हैं, और यदि आपको यह पसंद आता है, तो आप "Approve" पर क्लिक करते हैं। इसका मतलब है कि प्रत्येक वीडियो के साथ एक इतिहास होता है कि किसने क्या और क्यों बदला, जिससे पूरी प्रक्रिया पारदर्शी और ऑडिट योग्य बन जाती है।

क्या यह सफल रहा?

शोधकर्ताओं ने 60 अलग-अलग परिदृश्यों को बनाकर और दो अन्य तरीकों के साथ तुलना करके VISTA का परीक्षण किया जो बिना किसी चरण-दर-चरण योजना के एक बार में वीडियो जेनरेट करते हैं। उन्होंने 11 मानव समीक्षकों से वीडियो देखने और यह चुनने के लिए कहा कि कौन सा मूल कहानी से सबसे अच्छी तरह मेल खाता है।

परिणाम स्पष्ट थे:

  • VISTA ने सबसे अधिक वोट जीते: इसे 52.1% बार सबसे अच्छा वीडियो चुना गया।
  • अन्य तरीकों ने केवल 22.4% और 25.5% बार जीत हासिल की।
  • जब समीक्षकों ने 1 से 5 के पैमाने पर वीडियो के कहानी से मेल खाने की रेटिंग दी, तो VISTA ने 3.65 स्कोर किया, जबकि अन्यों ने लगभग 3.2 स्कोर किया।

यह सुझाव देता है कि जब आप AI को योजना बनाने, जांच करने और अपने काम में सुधार करने का मौका देते हैं, तो अंतिम परिणाम वास्तव में आपके इच्छित परिणाम के प्रति बहुत अधिक वफादार होता है।

VISTA क्या नहीं करता

यह जानना महत्वपूर्ण है कि यह पेपर क्या दावा नहीं करता है। VISTA कोई जादुई समाधान नहीं है जो गारंटी देता है कि एक रोबोट वास्तविक दुनिया में सुरक्षित होगा। वीडियो सिंथेटिक (कंप्यूटर द्वारा निर्मित) हैं, और हालांकि वे विचारों के परीक्षण के लिए बेहतरीन हैं, वे यह साबित नहीं करते कि एक वास्तविक रोबोट वास्तविक गर्म चूल्हे को बिना किसी को जलाए संभाल सकता है। शोधकर्ता यह भी स्वीकार करते हैं कि उनका परीक्षण समूह छोटा था (60 मामले और 11 समीक्षक), इसलिए हालांकि परिणाम आशाजनक दिखते हैं, लेकिन हर संभावित स्थिति के लिए इसे पूर्ण बनाने के लिए अभी भी बहुत काम करना बाकी है।

संक्षेप में, VISTA एक शक्तिशाली नया उपकरण है जो वीडियो निर्माण को एक "ब्लैक बॉक्स" रहस्य से बदलकर एक स्पष्ट, संपादन योग्य और जांच योग्य प्रक्रिया में बदल देता है। यह एक निर्देशक को स्क्रिप्ट, कैमरा और लाल पेन देने जैसा है, जिससे यह सुनिश्चित होता है कि मददगार रोबोट की कहानी बिल्कुल उसी तरह बताई जाए जैसा कि लेखक चाहता था।

अपने क्षेत्र के पेपरों की भीड़ में उलझे हुए हैं?

आपके रिसर्च कीवर्ड से मेल खाने वाले सबसे नए और अलग सोच वाले पेपरों का रोज़ाना Digest पाएँ—तकनीकी सारांश के साथ, आपकी भाषा में।

Digest आज़माएँ →