← नवीनतम पेपर
💬 NLP

What Limits Vision-and-Language Navigation ?

यह शोध पत्र StereoNav को प्रस्तुत करता है, जो एक सुदृढ़ विज़न-लैंग्वेज-एक्शन फ्रेमवर्क है जो विज़न-एंड-लैंग्वेज नेविगेशन में सिमुलेशन-टू-रियल-वर्ल्ड अंतराल को दूर करने के लिए स्टीरियो विज़न और टार्गेट-लोकेशन प्रायर्स (Target-Location Priors) का लाभ उठाता है, जिससे स्केलिंग-आधारित दृष्टिकोणों की तुलना में कम पैरामीटर्स और कम प्रशिक्षण डेटा का उपयोग करते हुए जटिल वातावरण में बेहतर विश्वसनीयता के साथ अत्याधुनिक प्रदर्शन प्राप्त होता है।

मूल लेखक: Yunheng Wang, Yuetong Fang, Taowen Wang, Lusong Li, Kun Liu, Junzhe Xu, Zizhao Yuan, Yixiao Feng, Jiaxi Zhang, Wei Lu, Zecui Zeng, Renjing Xu

प्रकाशित 2026-05-14
📖 5 मिनट में पढ़ें🧠 गहराई से पढ़ें

मूल लेखक: Yunheng Wang, Yuetong Fang, Taowen Wang, Lusong Li, Kun Liu, Junzhe Xu, Zizhao Yuan, Yixiao Feng, Jiaxi Zhang, Wei Lu, Zecui Zeng, Renjing Xu

मूल पेपर CC BY 4.0 (http://creativecommons.org/licenses/by/4.0/) के तहत लाइसेंस किया गया है। नीचे दिए गए पेपर की यह व्याख्या AI से तैयार की गई है। इसे लेखकों ने न तो लिखा है, न इसका समर्थन किया है। तकनीकी सटीकता के लिए मूल पेपर देखें। पूरा डिस्क्लेमर पढ़ें

कल्पना कीजिए कि आप एक रोबोट को घर में रास्ता खोजने के लिए प्रशिक्षित कर रहे हैं, जैसे कि एक वॉयस कमांड: "किचन में लाल मग ढूंढो।"

रोबोटिक्स रिसर्च की दुनिया में, इसे विज़न-एंड-लैंग्वेज नेविगेशन (VLN) कहा जाता है। लंबे समय तक, वैज्ञानिकों ने रोबोट्स को अधिक स्मार्ट बनाने के लिए उन्हें बड़े दिमाग (बड़े AI मॉडल) देने और उन्हें अधिक पाठ्यपुस्तकें (अधिक ट्रेनिंग डेटा) खिलाने की कोशिश की। उन्हें उम्मीद थी कि यदि रोबोट भाषा को बेहतर ढंग से "समझ" लेगा, तो वह बेहतर तरीके से घूम पाएगा।

हालाँकि, इस पेपर के लेखक, StereoNav, का तर्क है कि समस्या यह नहीं है कि रोबोट शब्दों को नहीं समझता। समस्या यह है कि रोबोट वास्तविक दुनिया और अस्पष्ट निर्देशों से भ्रमित हो जाता है।

यहाँ उन्होंने जो पाया और उसे कैसे ठीक किया, इसका एक सरल विवरण दिया गया है, रोजमर्रा के उदाहरणों का उपयोग करते हुए:

1. दो बड़ी समस्याएँ

पेपर दो मुख्य कारणों की पहचान करता है कि क्यों रोबोट कंप्यूटर सिमुलेशन से बाहर निकलकर वास्तविक दुनिया में आते समय विफल हो जाते हैं:

  • "धुंधले चश्मे" की समस्या (Perceptual Instability):
    कंप्यूटर सिमुलेशन में, दुनिया एकदम सटीक होती है। लाइटिंग स्थिर होती है और कैमरा भी स्थिर रहता है। वास्तविक दुनिया में, लाइटें झपकाती हैं, छाया हिलती है, और रोबोट चलते समय हिल सकता है (मोशन ब्लर)।
    • उदाहरण: कल्पना कीजिए कि आप एक नक्शा पढ़ने की कोशिश कर रहे हैं जबकि कोई आपका हाथ हिला रहा है और लाइट कम-ज्यादा कर रहा है। भले ही आप नक्शा पढ़ने में जीनियस हों, फिर भी आप खो जाएंगे। वर्तमान रोबोट ऐसे ही हैं; जब दृश्य दुनिया अव्यवस्थित होती है, तो वे "चक्कर" खाने लगते हैं।
  • "अस्पष्ट निर्देश" की समस्या (Instruction Under-specification):
    इंसान अक्सर अधूरे निर्देश देते हैं। "किचन में जाओ" यह नहीं बताता कि अगर दो किचन हैं तो कौन सा किचन, या उसे किचन में ठीक कहाँ रुकना है।
    • उदाहरण: यदि आप एक टैक्सी ड्राइवर को कहते हैं, "पार्क की ओर जाओ," लेकिन शहर में पाँच पार्क हैं, तो ड्राइवर को अनुमान लगाना होगा। यदि ड्राइवर का अनुमान गलत होता है, तो वह विफल हो जाता है। वर्तमान रोबोट केवल अस्पष्ट टेक्स्ट के आधार पर गंतव्य का अनुमान लगाने के लिए मजबूर हैं, जिससे त्रुटियां होती हैं।

2. समाधान: StereoNav

लेखकों ने StereoNav नामक एक नया सिस्टम बनाया। केवल रोबोट का दिमाग बड़ा करने के बजाय, उन्होंने उसे देखने और सोचने के लिए बेहतर उपकरण दिए। उन्होंने दो मुख्य तरकीबों का उपयोग किया:

तरकीब A: "तैरता हुआ लाल बिंदु" (Target-Location Priors)

अस्पष्ट निर्देशों की समस्या को हल करने के लिए, रोबोट को लक्ष्य के बारे में एक "संकेत" दिया जाता है, भले ही इंसान ने उसे पूरी तरह से न बोला हो।

  • यह कैसे काम करता है: सिस्टम लक्ष्य के स्थान का एक मोटा विचार लेता है (जैसे कि एक GPS कोऑर्डिनेट) और उसे सीधे रोबोट के कैमरा व्यू पर एक स्थिर लाल बिंदु के रूप में पेंट करता है।
  • उदाहरण: कल्पना कीजिए कि आप भीड़भाड़ वाले मॉल में अपने दोस्त को ढूंढ रहे हैं। केवल "सारा को ढूंढो" सुनने के बजाय, कोई फर्श पर एक चमकता हुआ लाल बिंदु प्रोजेक्ट करता है जो उसकी सामान्य दिशा की ओर इशारा करता है। भले ही भीड़ एक सेकंड के लिए आपकी दृष्टि को रोक दे, वह लाल बिंदु वहीं रहता है, जो आपको मार्गदर्शन देता है। यह रोबोट को यह जानने में मदद करता है कि कहाँ जाना है, भले ही निर्देश अस्पष्ट हों।

तरकीब B: "3D चश्मे" का प्रभाव (Stereo Vision)

धुंधले चश्मे की समस्या को हल करने के लिए, रोबोट एक कैमरा इस्तेमाल करना बंद करता है और दो (स्टीरियो विजन) का उपयोग करना शुरू करता है, ठीक मानव आंखों की तरह।

  • यह कैसे काम करता है: दो आंखों से दुनिया को देखकर, रोबोट गहराई (depth) की गणना कर सकता है (चीजें कितनी दूर हैं) और कमरे के आकार को समझ सकता है, न कि केवल रंगों को।
  • उदाहरण: कल्पना कीजिए कि आप एक आंख बंद करके गेंद पकड़ने की कोशिश कर रहे हैं। यह तय करना मुश्किल है कि वह कितनी दूर है। यदि आप दोनों आंखें खोलते हैं, तो आपका मस्तिष्क तुरंत दूरी को समझ जाता है। StereoNav ने नेविगेशन के लिए यही किया है। भले ही इमेज धुंधली हो या लाइटिंग अजीब हो, "डेप्थ" की जानकारी रोबोट को कमरे की संरचना समझने में मदद करती है ताकि वह दीवारों से न टकराए या खो न जाए।

3. परिणाम

पेपर में इस नए रोबोट का परीक्षण दो जगहों पर किया गया:

  1. एक वीडियो गेम में (सिमुलेशन): इसने सभी पिछले "बड़े दिमाग" वाले रोबोट्स को पछाड़ दिया, और एक बहुत ही छोटे, अधिक कुशल मॉडल के साथ उच्चतम सफलता दर हासिल की।
  2. वास्तविक दुनिया में: उन्होंने इस सॉफ्टवेयर को एक असली रोबोट (Unitree G1 रोबोट) पर लगाया। जब रोबोट को एक वास्तविक ऑफिस, जिम या लॉबी में नेविगेट करना था जहाँ कैमरे हिल रहे थे और लाइटें बदल रही थीं, तो यह पुराने तरीकों की तुलना में बहुत अधिक बार सफल रहा।

सारांश

पेपर का दावा है कि रोबोट नेविगेशन में बाधा "बुद्धिमत्ता" (भाषा समझना) नहीं है; बल्कि स्थिरता (stability) और मार्गदर्शन (guidance) है।

  • पुराना तरीका: "आइए रोबोट को स्मार्ट बनाएं ताकि वह बेहतर अनुमान लगा सके।"
  • StereoNav का तरीका: "आइए रोबोट को एक विजुअल गाइड (लाल बिंदु) और बेहतर गहराई का बोध (दो आंखें) दें ताकि वह अस्त-व्यस्त वास्तविक दुनिया से भ्रमित न हो।"

इन दोनों को मिलाकर, रोबोट विश्वसनीय रूप से नेविगेट कर सकता है, भले ही निर्देश अस्पष्ट हों और वातावरण अराजक हो।

अपने क्षेत्र के पेपरों की भीड़ में उलझे हुए हैं?

आपके रिसर्च कीवर्ड से मेल खाने वाले सबसे नए और अलग सोच वाले पेपरों का रोज़ाना Digest पाएँ—तकनीकी सारांश के साथ, आपकी भाषा में।

Digest आज़माएँ →