← नवीनतम पेपर
💻 computer science

FlowDec: Temporal Conditional Flow Decorruptor for Robust Continuous Vision-Language Navigation

यह शोध पत्र FlowDec को प्रस्तुत करता है, जो एक नवीन टेम्पोरल कंडीशनल फ्लो डिकोरप्टर है जो संवर्धित (corrupted) विजुअल इनपुट्स को मजबूती से पुनर्स्थापित करने के लिए हाइब्रिड टेम्पोरल कंडीशनिंग और एक्शन-सेंट्रॉइड गाइडेड फ़िल्टरिंग का लाभ उठाता है, जिससे निरंतर विजन-लैंग्वेज नेविगेशन कार्यों में बड़े मॉडल-आधारित एजेंटों की नेविगेशन सटीकता और दक्षता में महत्वपूर्ण सुधार होता है।

मूल लेखक: Yufei Zhang, Changhao Chen

प्रकाशित 2026-06-23
📖 6 मिनट में पढ़ें🧠 गहराई से पढ़ें

मूल लेखक: Yufei Zhang, Changhao Chen

मूल पेपर CC BY 4.0 (http://creativecommons.org/licenses/by/4.0/) के तहत लाइसेंस किया गया है। नीचे दिए गए पेपर की यह व्याख्या AI से तैयार की गई है। इसे लेखकों ने न तो लिखा है, न इसका समर्थन किया है। तकनीकी सटीकता के लिए मूल पेपर देखें। पूरा डिस्क्लेमर पढ़ें

कल्पना कीजिए कि आप एक रोबोट को केवल वॉयस कमांड के माध्यम से घर में चलने के लिए सिखाने की कोशिश कर रहे हैं, जैसे, "किचन में जाओ, बाएं मुड़ो, और फ्रिज के पास रुक जाओ।" यह विज़न-एंड-लैंग्वेज नेविगेशन (VLN) की चुनौती है। रोबोट को आपकी बात सुननी होगी, दुनिया को देखना होगा, और यह तय करना होगा कि उसे कहाँ कदम रखना है।

हाल ही में, वैज्ञानिकों ने रोबोट को यह करने में मदद करने के लिए "लार्ज मॉडल्स" (सुपर-स्मार्ट AI दिमाग) का उपयोग करना शुरू कर दिया है। ये मॉडल निर्देशों को समझने में बहुत माहिर होते हैं। हालाँकि, उनकी एक बड़ी कमजोरी है: वे तब बहुत नाजुक हो जाते हैं जब दुनिया "अव्यवस्थित" (messy) दिखती है।

यदि रोबोट का कैमरा लेंस गंदा हो जाता है, यदि बाहर बारिश हो रही हो, यदि लाइट झपकी ले (flicker), या यदि रोबोट बहुत तेज़ी से चलता है जिससे इमेज धुंधली हो जाती है, तो AI भ्रमित हो जाता है। यह वैसा ही है जैसे कोई व्यक्ति कागज को हिला रहा हो और उस पर स्याही फैला रहा हो और आप उस दौरान एक नक्शा पढ़ने की कोशिश कर रहे हों। रोबोट को लग सकता है कि दीवार एक दरवाज़ा है, या वह मेज से सीधे टकरा सकता है।

यह पेपर इस समस्या को ठीक करने के लिए FlowDec नामक एक नया टूल पेश करता है। यह कैसे काम करता है, यहाँ सरल उपमाओं के माध्यम से समझाया गया है:

1. समस्या: "धुंधले चश्मे" वाली समस्या

वर्तमान रोबोट ऐसे व्यवहार करते हैं जैसे उन्होंने ऐसे चश्मे पहने हों जो तुरंत गंदे हो जाते हैं। जब दृश्य धुंधला हो जाता है (शोर, बारिश या मोशन के कारण), तो रोबोट का "दिमाग" (लार्ज मॉडल) घबरा जाता है और गलत निर्णय लेने लगता है। पिछले तरीकों ने इमेज को साफ करने की कोशिश की, लेकिन वे अक्सर हर फोटो को एक अलग, अलग-थलग तस्वीर के रूप में देखते थे, यह नज़रअंदाज़ करते हुए कि रोबोट एक निरंतर पथ (continuous path) के माध्यम से आगे बढ़ रहा है।

2. समाधान: FlowDec (एक "स्मार्ट टाइम-ट्रैवलिंग क्लीनर")

FlowDec एक विशेष मॉड्यूल है जो रोबोट के कैमरे और उसके दिमाग के बीच स्थित होता है। इसका काम दिमाग द्वारा निर्णय लेने की कोशिश करने से पहले अव्यवस्थित इमेजेस को साफ करना है। यह दो चतुर तरीकों से ऐसा करता है:

A. "मेमोरी लेन" रणनीति (टेम्पोरल कंडीशनिंग)

कल्पना कीजिए कि आप अपने एक दोस्त के दिखने के बारे में अनुमान लगाने की कोशिश कर रहे हैं, लेकिन आपके पास केवल उनकी एक धुंधली फोटो है।

  • पुराना तरीका: आप केवल उस एक धुंधली फोटो के आधार पर अनुमान लगाते हैं।
  • FlowDec का तरीका: आप धुंधली फोटो को देखते हैं और याद करते हैं कि एक सेकंड पहले ली गई फोटो में आपका दोस्त कैसा दिखता था। चूंकि लोग अचानक से अपना चेहरा नहीं बदलते, इसलिए FlowDec यह अनुमान लगाने में मदद करता है कि वर्तमान अव्यवस्थित इमेज को वास्तव में कैसा दिखना चाहिए

यह समय का एक "प्रवाह" (flow) बनाता है, यह सुनिश्चित करता है कि आज के हॉलवे की साफ की गई इमेज, एक सेकंड पहले के हॉलवे की साफ की गई इमेज के साथ सुसंगत (consistent) हो। यह रोबोट को दीवारों को झपकते या कूदते हुए देखने से रोकता है।

B. "स्टेप-चेक" रणनीति (एक्शन-सेंट्रॉइड फ़िल्टरिंग)

यह सबसे अनूठा हिस्सा है। FlowDec केवल इमेज को साफ नहीं करता है; यह यह भी जांचता है कि क्या सफाई रोबोट की गति के लिए तर्कसंगत है।

  • उपमा: कल्पना कीजिए कि आप एक गलियारे में चल रहे हैं। यदि आप एक कदम आगे (forward) लेते हैं, तो दृश्य एक विशिष्ट, अनुमानित तरीके से बदलना चाहिए (दीवारें करीब आती हैं)। यदि आप बाएं (left) मुड़ते हैं, तो दृश्य दाईं ओर खिसकना चाहिए।
  • FlowDec इसका उपयोग कैसे करता है: सिस्टम जानता है कि हर चाल (आगे बढ़ना, बाएं मुड़ना, दाएं मुड़ना) के लिए "अपेक्षित परिवर्तन" क्या है। एक इमेज को साफ करने के बाद, यह पूछता है: "क्या यह साफ की गई इमेज उस दृश्य से मेल खाती है जो मुझे उस कदम के बाद देखने की उम्मीद थी?"
    • यदि साफ की गई इमेज उस विशिष्ट कदम के लिए अजीब दिखती है (उदाहरण के लिए, दीवारें गलत दिशा में चली गईं), तो FlowDec कहता है, "नहीं, यह सफाई गलत है," और एक अलग दृष्टिकोण आज़माता है।
    • यह एक गुणवत्ता नियंत्रण निरीक्षक (quality control inspector) की तरह कार्य करता है जो केवल तभी साफ की गई इमेज को स्वीकार करता है जब वह रोबोट की गति की कहानी में फिट बैठती है।

3. यह बाकी सबसे बेहतर क्यों है?

शोधकर्ताओं ने दो मुख्य मानदंडों का उपयोग करके अन्य तरीकों के मुकाबले FlowDec का परीक्षण किया: सटीकता (Accuracy) और गति (Speed)

  • सटीकता: जब इमेजेस खराब (शोर, कोहरा, धुंधलापन) थीं, तब FlowDec ने रोबोट को अपने लक्ष्य तक पहुँचने में अन्य तरीकों की तुलना में बहुत अधिक बार मदद की। इसने एक परीक्षण में रोबोट की सफलता दर में लगभग 25% और दूसरे में 9% का सुधार किया।
  • गति: अन्य तरीके जो इमेजेस को साफ करने की कोशिश करते हैं, वे धीमे होते हैं, जैसे किसी चित्र को फिर से पेंट करने के लिए एक धीमे कलाकार का इंतज़ार करना। FlowDec एक हाई-स्पीड स्कैनर की तरह है। यह अगले सबसे अच्छे तरीके की तुलना में 3 से 8 गुना तेज़ है। यह महत्वपूर्ण है क्योंकि वास्तविक दुनिया में चलने वाले रोबोट के पास हर कदम के लिए सेकंडों तक इंतज़ार करने की गुंजाइश नहीं होती; उसे तुरंत प्रतिक्रिया देने की आवश्यकता होती है।

4. वास्तविक दुनिया का प्रमाण

शोधकर्ताओं ने इसे केवल कंप्यूटर पर टेस्ट नहीं किया। उन्होंने इस सिस्टम को एक वास्तविक, चार पैरों वाले रोबोट (एक Unitree GO2) पर लगाया और उसे वास्तविक कमरों और बाहरी क्षेत्रों में नेविगेट करने के लिए भेजा। यहाँ तक कि जब उन्होंने खराब कैमरा स्थितियों (जैसे डिजिटल शोर जोड़ना या मोशन ब्लर का अनुकरण करना) को सिम्युलेट किया, तब भी FlowDec वाला रोबोट बिना इसके वाले रोबोट की तुलना में रास्ता खोजने में बहुत बेहतर था।

सारांश

FlowDec नेविगेटर्स के लिए एक सुरक्षा जाल (safety net) है। यह स्मार्ट चश्मे की तरह कार्य करता है जो:

  1. याद रखता है कि एक सेकंड पहले दुनिया कैसी दिखती थी ताकि अंतराल को भरा जा सके।
  2. जांचता है कि क्या साफ किया गया दृश्य रोबोट की वर्तमान गति के लिए सही है।
  3. इतना तेज़ काम करता है कि रोबोट को रुककर इंतज़ार न करना पड़े।

यह रोबोट को खराब कैमरा क्वालिटी से भ्रमित हुए बिना, अस्त-व्यस्त और अप्रत्याशित वास्तविक दुनिया के वातावरण में नेविगेट करने की अनुमति देता है।

अपने क्षेत्र के पेपरों की भीड़ में उलझे हुए हैं?

आपके रिसर्च कीवर्ड से मेल खाने वाले सबसे नए और अलग सोच वाले पेपरों का रोज़ाना Digest पाएँ—तकनीकी सारांश के साथ, आपकी भाषा में।

Digest आज़माएँ →