← नवीनतम पेपर
💬 NLP

Temporal-Distance JEPA: Plan-Aware Representation Learning for Latent World Model Predictive Control

यह शोध पत्र टेम्पोरल-डिस्टेंस जेपा (TD-JEPA) का प्रस्ताव करता है, जो एक वर्ल्ड मॉडल दृष्टिकोण है जो रिप्रेजेंटेशन लर्निंग और प्लानिंग के बीच के अंतर को पाटने के लिए ऑफलाइन रिवॉर्ड-फ्री ट्रेजेक्टरीज से निर्देशित टेम्पोरल कॉस्ट्स को माइन करता है, जिससे पिक्सेल रिकंस्ट्रक्शन या स्पष्ट रिवॉर्ड्स पर निर्भर किए बिना अधिक प्रभावी लक्ष्य-प्रगति रैंकिंग सक्षम होती है और कई वातावरणों में मौजूदा जेपा-आधारित प्लानर्स से बेहतर प्रदर्शन करता है।

मूल लेखक: Jiaxin Bai, Jiaxuan Xiong

प्रकाशित 2026-07-29
📖 8 मिनट में पढ़ें🧠 गहराई से पढ़ें

मूल लेखक: Jiaxin Bai, Jiaxuan Xiong

मूल पेपर CC BY 4.0 (http://creativecommons.org/licenses/by/4.0/) के तहत लाइसेंस किया गया है। नीचे दिए गए पेपर की यह व्याख्या AI से तैयार की गई है। इसे लेखकों ने न तो लिखा है, न इसका समर्थन किया है। तकनीकी सटीकता के लिए मूल पेपर देखें। पूरा डिस्क्लेमर पढ़ें

कल्पना कीजिए कि आप एक रोबोट को एक नई दुनिया में नेविगेट करना सिखा रहे हैं, लेकिन आप उसे कोई नक्शा या नियमों की सूची नहीं दे सकते। आपके पास केवल एक इंसान द्वारा कार्य को पूरी तरह से करने का वीडियो है। यह रोबोटिक्स में "ऑफलाइन लर्निंग" की चुनौती है: एक AI को केवल पुराने फुटेज को देखकर अपने भविष्य के कदमों की योजना बनाना कैसे सिखाया जाए? वैज्ञानिक इसे हल करने के लिए "वर्ल्ड मॉडल" नामक चीज़ का उपयोग करते हैं। एक वर्ल्ड मॉडल को रोबोट के मस्तिष्क के भीतर एक "सपनों की मशीन" के रूप में सोचें। वीडियो के हर पिक्सेल को फिर से बनाने की कोशिश करने के बजाय (जो याददाश्त से एक उत्कृष्ट कृति बनाने जैसा है), रोबोट यह सीखता है कि आगे क्या होने वाला है उसके सार (essence) की भविष्यवाणी कैसे की जाए। यह दुनिया को एक सरलीकृत, अमूर्त "लेटेंट स्पेस" (latent space) में संकुचित कर देता है—एक मानसिक मानचित्र जहाँ समान स्थितियाँ एक-दूसरे के करीब होती हैं।

बड़ा सवाल यह है: एक बार जब रोबट के पास यह मानसिक मानचित्र आ जाता है, तो वह तय कैसे करता है कि कौन सा रास्ता लेना है? आमतौर पर, रोबोट बस इस बात को मापता है कि वह अपने मानसिक मानचित्र पर जहाँ है और जहाँ वह पहुँचना चाहता है, उनके बीच की सीधी रेखा की दूरी कितनी है। लेकिन यहाँ एक पेंच है: वास्तविक दुनिया में, मानचित्र पर सीधी रेखा हमेशा सबसे तेज़ रास्ता नहीं होती है। आप दीवार के माध्यम से एक सीधी रेखा खींच सकते हैं, लेकिन रोबोट दीवार के आर-पार नहीं चल सकता। उसे समय और अनुक्रम (sequence) को समझने की आवश्यकता है। यदि रोबोट केवल दूरी को देखता है, तो वह भ्रमित हो सकता है कि वह लक्ष्य के करीब पहुँच रहा है या बस गोल-गोल घूम रहा है। यह शोध पत्र ठीक इसी समस्या को संबोधित करता है: रोबोट को अपने सपनों में समय के "प्रवाह" को समझना कैसे सिखाया जाए ताकि वह बिना किसी अतिरिक्त पुरस्कार या मानव शिक्षक के बेहतर योजना बना सके।

"सीधी रेखा" वाली सोच के साथ समस्या

शोधकर्ताओं ने LeWM (लेटेंट वर्ल्ड मॉडल) नामक एक शक्तिशाली मौजूदा प्रणाली से शुरुआत की। यह प्रणाली अपने अमूर्त मानसिक मानचित्र में आगे क्या होगा, इसकी भविष्यवाणी करने में बहुत अच्छी है। हालाँकि, जब यह किसी लक्ष्य तक पहुँचने के लिए पथ की योजना बनाने की कोशिश करती है, तो यह एक सरल नियम पर निर्भर करती है: "भविकी के मानसिक चित्र की लक्ष्य से दूरी जितनी कम होगी, उतना ही बेहतर होगा।" यह एक शहर में केवल दो बिंदुओं के बीच की 'हवाई दूरी' (crow-flies distance) को देखकर नेविगेट करने जैसा है। यह खुले मैदानों में ठीक काम करता है, लेकिन यदि आपको किसी इमारत के चारों ओर जाना हो या सीढ़ी चढ़नी हो, तो वह सीधी रेखा आपसे झूठ बोलती है।

लेखकों ने देखा कि जबकि रोबोट का मानसिक मानचित्र अगले कदम की भविष्यवाणी करने में अच्छा था, लेकिन यह इस बात को रैंक करने में बहुत अच्छा नहीं था कि भविष्य की संभावनाओं में से कौन सी वास्तव में कितनी प्रगति कर रही है। एक इंसान द्वारा ब्लॉक को धकेलने के वीडियो में, रोबोट अगले फ्रेम की भविष्यवाणी तो कर सकता था, लेकिन उसे स्वाभाविक रूप से यह पता नहीं था कि फ्रेम 10, फ्रेम 5 की तुलना में लक्ष्य के अधिक "करीब" है क्योंकि वे क्रम में हुए थे। इसमें निर्देशित समय (directed time) की कमी थी।

समाधान: अतीत से समय को खोजना (Mining Time from the Past)

इसे ठीक करने के लिए, टीम ने TD-JEPA (टेम्पोरल-डिस्टेंस जॉइंट-एम्बेडिंग प्रेडिक्टिव आर्किटेक्चर) नामक एक नई प्रणाली बनाई। केवल रोबोट को दूरी का अनुमान लगाने देने के बजाय, उन्होंने इसे प्रदर्शन वीडियो से सीधे समय की अवधारणा को "माइन" (खोजने) के लिए प्रशिक्षित किया।

इसे करने का तरीका यहाँ दिया गया है, एक सरल उपमा का उपयोग करते हुए: कल्पना कीजिए कि आप एक कुकिंग शो देख रहे हैं। आपको टाइमर की आवश्यकता नहीं है यह जानने के लिए कि अंडा फोड़ने के बाद फेंटना होता है, और फेंटने के बाद बेक करना होता है। घटनाओं का क्रम ही प्रगति है। TD-JEPA रोबोट के प्रशिक्षण वीडियो को देखता है और कहता है, "यदि इंसान ने चरण A किया, फिर चरण B किया, फिर चरण C किया, तो चरण C निश्चित रूप से लक्ष्य के पथ पर चरण A से कहीं आगे है।"

यह प्रणाली एक विशेष "निर्देशित लागत" (directed cost) सीखती है। एक सामान्य दूरी के विपरीत जो आगे या पीछे जाने पर समान होती है (जैसे आपके घर और पार्क के बीच की दूरी दोनों तरफ से समान है), यह नई लागत दिशा को समझती है। यह जानती है कि "शुरुआत" से "लक्ष्य" तक जाने में प्रयास लगता है, लेकिन "लक्ष्य" से वापस "शुरुआत" तक जाना एक अलग तरह की यात्रा है। वीडियो से इस निर्देशित प्रवाह को सीखकर, रोबोट एक ऐसा मानसिक मानचित्र बनाता है जहाँ लक्ष्य तक की "दूरी" वास्तव में उन चरणों की संख्या को दर्शाती है जो वहाँ पहुँचने के लिए आवश्यक हैं, न कि केवल यह कि चित्र कितने समान दिखते हैं।

इस नए कौशल का उपयोग करने के दो अलग तरीके

सबसे दिलचस्प निष्कर्षों में से एक यह है कि यह नया "समय-जागरूक" कौशल इस बात पर निर्भर करता है कि रोबोट क्या करने की कोशिश कर रहा है। लेखकों ने पाया कि इस नए ज्ञान का उपयोग करने का सबसे अच्छा तरीका कार्य पर निर्भर करता है:

  1. नेविगेशन और रीचिंग के लिए (टोपोलॉजिकल कार्य): जब रोबोट को स्थान के माध्यम से चलना होता है, जैसे भूलभुलैया में नेविगेट करना या हवा में किसी वस्तु तक पहुँचना, तो नया "निर्देशित समय लागत" (directed time cost) एक आदर्श उपकरण है। यह एक कंपास की तरह कार्य करता है जो डेड एंड (बंद रास्तों) को अनदेखा करते हुए सीधे लक्ष्य की ओर संकेत करता है। उनके परीक्षणों में, इस नए कॉस्ट का उपयोग करने से रोबलेट ने "टू-रूम" नेविगेशन कार्य को 100% समय हल किया, जो पुराने सिस्टम से बेहतर था जो केवल 97.4% सफल हुआ था।

  2. कॉन्टैक्ट-रिच मैनिपुलेशन के लिए (ज्यामितीय कार्य): जब रोबोट को वस्तुओं को धकेलना, खिसकाना या स्टैक करना होता है (जैसे "पुश-टी" कार्य जहाँ वह टी-आकार के ब्लॉक को धकेलता है), तो चीजें जटिल हो जाती हैं। यहाँ, संपर्क का सटीक आकार और कोण सामान्य दिशा से अधिक महत्वपूर्ण होता है। इन मामलों में, नया समय-जागरूक सिस्टम तब सबसे अच्छा काम करता है जब यह पुराने "सीधी रेखा" वाली दूरी पद्धति की मदद करता है, न कि उसे बदलता है। यह रोबोट के मानसिक मानचित्र को परिष्कृत करता है ताकि सीधी रेखा की दूरी अधिक सटीक हो सके। "OGB-Cube" कार्य पर, इस संयोजन ने पुराने सिस्टम की तुलना में सफलता दर में 14.2 अंक का सुधार किया।

उन्होंने क्या पाया (और क्या नहीं)

शोधकर्ताओं ने कड़े परीक्षण किए जहाँ उन्होंने केवल नियोजन पद्धति को छोड़कर बाकी सब कुछ समान रखा। उन्होंने पाया कि TD-JEPA ने सभी वातावरणों में पिछले सर्वोत्तम तरीकों (LeWM और RC-aux नामक एक विधि) को लगातार मेल दिया या उनसे बेहतर प्रदर्शन किया।

हालाँकि, उन्होंने एक सीमा भी पाई। जब उन्होंने जटिल "पुश-टी" कार्य के लिए केवल नए समय-आधारित कॉस्ट का उपयोग करने की कोशिश की, तो रोबोट ने पुराने ज्यामितीय दूरी (86% सफलता) की तुलना में वास्तव में खराब प्रदर्शन किया (69% सफलता)। क्यों? क्योंकि ब्लॉक को धकेलने के लिए कोणों और संपर्क बिंदुओं के सूक्ष्म नियंत्रण की आवश्यकता होती है। "समय" के संकेत ने रोबोट को बताया कि वह करीब पहुँच रहा है, लेकिन उसने यह पर्याप्त विवरण नहीं दिया कि ब्लॉक को सही ढंग से कैसे छुआ जाए। रोबोट को सफल होने के लिए ज्यामितीय "आकार" की जानकारी की आवश्यकता थी। यह सिद्ध करता है कि जबकि समय को समझना महत्वपूर्ण है, यह हर स्थिति में भौतिक ज्यामिति को समझने की आवश्यकता को प्रतिस्थापित नहीं करता है।

मुख्य निष्कर्ष

यह शोध पत्र दिखाता है कि आप एक रोबोट को केवल वीडियो देखकर समय के "प्रवाह" को समझना सिखा सकते हैं, जिसके लिए किसी अतिरिक्त पुरस्कार या मानवीय फीडबैक की आवश्यकता नहीं है। प्रदर्शन लॉग में घटनाओं के क्रम को खोजकर, उन्होंने एक ऐसी प्रणाली बनाई जो जानती है कि भविष्य में कौन सा विकल्प वास्तव में लक्ष्य के "करीब" है। यह नया सिस्टम, TD-JEB, उस अंतर को कम करता है जो रोबोट जो सीखता है और वह कैसे योजना बनाता है, उनके बीच होता है। यह सुझाव देता है कि कुछ कार्यों के लिए, रोबोट को एक नदी की तरह समय के प्रवाह का पालन करना चाहिए, जबकि अन्य कार्यों के लिए, उसे उस प्रवाह का उपयोग अपने भौतिक आकार की समझ को तेज करने के लिए करना चाहिए। परिणाम एक स्मार्टर, अधिक अनुकूलन योग्य रोबोट है जो बेहतर योजना बना सकता है, चाहे वह कमरे में नेविगेट कर रहा हो या मेज पर ब्लॉक को धकेल रहा हो।

अपने क्षेत्र के पेपरों की भीड़ में उलझे हुए हैं?

आपके रिसर्च कीवर्ड से मेल खाने वाले सबसे नए और अलग सोच वाले पेपरों का रोज़ाना Digest पाएँ—तकनीकी सारांश के साथ, आपकी भाषा में।

Digest आज़माएँ →