← नवीनतम पेपर
🤖 machine learning

Latent Memory Palace: Reasoning for Control as Autoregressive Variational Inference

यह शोध पत्र लेटेंट मेमोरी पैलेस (LMP) को प्रस्तुत करता है, जो एक ऐसा ढांचा है जो नियंत्रण तर्क (control reasoning) को एक लेटेंट स्पेस के भीतर ऑटोरेग्रेसिव वेरिएशनल इन्फरेंस के रूप में मॉडल करता है, जिससे पुनरावृत्ति पुनर्प्राप्ति (iterative retrieval) और एक नवीन परिवर्तनीय-लंबाई वाले एक्शन टोकेनाइज़र के माध्यम से अनुकूलित टेस्ट-टाइम कंप्यूट आवंटन और बेहतर नीति प्रदर्शन सक्षम होता है।

मूल लेखक: Chuning Zhu, Eva Xu, Jose Barreiros, Krishnan Srinivasan, Paarth Shah, Abhishek Gupta

प्रकाशित 2026-07-10
📖 6 मिनट में पढ़ें🧠 गहराई से पढ़ें

मूल लेखक: Chuning Zhu, Eva Xu, Jose Barreiros, Krishnan Srinivasan, Paarth Shah, Abhishek Gupta

मूल पेपर CC BY 4.0 (http://creativecommons.org/licenses/by/4.0/) के तहत लाइसेंस किया गया है। नीचे दिए गए पेपर की यह व्याख्या AI से तैयार की गई है। इसे लेखकों ने न तो लिखा है, न इसका समर्थन किया है। तकनीकी सटीकता के लिए मूल पेपर देखें। पूरा डिस्क्लेमर पढ़ें

कल्पना कीजिए कि आप एक रोबोट को एक कठिन कार्य करना सिखाने की कोशिश कर रहे हैं, जैसे कि एक फिसलन भरे बैंगन को उठाना और उसे धीरे से एक कटोरे में रखना। आप बस रोबोट को कह सकते हैं, "यह रही तस्वीर, यह रहा मूव," और उम्मीद कर सकते हैं कि वह इसे तुरंत सही कर लेगा। लेकिन इंसान ऐसे काम नहीं करते। कभी-कभी हम सहज क्रिया (reflex) पर काम करते हैं (जैसे गिरते हुए कप को पकड़ना), लेकिन कभी-कभी हम रुकते हैं, सोचते हैं और विचार करते हैं (जैसे शतरंज की चाल की योजना बनाना)। हम कठिन निर्णयों पर अधिक मानसिक ऊर्जा खर्च करते हैं और आसान निर्णयों पर कम।

यह शोध पत्र रोबोट को उसी तरह की लचीली सोच सिखाने का एक नया तरीका पेश करता है, जिसे लेटेंट मेमोरी पैलेस (Latent Memory Palace - LMP) कहा जाता है।

समस्या: रोबोट बहुत अधिक "एक ही आकार के लिए उपयुक्त" (One-Size-Fits-All) हैं

वर्तमान रोबोटिक मस्तिष्क अक्सर एक ही बड़ी छलांग में एक चाल को समझने की कोशिश करते हैं। लेखक तर्क देते हैं कि यह एक जटिल गणित की समस्या को तुरंत उत्तर का अनुमान लगाकर हल करने की कोशिश करने जैसा है। यह सरल चीजों के लिए काम करता है, लेकिन सटीक और कठिन कार्यों के लिए, यह पर्याप्त नहीं है।

कुछ शोधकर्ताओं ने इसे ठीक करने के लिए रोबोट को "शब्दों में सोचने" (जैसे एक चैटबॉट) के लिए प्रेरित किया, यानी हिलने-डुलने से पहले शब्दों के चरणों की एक लंबी सूची तैयार करना। लेकिन शोध पत्र सुझाव देता है कि रोबोट के लिए यह एक बुरा विचार है। क्यों? क्योंकि शब्द विचारों के लिए तो अच्छे हैं लेकिन किसी उपकरण को पकड़ने या ब्लॉक को खिसकाने के लिए आवश्यक सूक्ष्म, सटीक गतिविधियों के लिए बहुत खराब हैं। एक रोबोट को गति (motion) में सोचने की आवश्यकता होती है, न कि केवल वाक्यों में।

समाधान: अदृश्य महल (The Invisible Palace)

शब्दों में सोचने के बजाय, लेखक प्रस्ताव देते हैं कि रोबोट को एक "लेटेंट मेमोरी पैलेस" में सोचना चाहिए।

एक कल्पना कीजिए कि रोबोट के मस्तिष्क के भीतर एक जादुई, अदृश्य गलियारा है।

  1. महल (The Palace): यह गलियारा छिपे हुए "कमरों" (लेटेंट टोकन) की एक श्रृंखला है।
  2. चहलकदमी (The Walk): जब रोबोट कोई कार्य देखता है, तो वह सीधे उत्तर पर नहीं कूदता। वह इस गलियारे में चलना शुरू करता है।
  3. ठहराव (The Stops): प्रत्येक कदम पर, वह यह जांचने के लिए रुकता है: "क्या मुझे और सोचने की आवश्यकता है?"
    • यदि कार्य आसान है (जैसे "हाथ को आगे बढ़ाएं"), तो वह शायद दो कदम चलेगा और कहेगा, "समझ गया!"
    • यदि कार्य कठिन है (जैसे "एक छोटे छेद में पेग को संरेखित करना"), तो वह और अधिक कमरे घूमता रहेगा, अधिक विवरण एकत्र करेगा, जब तक कि वह आश्वस्त महसूस न करने लगे।
  4. निकास (The Exit): यह चहलकदमी अपने आप तब रुक जाती है जब रोबोट एक विशेष "स्टॉप" सिग्नल (जिसे EOS टोकन कहा जाता है) उत्पन्न करता है। यही मुख्य बात है: रोबोट खुद तय करता है कि कितनी सोच की आवश्यकता है।

इसे अनुकूली गणना (adaptive computation) कहा जाता है। रोबोट केवल तभी अधिक "मस्तिष्क शक्ति" (टेस्ट-टाइम कंप्यूट) खर्च करता है जब स्थिति मांग करती है, और जब उत्तर स्पष्ट होता है तो ऊर्जा बचाता है।

उन्होंने इसे कैसे सिखाया: "अनुमान और जांच" का खेल

आप रोबोट को सिर्फ यह नहीं कह सकते कि "ज़ोर से सोचो।" लेखकों को गणित पर आधारित वेरिएशनल इन्फरेंस (Variational Inference) नामक एक चतुर "अनुमान और जांच" के खेल का उपयोग करके इसे सिखाना पड़ा।

एक जासूस की तरह कल्पना करें जो अपराध को सुलझाने की कोशिश कर रहा है:

  • जासूस (रोबोट): दृश्य को देखता है (अवलोकन) और अपराधी की क्रियाओं (गति) का पुनर्निर्माण करने की कोशिश करता है।
  • सुराग (लेटेंट टोकन): जासूस अपराध को समझाने के लिए छिपे हुए सुरागों की एक श्रृंखला (महल में चहलकदमी) उत्पन्न करता है।
  • नियम: जासूस को पुरस्कृत किया जाता है यदि वह क्रिया को पूरी तरह से पुन: निर्मित कर सकता है और यदि वह अनावश्यक कदम बहुत अधिक नहीं लेता है। यदि वह एक सरल अपराध के लिए बहुत अधिक कदम लेता है, तो उसे दंड मिलता है। यदि वह एक जटिल अपराध के लिए बहुत जल्दी रुक जाता है, तो वह व्याख्या करने में विफल रहता है।

शोध पत्र दिखाता है कि इस खेल को खेलकर, रोबोट हर स्थिति के लिए सोचने के सही चरणों की संख्या उत्पन्न करना सीख जाता है। उन्होंने इसे कंप्यूटर सिमुलेशन और वास्तविक रोबोट दोनों में परखा, और परिणाम उत्साहजनक थे: रोबोट कठिन कार्यों में बेहतर हुआ और पिछले तरीकों की तुलना में विविध कार्यों को बेहतर ढंग से संभाल सका।

"टोकन" का कमाल

शोध पत्र ने एक दिलचस्प दुष्प्रभाव भी खोजा। क्योंकि रोबोट ने इन परिवर्तनीय-लंबाई वाले "चरणों" में क्रियाओं को तोड़ने के लिए सीखा, इस प्रणाली का उपयोग एक टोकेनाइज़र (tokenizer) के रूप में किया जा सकता है।

कल्पना कीजिए कि आपके पास एक लंबा, अव्यवस्थित वाक्य है। एक टोकेनाइज़र इसे छोटे, साफ शब्दों में तोड़ देता है। लेखकों ने पाया कि यह "मेमोरी पैलेस" विधि जटिल रोबोटिक गतिविधियों को अन्य विधियों की तुलना में बहुत बेहतर सेट के "शब्दों" (टोकन) में तोड़ देती है। जब उन्होंने इन विशेष टोकन का उपयोग अन्य रोबोटिक मस्तिष्क को प्रशिक्षित करने के लिए किया, तो उन मस्तिष्कों ने काफी बेहतर प्रदर्शन किया। यह रोबोट को उसकी गतिविधियों का वर्णन करने के लिए एक बेहतर शब्दावली देने जैसा है।

शोध पत्र क्या कहता है (और क्या नहीं कहता)

  • यह काम करता है: शोध पत्र दिखाता है कि यह विधि सिमुलेशन (जैसे LIBERO और RoboMimic) और वास्तविक रोबनों (जैसे DROID प्लेटफॉर्म) में अच्छी तरह काम करती है। वास्तविक दुनिया के परीक्षणों में, नए रोबोट पॉलिसी (LMP-π) ने पिछले सर्वश्रेष्ठ तरीके (Diffusion Policy) को पछाड़ दिया, और "टेबल साफ करने" जैसे कार्य पर 95% सफलता दर हासिल की।
  • यह जादू नहीं है: लेखक स्पष्ट रूप से इस विचार को खारिज करते हैं कि रोबोट को भौतिक नियंत्रण के लिए केवल "शब्दों में सोचना" चाहिए (जैसे एक चैटबॉट)। वे तर्क देते हैं कि शब्दों में स्थानिक गति के लिए आवश्यक सटीकता की कमी होती है।
  • यह अभी तक पूर्ण समाधान नहीं है: शोध पत्र स्वीकार करता है कि यह विधि इसके सेटअप (हाइपरपैरामीटर) के प्रति संवेदनशील है और यदि इसे सावधानी से प्रशिक्षित नहीं किया गया तो कभी-कभी फंस सकती है। यह सुझाव देता है कि भविष्य का कार्य "गलियारे" को असतत (discrete) चरणों के बजाय निरंतर (continuous) बनाना, या रोबोट को लंबे समय तक अपने विचारों को याद रखने में मदद करना हो सकता है।

निचोड़

यह शोध पत्र सुझाव देता है कि स्मार्ट रोबोट का रहस्य केवल उन्हें बड़ा या तेज़ बनाना नहीं है, बल्कि उन्हें एक छिपे हुए, कुशल स्थान में रुकने और विचार करने के लिए सिखाना है। रोबोट को कार्य की कठिनाई के आधार पर यह तय करने देकर कि उसे कितना सोचना है, हमें एक ऐसी मशीन मिलती है जो फुर्तीली भी है और ज़रूरत पड़ने पर विचारशील भी। यह उन रोबोटों की ओर एक कदम है जो केवल प्रतिक्रिया नहीं देते, बल्कि वास्तव में अपनी गति के बारे में तर्क करते हैं।

अपने क्षेत्र के पेपरों की भीड़ में उलझे हुए हैं?

आपके रिसर्च कीवर्ड से मेल खाने वाले सबसे नए और अलग सोच वाले पेपरों का रोज़ाना Digest पाएँ—तकनीकी सारांश के साथ, आपकी भाषा में।

Digest आज़माएँ →