← नवीनतम पेपर
🤖 AI

CoStream: Composing Simple Behaviors for Generalizable Complex Manipulation

CoStream एक नवीन ढांचा है जो तीन स्वतंत्र व्यवहारों—सिमेंटिक (semantic), प्रेडिक्टिव (predictive), और रिएक्टिव (reactive)—को एक एकीकृत $SE(3)$ नियंत्रण कमांड में संयोजित करके सुदृढ़, उच्च-परिशुद्धता वाले लॉन्ग-होरिज़न मैनिपुलेशन को प्राप्त करता है, जिससे कार्य-विशिष्ट कठोरता और मोनोलिथिक सामान्यीकरण के बीच के समझौते पर विजय प्राप्त होती है।

मूल लेखक: Haonan Chen, Yuxiang Ma, Stephen Tian, Xiaoshen Han, Wenlong Huang, Feiyang Wu, Yunzhu Li, Jiajun Wu, Edward H. Adelson, Yilun Du

प्रकाशित 2026-06-26
📖 6 मिनट में पढ़ें🧠 गहराई से पढ़ें

मूल लेखक: Haonan Chen, Yuxiang Ma, Stephen Tian, Xiaoshen Han, Wenlong Huang, Feiyang Wu, Yunzhu Li, Jiajun Wu, Edward H. Adelson, Yilun Du

मूल पेपर CC BY 4.0 (http://creativecommons.org/licenses/by/4.0/) के तहत लाइसेंस किया गया है। नीचे दिए गए पेपर की यह व्याख्या AI से तैयार की गई है। इसे लेखकों ने न तो लिखा है, न इसका समर्थन किया है। तकनीकी सटीकता के लिए मूल पेपर देखें। पूरा डिस्क्लेमर पढ़ें

कल्पना कीजिए कि आप एक नाजुक कंप्यूटर चिप को एक ऐसे स्लॉट में डालने की कोशिश कर रहे हैं जिसमें एक मिलीमीटर से भी कम जगह है। यदि आप इसे थोड़ा सा भी झुकाते हैं, तो यह फंस जाती है। यदि यह आपके हाथ से फिसलती है, तो यह फंस जाती है। यदि आप बहुत ज़ोर से दबाते हैं, तो यह टूट जाती है।

वर्तमान रोबोट इस काम में संघर्ष करते हैं क्योंकि वे दो चरम तरीकों से बनाए गए हैं:

  1. "रिजिड ब्लूप्रिंट" (कठोर खाका) रोबोट: यह रोबोट एक सख्त, पहले से बने नक्शे का पालन करता है। यह रेखाओं का पालन करने में बहुत अच्छा है, लेकिन अगर नक्शा थोड़ा सा भी गलत हो, या अगर वस्तु हिल जाए, तो रोबोट टकरा जाता है क्योंकि वह चलते-फिरते अपनी योजना नहीं बदल सकता।
  2. "ब्लैक बॉक्स" रोबोट: यह रोबोट हजारों वीडियो देखकर सब कुछ एक साथ सीखने की कोशिश करता है। यह बहुत लचीला है और नई चीजें सीख सकता है, लेकिन यह अनाड़ी है। इसमें यह महसूस करने की "पकड़" नहीं है कि यह कब बहुत ज़ोर से छू रहा है, और इसे हर नए कार्य के लिए शुरू से प्रशिक्षित करने की आवश्यकता होती है।

CoStream रोब la बनाने का एक नया तरीका है जो एक एकल मशीन के बजाय एक मानव टीम की तरह काम करके दोनों दुनियाओं के सर्वश्रेष्ठ गुणों को जोड़ता है।

तीन-सिरों वाली टीम

एक विशाल मस्तिष्क द्वारा सब कुछ करने के बजाय, CoStream काम को तीन सरल, स्वतंत्र "व्यवहारों" में विभाजित करता है जो लगातार एक-दूसरे से बात करते हैं। इसे एक निर्माण दल (construction crew) की तरह समझें:

  1. आर्किटेक्ट (सिमेंटिक व्यवहार):

    • यह क्या करता है: यह "बड़ी तस्वीर" सोचने वाला है। यह आपके निर्देशों (जैसे "GPU को स्लॉट में डालें") को पढ़ता है और ज्यामिति (geometry) को समझने के लिए AI का उपयोग करता है। यह लक्ष्य निर्धारित करता है: "चिप को यहाँ होना चाहिए, इस दिशा में।"
    • उपमा: यह उस फोरमैन की तरह है जो ब्लूप्रिंट की ओर इशारा करते हुए कहता है, "हमें दीवार ठीक वहाँ बनानी है।" यह इस बात की चिंता नहीं करता कि ईंटें कैसे जुड़ती हैं; यह बस गंतव्य तय करता है।
  2. ड्रीमर (प्रेडिक्टिव व्यवहार):

    • यह क्या करता है: यह भाग कार्य के "कल्पित वीडियो" देखता है। यह भविष्यवाणी करता है कि रोबोट को बिंदु A से बिंदु B तक जाने के लिए किस सुचारू पथ का अनुसरण करना चाहिए। यह एक नॉमिनल मोशन (गति का एक कच्चा मसौदा) तैयार करता है।
    • उपमा: यह एक नर्तक की तरह है जो अपने दिमाग में एक रूटीन का अभ्यास कर रहा है। वे नृत्य के सामान्य चरणों और प्रवाह को जानते हैं, लेकिन वे अभी तक संगीत के अचानक बदलावों पर प्रतिक्रिया नहीं दे रहे हैं।
  3. टच सेंसर (रिएक्टिव व्यवहार):

    • यह क्या करता है: यह "महसूस करने" का विशेषज्ञ है। यह बहुत तेज़ी से (एक सेकंड में 25 बार) चलता है और रोबोट की उंगलियों में विशेष सेंसर का उपयोग करके वस्तु को महसूस करता है। यदि चिप फिसलती है या किसी उभार से टकराती है, तो यह हिस्सा तुरंत छोटे सुधार करता है।
    • उपमा: यह सुई में धागा पिरोने के दौरान आपके अपने हाथ की तरह है। आपकी आँखें सुई को देखती हैं, लेकिन आपकी उंगलियां धागे को महसूस करती हैं। यदि धागा हिलता है, तो आपकी उंगलियां बिना आपके सोचे-समझे तुरंत सुधार करती हैं।

वे मिलकर कैसे काम करते हैं: "राइट-हैंड रूल"

CoStream का जादू यह है कि ये तीनों हिस्से कैसे मिलते हैं। वे बारी-बारी से काम नहीं करते; वे एक साथ काम करते हैं।

कल्पत करें कि रोबोट की गति एक गाना है।

  • आर्किटेक्ट बोल (lyrics) लिखता है (लक्ष्य)।
  • ड्रीमर धुन (melody) बनाता है (पथ)।
  • टच सेंसर ताल (beat) बनाए रखता है और यदि गायक लड़खड़ाता है तो लय को समायोजित करता है।

CoStream में, इन तीनों आउटपुट को रोबोट की गति के हर एक सेकंड के विभाजन पर गणितीय रूप से "गुणा" किया जाता है।

  • यदि आर्किटेक्ट कहता है "उत्तर की ओर जाओ," और ड्रीमर कहता है "आगे बढ़ो," लेकिन टच सेंसर महसूस करता है "रुको, हम एक दीवार से टकराए, बाईं ओर खिसकें," तो रोबलेट तुरंत तीनों को मिलाकर एक आदर्श गति में बदल देता है: "उत्तर की ओर जाओ, आगे बढ़ो, लेकिन बाईं ओर खिसकें।"

यह रोबोट को एक दीर्घकालिक योजना (आर्किटेक्ट से) देने के साथ-साथ तत्काल प्रतिक्रिया (टच सेंसर से) भी प्रदान करता है।

परिणाम: उन्होंने वास्तव में क्या किया

शोधकर्ताओं ने वास्तविक रोबोटों के साथ वास्तविक कार्यों पर इस प्रणाली का परीक्षण किया। उन्होंने केवल सिमुलेशन नहीं किया; उन्होंने इसे बनाया।

  • सटीक असेंबली: उन्होंने सफलतापूर्वक एक ड्रिल बिट, RAM स्टिक, CPU चिप और GPU कार्ड को तंग स्लॉट में डाला। इन कार्यों के लिए मिलीमीटर-स्तर की सटीकता की आवश्यकता होती है।
    • परिणाम: "रिजिड ब्लूप्रिंट" रोबोट और "ब्लैक बॉक्स" रोबोट पूरी तरह से विफल रहे (15 में से 0 प्रयास)। CoStream लगभग हर बार सफल रहा (15 में से 14 या 15)।
  • मानवीय हस्तक्षेप: जब रोबोट चिप डाल रहा था, तब शोधकर्ताओं ने चिप को भौतिक रूप से पकड़ा और रोबोट की पकड़ में उसे घुमाया ताकि फिसलन का अनुकरण किया जा सके।
    • परिणाम: रोबोट ने घुमाव को महसूस किया, अपनी पकड़ को तुरंत सुधारा, और चिप को गिराए या तोड़े बिना कार्य पूरा किया।
  • जीरो-शॉट ट्रांसफर: उन्होंने नाजुक CPU हैंडलिंग (जिसके लिए कोमलता की आवश्यकता होती है) से भारी RAM लॉकिंग (जिसके लिए बल की आवश्यकता होती है) तक जाने के लिए उसी रोबोट कोड का उपयोग किया। उन्हें रोबोट को फिर से प्रशिक्षित करने या अपना कोड बदलने की आवश्यकता नहीं पड़ी; "टीम" ने नए ऑब्जेक्ट के आधार पर अपने व्यवहार को अनुकूलित कर लिया।

सारांश में

CoStream यह सिद्ध करता है कि जटिल रोबोटिक कार्य करने के लिए आपको एक विशाल, अत्यंत जटिल मस्तिष्क की आवश्यकता नहीं है। इसके बजाय, आप एक ऐसा सिस्टम बना सकते हैं जहाँ एक योजनाकार (planner), एक भविष्यवक्ता (predictor) और एक महसूस करने वाला (feeler) वास्तविक समय में मिलकर काम करते हैं। यह रोबोट को किसी कार्य को समझने के लिए स्मार्ट और वास्तविक दुनिया के जटिल भौतिक विज्ञान को बिना टकराए संभालने के लिए संवेदनशील बनाता है।

अपने क्षेत्र के पेपरों की भीड़ में उलझे हुए हैं?

आपके रिसर्च कीवर्ड से मेल खाने वाले सबसे नए और अलग सोच वाले पेपरों का रोज़ाना Digest पाएँ—तकनीकी सारांश के साथ, आपकी भाषा में।

Digest आज़माएँ →