← नवीनतम पेपर
💻 computer science

Translation as a Bridging Action: Transferring Manipulation Skills from Humans to Robots

यह शोध पत्र हेड-कैमरा फ्रेम के भीतर सापेक्ष कलाई अनुवाद (relative wrist translation) पर आधारित एक ब्रिजिंग एक्शन रिप्रजेंटेशन को, विजन-लैंग्वेज-एक्शन मॉडल के साथ जोड़कर प्रस्तावित करता है, ताकि शोर युक्त 6DoF पोज़ अनुमान और मौलिक एम्बॉडीमेंट अंतरों की सीमाओं को पार करते हुए, विविध मानव हेरफेर कौशल को द्विपक्षीय (bi-manual) रोबोटों में प्रभावी ढंग से स्थानांतरित किया जा सके।

मूल लेखक: Sijin Chen, Kaixuan Jiang, Haixin Shi, Yanhui Wang, Weiheng Zhong, Haosheng Li, Bo Jiang, Yuxiao Liu, Xihui Liu

प्रकाशित 2026-06-29
📖 5 मिनट में पढ़ें🧠 गहराई से पढ़ें

मूल लेखक: Sijin Chen, Kaixuan Jiang, Haixin Shi, Yanhui Wang, Weiheng Zhong, Haosheng Li, Bo Jiang, Yuxiao Liu, Xihui Liu

मूल पेपर CC BY 4.0 (http://creativecommons.org/licenses/by/4.0/) के तहत लाइसेंस किया गया है। नीचे दिए गए पेपर की यह व्याख्या AI से तैयार की गई है। इसे लेखकों ने न तो लिखा है, न इसका समर्थन किया है। तकनीकी सटीकता के लिए मूल पेपर देखें। पूरा डिस्क्लेमर पढ़ें

कल्पना कीजिए कि आप एक अनाड़ी रोबोट को रसोई के जटिल काम करना सिखाना चाहते हैं, जैसे माइक्रोवेव खोलना, कपों को एक के ऊपर एक रखना, या काउंटर पोंछना। आपके पास दो विकल्प हैं: रोबोट को ये काम करते हुए रिकॉर्ड करने के लिए हजारों डॉलर खर्च करना (जो धीमा और महंगा है), या इंसानों को ये काम करते हुए रिकॉर्ड करना (जो सस्ता, आसान और प्रचुर मात्रा में उपलब्ध है)।

बड़ी समस्या यह है कि इंसान और रोबोट बहुत अलग तरह से बने होते हैं।

  • इंसान लचीली उंगलियों वाले होते हैं जो अनंत तरीकों से मुड़ सकती हैं, घूम सकती हैं और पकड़ बना सकती हैं।
  • रोबोट (इस अध्ययन में) "पैरेलल ग्रिपर्स" (parallel grippers) वाले हैं—जो मूल रूप से दो सख्त चिमटों की तरह हैं जो बस खुलते और बंद होते हैं।

यदि आप किसी इंसान के हाथ की गतिविधियों को सीधे रोबोट पर कॉपी करने की कोशिश करते हैं, तो यह एक कुत्ते को इंसान की उंगलियों दिखाकर पियानो बजाना सिखाने जैसा है। रोबोट भ्रमित हो जाता है क्योंकि इंसानों द्वारा उपयोग किए जाने वाले "घुमाव" (twists) वाले मोशन उसके सख्त चिमटों के लिए समझ में नहीं आते। रोबोट या तो बेतहाशा हाथ-पैर मारने लगता है या गलत काम करने लगता है।

समाधान: "ब्रिजिंग एक्शन" (Bridging Action) के रूप में अनुवाद

शोधकर्ताओं ने एक चतुर तकनीक विकसित की जिसे "ब्रिजिंग एक्शन" कहा जाता है। पूरे मानव हाथ (भ्रमित करने वाले घुमावों सहित) की नकल करने के बजाय, उन्होंने केवल कलाई के सीधी रेखा वाले संचलन (straight-line movement) की नकल करने का निर्णय लिया।

इसे इस प्रकार समझें:

  • "शोर वाला" तरीका (पुराना तरीका): इंसान के हाथ के सटीक 3D रोटेशन और एंगल की नकल करना। यह एक कविता को बिना अर्थ समझे शब्द-दर-शब्द अनुवाद करने जैसा है; यह सुनने में सही लगता है लेकिन इसका कोई अर्थ नहीं निकलता।
  • "ब्रिजिंग" तरीका (नया तरीका): रोटेशन को अनदेखा करना और केवल यह देखना कि हाथ स्थान में कहाँ घूम रहा है (बाएं, दाएं, ऊपर, नीचे)। यह कविता के शब्दों के बजाय उसके अर्थ को अनुवाद करने जैसा है।

केवल ट्रांसलेशन (एक बिंदु से दूसरे बिंदु तक जाना) पर ध्यान केंद्रित करके और रोटेशन (घूमना/मुड़ना) को अनदेखा करके, शोधकर्ताओं ने एक "साझा भाषा" खोज ली जिसे इंसान और रोबлот दोनों समझ सकते हैं।

उन्होंने "अनुवादक" कैसे बनाया

इसे काम करने योग्य बनाने के लिए, उन्होंने एक विशेष AI मॉडल (एक विजन-लैंग्वेज-एक्शन मॉडल) बनाया जो एक सार्वभौमिक अनुवादक की तरह कार्य करता है। यह तीन सरल चरणों में कैसे काम करता है:

  1. "ब्रिजिंग" सिग्नल: वे मानव कलाई के संचलन को एक सरल 3D पथ (जैसे मानचित्र पर एक रेखा खींचना) के रूप में निकालते हैं। यह "ब्रिज" (सेतु) है क्योंकि इंसान और रोबोट दोनों ही "आगे बढ़ें" या "बाएं बढ़ें" को समझ सकते हैं, भले ही वे अलग-अलग तरीके से चलते हों।
  2. "इंटरलीव्ड" (Interleaved) प्रशिक्षण: AI को मिश्रित डेटा पर प्रशिक्षित किया जाता है। कभी-कभी यह एक इंसान को हाथ हिलाते हुए देखता है (और केवल पथ को सीखता है)। कभी-कभी यह एक रोबोट को अपना हाथ हिलाते हुए देखता है (और पूरा पथ प्लस चिमटे की पकड़ सीखता है)। AI गायब जानकारी को संभालने में स्मार्ट है, ठीक वैसे ही जैसे एक शेफ जो एक विशिष्ट मसाला गायब होने पर भी उपलब्ध चीजों का उपयोग करके भोजन बना सकता है।
  3. "बाइंडिंग" (Binding) ट्रिक: यह सुनिश्चित करने के लिए कि रोबोट वास्तव में अपने चिमटों को सही ढंग से चलाना सीख जाए, AI को मानव पथ का उपयोग गाइड के रूप में करते हुए रोबोट के पूर्ण संचलन की भविष्यवाणी करने का अभ्यास करने के लिए मजबूर किया जाता है। यह एक छात्र के समान है जो पहले सिम्युलेटर पर स्टीयरिंग का अभ्यास करता है, फिर वास्तविक कार में स्विच करता है लेकिन वही स्टीयरिंग लॉजिक बनाए रखता है।

उन्हें क्या पता चला

उन्होंने माइक्रोवेव खोलने से लेकर कपों को स्टैक करने तक, 15 अलग-अलग कार्यों पर इसका परीक्षण किया। यहाँ क्या हुआ:

  • बिना ब्रिज के: यदि वे केवल रोबोट के अपने सीमित डेटा की नकल करने की कोशिश करते, तो वह लगभग हर काम में विफल हो जाता।
  • ब्रिज के साथ (मानव डेटा): जब उन्होंने रोबोट को सिखाने के लिए "ट्रांसलेशन-ओनली" मानव डेटा का उपयोग किया, तो रोबोट अचानक बहुत बेहतर हो गया। वह उन माइक्रोवेव को खोल सका और कपों को स्टैक कर सका जिन्हें उसने पहले कभी नहीं देखा था।
  • "रोटेशन" की समस्या: जब उन्होंने पूर्ण, शोर वाले मानव हाथ रोटेशन (पुराना तरीका) का उपयोग किया, तो रोबोट की गतिविधियाँ विकृत और अनाड़ी हो गईं, जैसे उलझे हुए धागों वाली कठपुतली। सरल "ट्रांसलेशन" विधि कहीं अधिक श्रेष्ठ थी।
  • "अपर लिमिट" (ऊपरी सीमा): उन्होंने यह भी परीक्षण किया कि क्या होगा यदि वे रोबोट को परफेक्ट रोबोट डेटा देते लेकिन उसे मानव डेटा की तरह ही ट्रीट करते (रोबोट के विशिष्ट कैमरा एंगल्स को अनदेखा करते)। रोबोट और भी बेहतर हो गया, जिससे पता चला कि यदि हम अधिक साफ डेटा प्राप्त कर सकें, तो यह तरीका और भी शक्तिशाली हो सकता है।

निष्कर्ष

यह शोध पत्र सिद्ध करता है कि रोबोट को सिखाने के लिए आपको पूरी तरह से इंसान के शरीर की नकल करने की आवश्यकता नहीं है। आपको बस साझा संचलन (हाथ द्वारा लिया गया पथ) को खोजने की आवश्यकता है और उन हिस्सों को अनदेखा करने की आवश्यकता है जो फिट नहीं बैठते (जैसे मुड़ने वाली उंगलियां)।

इस "ब्रिजिंग एक्शन" का उपयोग करके, शोधकर्ताओं ने मानव वीडियो से कौशल को सफलतापूर्वक रोबोट में स्थानांतरित किया, जिससे रोबोट को हजारों महंगे रोबोट प्रदर्शनों की आवश्यकता के बिना जटिल कार्य सीखने में मदद मिली। यह कहने का एक तरीका है: "इस बात की चिंता न करें कि इंसान कप को कैसे पकड़ता है; बस रोबोट को यह सिखाएं कि उसे कहाँ रखना है।"

अपने क्षेत्र के पेपरों की भीड़ में उलझे हुए हैं?

आपके रिसर्च कीवर्ड से मेल खाने वाले सबसे नए और अलग सोच वाले पेपरों का रोज़ाना Digest पाएँ—तकनीकी सारांश के साथ, आपकी भाषा में।

Digest आज़माएँ →