← नवीनतम पेपर
💻 computer science

Heterogeneous Tactile Transformer

यह शोधपत्र हेट्रोजेनियस टैक्टाइल ट्रांसफॉर्मर (HTT) का परिचय देता है, जो एक नवीन 1.6M-फ्रेम युग्मित डेटासेट का लाभ उठाते हुए विविध सेंसर प्रकारों के बीच साझा स्पर्श संबंधी (tactile) निरूपणों को सीखने के लिए एक ढांचा प्रदान करता है, जिससे स्केलेबल और हस्तांतरणीय संपर्क-समृद्ध हेरफेर नीतियों को सक्षम बनाया जा सके।

मूल लेखक: Jianxin Bi, Qiang Wang, Jayaram Reddy, Kelvin Lin, Soibkhon Khajikhanov, Ruihan Gao, Harold Soh

प्रकाशित 2026-06-30
📖 5 मिनट में पढ़ें🧠 गहराई से पढ़ें

मूल लेखक: Jianxin Bi, Qiang Wang, Jayaram Reddy, Kelvin Lin, Soibkhon Khajikhanov, Ruihan Gao, Harold Soh

मूल पेपर CC BY 4.0 (http://creativecommons.org/licenses/by/4.0/) के तहत लाइसेंस किया गया है। ✨ नीचे दिए गए पेपर की यह व्याख्या AI से तैयार की गई है। इसे लेखकों ने न तो लिखा है, न इसका समर्थन किया है। तकनीकी सटीकता के लिए मूल पेपर देखें। पूरा डिस्क्लेमर पढ़ें

कल्पना कीजिए कि आप एक रोबोटिक हाथ को नाजुक वस्तुओं को संभालने के लिए सिखाने की कोशिश कर रहे हैं, जैसे कि एक पके हुए टमाटर को उठाना या एक छोटे से पेंच (screw) को कसना। इसे सुरक्षित रूप से करने के लिए, रोबोट को "महसूस करने की क्षमता" की आवश्यकता होती है। लेकिन समस्या यह है कि, ठीक वैसे ही जैसे इंसानों में स्पर्श के अलग-अलग प्रकार होते हैं (कुछ लोग बनावट के प्रति संवेदनशील होते हैं, दूसरों को दबाव के प्रति), रोबोटों के भी अलग-अलग प्रकार के "टच सेंसर" होते हैं, और वे सभी अलग-अलग भाषाएं बोलते हैं।

कुछ सेंसर हाई-रिज़ॉल्यूशन कैमरों की तरह होते हैं जो किसी नरम सतह के विकृत होने की तस्वीरें लेते हैं (यह आकार देखने के लिए बेहतरीन है, लेकिन शायद थोड़ा धीमा है)। अन्य सेंसर प्रेशर बटनों के एरे (arrays) की तरह होते हैं जो बताते हैं कि कोई चीज़ कितनी ज़ोर से पीछे की ओर धकेल रही है, लेकिन वे इस बात की स्पष्ट तस्वीर नहीं देते कि वस्तु वास्तव में कैसी दिखती है।

क्योंकि इन सेंसरों की "भाषाएं" अलग हैं, एक रोबोट जिसे एक प्रकार के सेंसर पर प्रशिक्षित किया गया है, वह दूसरे प्रकार के सेंसर के डेटा को नहीं समझ पाता है। यह एक कुत्ते को केवल अंग्रेजी की किताबों का उपयोग करके फ्रेंच बोलना सिखाने जैसा है; कुत्ता उसे समझ ही नहीं पाएगा।

समाधान: रोबोटिक स्पर्श के लिए "यूनिवर्सल ट्रांसलेटर"

इस शोध पत्र के लेखकों ने एक नया सिस्टम बनाया है जिसे हेटरोजीनियस टैक्टाइल ट्रांसफॉर्मर (HTT) कहा जाता है। HTT को एक यूनिवर्सल ट्रांसलेटर के रूप में सोचें जो विभिन्न प्रकार के रोबोटिक स्पर्श सेंसरों को एक-दूसरे को समझने और एक साथ सीखने की अनुमति देता है।

उन्होंने इसे कैसे बनाया, इसका विवरण एक सरल उपमा के माध्यम से यहाँ दिया गया है:

1. "लैंग्वेज एक्सचेंज" डेटासेट (HPT)

अनुवादक को सिखाने के लिए, आपको ऐसे छात्रों की आवश्यकता है जो अलग-अलग भाषाएं बोलते हों लेकिन एक ही समय में एक ही चीज़ के बारे में बात कर रहे हों। शोधकर्ताओं ने HPT (हेटरोजीनियस पेअर्ड टैक्टाइल) नामक एक विशाल डेटासेट बनाया।

  • सेटअप: उन्होंने एक रोबोट ग्रिपर के विपरीत दिशाओं पर दो अलग-अलग प्रकार के सेंसर लगाए।
  • क्रिया: उन्होंने रोबोट को 1.6 मिलियन विभिन्न वस्तुओं (जैसे स्पंज को दबाना, पेंच को घुमाना, या ब्लॉक को खिसकाना) के विरुद्ध छूने, घुमाने और फिसलने के लिए निर्देशित किया।
  • परिणाम: चूंकि सेंसर एक ही चीज़ को एक ही समय में छू रहे थे, इसलिए सिस्टम यह सीख सका कि "कैमरा सेंसर से मिलने वाली यह कोमल तस्वीर" "बटन सेंसर के इस विशिष्ट दबाव पैटर्न" से मेल खाती है।

2. प्रशिक्षण विधि: "खाली स्थान भरना"

यह सिस्टम मास्क्ड रिकंस्ट्रक्शन (Masked Reconstruction) नामक एक चतुर प्रशिक्षण खेल का उपयोग करता है (जो "रिक्त स्थान भरने" वाले टेस्ट के समान है)।

  • खेल: सिस्टम एक सेंसर के डेटा को लेता है, उसके एक बड़े हिस्से को छिपा (mask) देता है, और AI से पूछता है कि गायब हिस्सा क्या था।
  • ट्विस्ट: यह केवल उसी सेंसर के आधार पर अनुमान नहीं लगाता है, बल्कि खाली स्थानों को भरने में मदद करने के लिए यह दूसरे सेंसर के डेटा को देखता है।
  • लक्ष्य: ऐसा करके, AI एक साझा "आंतरिक भाषा" (latent space) सीखता है जहाँ "पेंच पकड़ने" की अवधारणा एक जैसी ही दिखती है, चाहे वह कैमरा सेंसर से आ रही हो या प्रेशर सेंसर से।

3. परिणाम: क्या यह काम करता है?

शोधकर्ताओं ने इस "अनुवादक" का तीन तरीकों से परीक्षण किया:

  • वस्तुओं की पहचान करना: उन्होंने AI से केवल महसूस करके वस्तुओं को पहचानने के लिए कहा। HTT सिस्टम पिछले तरीकों की तुलना में बहुत बेहतर था, विशेष रूप से विभिन्न प्रकार के सेंसरों के बीच स्विच करते समय। इसने सीखा कि "नरम" अहसास एक "नरम" अहसास ही है, चाहे कौन सा भी सेंसर इसकी रिपोर्ट करे।
  • फिसलन और बल का पता लगाना: उन्होंने परीक्षण किया कि क्या AI यह बता सकता है कि कोई वस्तु फिसल रही है या कितनी ज़ोर से उसे दबाया जा रहा है। HTT सिस्टम इसमें उत्कृष्ट था क्योंकि इसने कैमरा सेंसर के "विजुअल" विवरण को प्रेशर सेंसर के "फोर्स" विवरण के साथ जोड़ा।
  • वास्तविक दुनिया के रोबोट कार्य (बड़ा परीक्षण): यह सबसे प्रभावशाली हिस्सा है। उन्होंने इस HTT सिस्टम को एक वास्तविक रोबोटिक आर्म (एक फ्रैंका आर्म और शार्पा हैंड के साथ) पर दो कठिन कार्य करने के लिए लगाया:
    1. खिलौने के पेंच को कसना: रोबोट को बार-बार एक पेंच को पकड़ना और घुमाना था।
    2. टोफू (Tofu) उठाना: रोबोट को नरम टोफू का एक टुकड़ा बिना कुचले या गिराए उठाना था।

परिणाम:

  • HTT "अनुलेखा" (translator) के बिना, रोबोट बुरी तरह विफल रहा (उसने टोफू को गिरा दिया या पेंच को घुमा नहीं पाया)।
  • HTT सिस्टम के साथ, रोबोट बहुत अधिक सफल रहा। वह पेंच कसने के लिए आवश्यक सूक्ष्म संपर्क परिवर्तनों को महसूस कर सका और उसे पता था कि टोफू को कुचलने से बचने के लिए कितना दबाव डालना है।

यह क्यों महत्वपूर्ण है

यह शोध पत्र दावा करता है कि यह दृष्टिकोण रोबोटों को एक साथ कई अलग-अलग प्रकार के सेंसरों से सीखने की अनुमति देता है। हर नए सेंसर को खरीदने के बाद एक नया रोबोट मस्तिष्क प्रशिक्षित करने के बजाय, आप एक "यूनिवर्सल ब्रेन" (HTT) को प्रशिक्षित कर सकते हैं जो उन सभी को समझता है।

संक्षेप में, लेखकों ने एक ऐसा सिस्टम बनाया है जो रोबोटों को "स्पर्श की भाषा" धाराप्रवाह बोलने में सक्षम बनाता है, चाहे वे किसी भी ब्रांड या प्रकार के सेंसर का उपयोग कर रहे हों, जिससे वे नाजुक, वास्तविक दुनिया की वस्तुओं को संभालने में बहुत बेहतर हो जाते हैं।

अपने क्षेत्र के पेपरों की भीड़ में उलझे हुए हैं?

आपके रिसर्च कीवर्ड से मेल खाने वाले सबसे नए और अलग सोच वाले पेपरों का रोज़ाना Digest पाएँ—तकनीकी सारांश के साथ, आपकी भाषा में।

Digest आज़माएँ →