← नवीनतम पेपर
💻 computer science

RetrDex: Efficient Object Retrieval in Cluttered Scenes with a Dexterous Hand

RetrDex एक कुशल फ्रेमवर्क है जो बड़े पैमाने पर समानांतर सुदृढीकरण लर्निंग (reinforcement learning) और एक स्थानिक रूप से जागरूक प्रतिनिधित्व (spatially aware representation) का लाभ उठाता है ताकि दक्ष रोबोटों को विविध हेरफेर कौशल के माध्यम से अवरोधों को सक्रिय रूप से हटाने में सक्षम बनाया जा सके, जिससे अव्यवस्थित दृश्यों में वस्तुओं की सुदृढ़ प्राप्ति प्राप्त होती है और वास्तविक दुनिया के सिस्टम में सफल ज़ीरो-शॉट ट्रांसफर सुनिश्चित होता है।

मूल लेखक: Fengshuo Bai, Yu Li, Jie Chu, Tawei Chou, Runchuan Zhu, Ying Wen, Yaodong Yang, Yuanpei Chen

प्रकाशित 2026-06-30
📖 5 मिनट में पढ़ें🧠 गहराई से पढ़ें

मूल लेखक: Fengshuo Bai, Yu Li, Jie Chu, Tawei Chou, Runchuan Zhu, Ying Wen, Yaodong Yang, Yuanpei Chen

मूल पेपर CC BY 4.0 (http://creativecommons.org/licenses/by/4.0/) के तहत लाइसेंस किया गया है। ✨ नीचे दिए गए पेपर की यह व्याख्या AI से तैयार की गई है। इसे लेखकों ने न तो लिखा है, न इसका समर्थन किया है। तकनीकी सटीकता के लिए मूल पेपर देखें। पूरा डिस्क्लेमर पढ़ें

कल्पना कीजिए कि आप अपनी कार की चाबियाँ ढूँढ रहे हैं, लेकिन वे खिलौनों, किताबों और कपड़ों के एक अस्त-व्यस्त मिश्रण से भरे डिब्बे में गिर गई हैं। वास्तविक दुनिया में, आप केवल डिब्बे को देखते हुए चाबियों के दिखने का इंतज़ार नहीं करेंगे; बल्कि आप उसमें हाथ डालेंगे, कचरे को टटोलेगें, एक मोज़े को एक तरफ हटाएंगे, एक खिलौने को धकेलेंगे, और शायद ढेर को तब तक हिलाते रहेंगे जब तक कि चाबियाँ बाहर न आ जाएं।

यह शोध पत्र, RetrDex, एक रोबोट को ठीक यही करना सिखाता है।

समस्या: "देखना और पकड़ना" का जाल (The "Stare and Grab" Trap)

पारंपरिक रूप से, रोबोट उन लोगों की तरह रहे हैं जो किसी चीज़ को तब तक छूने से डरते हैं जब तक कि वे उसे पूरी तरह से देख न लें। यदि कोई रोबोट ढेर के नीचे दबी हुई किसी वस्तु को देखता है, तो वह अक्सर अटक जाता है। वह ऊपर की वस्तु को पकड़ने की कोशिश करता है, विफल हो जाता है, या चीजों को सीधी रेखा में धकेलने की कोशिश करता है (जैसे कि एक बुलडोज़र), जो कि अनाड़ी और अक्षम तरीका है। यह शोध पत्र तर्क देता है कि यह "देखो, फिर कार्य करो" वाला दृष्टिकोण वास्तविक दुनिया की अव्यवस्थता के लिए बहुत धीमा और कठोर है।

समाधान: "कुशल टटोले वाला" (The "Master Rummager")

लेखकों ने RetrDex नामक एक प्रणाली बनाई है जो एक डेक्सट्रस हैंड (dexterous hand) का उपयोग करती है (एक रोबोटिक हाथ जिसमें इंसानी हाथ की तरह उंगलियां होती हैं, न कि केवल एक साधारण दो-फिंगर वाला पिंसर)।

उन्होंने इसे एक चतुर दो-चरणीय प्रक्रिया का उपयोग करके प्रशिक्षित किया:

  1. शिक्षक (सिमुलेशन मास्टर):
    सबसे पहले, उन्होंने एक आभासी दुनिया (एक वीडियो गेम सिमुलेशन) बनाई जहाँ उन्होंने एक डिब्बे में 20+ रैंडम वस्तुएं डालीं। उन्होंने एक "शिक्षक" रोबोट को रीइन्फोर्समेंट लर्निंग (Reinforcement Learning) का उपयोग करके प्रशिक्षित किया। इसे एक सुपर-फास्ट वीडियो गेम की तरह समझें जहाँ रोबोट सेकंडों में लाखों बार खेलता है।
  • गुप्त नुस्खा (The Secret Sauce): शिक्षक को "विशेषाधिकार प्राप्त जानकारी" (cheat codes) दी गई थी। वह प्रत्येक वस्तु की सटीक 3D स्थिति, गिरती वस्तुओं की गति और अव्यवस्था के सटीक आकार को देख सकता था।
  • पाठ: केवल पकड़ने के बजाय, शिक्षक ने कचरे को हिलाने, टटोलने और धकेलने का सीखा। उसने सीखा कि कभी-कभी आपको नीचे रखी पेन को मुक्त करने के लिए एक किताब को हिलाना पड़ता है, या किसी छिपी हुई वस्तु को प्रकट करने के लिए एक खिलौने को एक तरफ धकेलना पड़ता है। उसने पूरे ढेर को एक तरल मलबे के रूप में देखा जिसे खोजा जाना था, न कि एक ऐसी चीज़ के रूप में जिसे एक-एक करके हटाया जाए।
  1. छात्र (वास्तविक दुनिया का कार्यकर्ता):
    शिक्षक बहुत बुद्धिमान है और उसके पास "चीट कोड्स" तक पहुंच है जो एक वास्तविक रोबोट के पास नहीं होते। इसलिए, लेखकों ने बिहेवियर क्लोनिंग (Behavior Cloning) नामक तकनीक का उपयोग किया। उन्होंने शिक्षक की सफल चालों को रिकॉर्ड किया और एक "छात्र" रोबोट को उनकी नकल करने के लिए प्रशिक्षित किया।
  • छात्र के पास चीट कोड्स नहीं हैं। वह केवल वही देखता है जो एक कैमरा देखता है (एक 2D छवि) और उसे पता होता है कि उसके अपने हाथ के जोड़ कहाँ हैं।
  • छात्र, शिक्षक की जटिल "टटोलने" वाली रणनीतियों को उन कार्यों में बदलना सीखता है जिन्हें वह वास्तव में वास्तविक दुनिया में कर सकता है।

व्यवहार में यह कैसे काम करता है

जब वास्तविक रोबोट किसी वस्तु को खोजने की कोशिश करता है:

  • यह केवल पकड़ता नहीं है: यदि लक्ष्य दबा हुआ है, तो रोबोट का हाथ अंदर जाता है और ढेर को हिलाना (stirring) शुरू कर देता है (जैसे सूप के बर्तन में चम्मच चलाना) या विशिष्ट वस्तुओं को धकेलना (poking) शुरू कर देता है।
  • यह अनुकूलित होता है: यदि कोई खिलौना दृश्य को रोक रहा है, तो यह उस खिलौने को एक तरफ धकेल सकता है। यदि कोई किताब भारी है, तो यह उसके किनारे को उठा सकता है।
  • जीरो-शॉट ट्रांसफर (Zero-Shot Transfer): सबसे प्रभावशाली हिस्सा यह है कि रोबोट को केवल कंप्यूटर सिमुलेशन में प्रशिक्षित किया गया था। जब उन्होंने इसे वास्तविक दुनिया में रखा, तो इसने बिना किसी अतिरिक्त प्रशिक्षण के तुरंत काम किया। इसने वास्तविक गुरुत्वाकर्षण, घर्षण और बिखरे हुए ढेरों को केवल अपने "शिक्षक" को गेम में देखकर समझ लिया।

परिणाम: तेज़ और स्मार्ट

शोध पत्र ने इसका परीक्षण 16 अलग-अलग घरेलू वस्तुओं (जैसे दूध के कार्टन, साबुन और गेंदें) पर किया जो विभिन्न प्रकार के मलबे में दबी हुई थीं।

  • सफलता दर: RetrDex रोबोट उन वस्तुओं के लिए लगभग 91% बार सफल रहा जिन्हें उसने पहले देखा था, और उन वस्तुओं के लिए 86% बार जो उसने पहले कभी नहीं देखी थीं।
  • गति: यह अन्य तरीकों की तुलना में बहुत तेज़ था। जबकि अन्य रोबोट वस्तुओं को एक-एक करके हटाने की कोशिश करते थे (जैसे प्याज की परतें उतारना), RetrDex बस ढेर को "हिलाता" रहेगा जब तक कि वस्तु सतह पर न आ जाए। इससे बहुत सारा समय बचा।
  • हाथ का महत्व: जब उन्होंने डेक्सट्रस हैंड को एक साधारण दो-फिंगर ग्रिपर से बदला, तो सफलता दर नाटकीय रूप से गिर गई। साधारण ग्रिपर प्रभावी ढंग से "हिला" या "धकेल" नहीं सकता था; यह केवल धकेल या पकड़ सकता था, जिससे अक्सर बिखराव और भी बढ़ जाता था।

संक्षेप में

RetrDex एक ऐसा रोबोट है जिसने "अव्यवस्थित डिब्बे" का मास्टर बनना सीखा है। हर वस्तु को हटाने की सटीक योजना बनाने के बजाय, इसने सक्रिय रूप से कचरे को खोजने, टटोलने और हिलाने का सीखा ताकि लक्ष्य स्वयं प्रकट हो सके। एक सुपर-फास्ट सिमुलेशन में एक "शिक्षक" को प्रशिक्षित करके और एक "छात्र" को उन चालों की नकल करने के लिए सिखाकर, उन्होंने एक ऐसा रोबोट बनाया जो एक इंसान की तरह ही कुशलता से बिखरे हुए कमरे में खोई हुई वस्तुओं को ढूंढ सकता है।

अपने क्षेत्र के पेपरों की भीड़ में उलझे हुए हैं?

आपके रिसर्च कीवर्ड से मेल खाने वाले सबसे नए और अलग सोच वाले पेपरों का रोज़ाना Digest पाएँ—तकनीकी सारांश के साथ, आपकी भाषा में।

Digest आज़माएँ →