← नवीनतम पेपर
💻 computer science

Robot-Factored World Models via Robot Rendering

यह शोध पत्र "रोबोट-फैक्टर्ड वर्ल्ड मॉडल्स" का प्रस्ताव करता है जो रोबोट के विशिष्ट यथार्थ और ज्यामिति को स्पष्ट रूप से कंट्रोलर-जनित प्रक्षेप पथों (ट्रैजेक्टरीज) और रेंडर किए गए URDF-आधारित दृश्यों में अलग करके, एक्शन-कंडीशन्ड वीडियो प्रेडिक्शन और विभिन्न रोबोटिक स्वरूपों (एम्बॉडिमेंट्स) में सामान्यीकरण में सुधार करता है, जिससे मॉडल को केवल यह सीखने पर ध्यान केंद्रित करने की अनुमति मिलती है कि दृश्यमान रोबोट गति के प्रति वातावरण कैसे प्रतिक्रिया करता है।

मूल लेखक: Byungjun Kim, Taeksoo Kim, Hyunsoo Cha, Hanbyul Joo

प्रकाशित 2026-07-27
📖 4 मिनट में पढ़ें☕ कॉफ़ी ब्रेक में पढ़ें

मूल लेखक: Byungjun Kim, Taeksoo Kim, Hyunsoo Cha, Hanbyul Joo

मूल पेपर CC BY 4.0 (http://creativecommons.org/licenses/by/4.0/) के तहत लाइसेंस किया गया है। नीचे दिए गए पेपर की यह व्याख्या AI से तैयार की गई है। इसे लेखकों ने न तो लिखा है, न इसका समर्थन किया है। तकनीकी सटीकता के लिए मूल पेपर देखें। पूरा डिस्क्लेमर पढ़ें

कल्पना कीजिए कि आप एक सुपर-स्मार्ट रोबोट को भविष्य की भविष्यवाणी करना सिखाने की कोशिश कर रहे हैं। शेयर बाजार या मौसम के भविष्य की नहीं, बल्कि एक कमरे के तत्काल भविष्य की: यदि रोबोट एक कप पकड़ने के लिए हाथ बढ़ाता है, तो कप का क्या होगा? क्या वह पलट जाएगा? क्या वह खिसक जाएगा? यह एक "वर्ल्ड मॉडल" (world model) का काम है। वर्ल्ड मॉडल को अपने रोबोट के मस्तिष्क के भीतर एक मानसिक मूवी प्रोजेक्टर के रूप में समझें। वास्तव में कप को पकड़ने और गंदगी फैलाने के जोखिम के बजाय, रोबोट एक सिमुलेशन चलाता है: "यदि मैं यह गति करता हूँ, तो वीडियो दिखाता है कि कप गिर रहा है।" यह अविश्वसनीय रूप से उपयोगी है क्योंकि यह रोबोट को वास्तविक दुनिया में कुछ भी तोड़े बिना अभ्यास करने और योजना बनाने की अनुमति देता है।

लेकिन यहाँ पेचीदा हिस्सा है: आप मूवी प्रोजेक्टर को क्या चाल चलनी है, यह कैसे बताते हैं? अतीत में, वैज्ञानिकों ने रोबोट के कच्चे कंप्यूटर कोड (जैसे "जॉइंट 3 को एंगल 45 पर घुमाएं") को सीधे मूवी मेकर में डालने की कोशिश की। समस्या यह है कि वह कोड रोबोट के शरीर के लिए एक विशिष्ट गुप्त भाषा की तरह है। यह मूवी मेकर को यह नहीं दिखाता कि रोबोट कैसा दिखता है या वह कमरे में कहाँ है। यह एक निर्देशक को यह बताने जैसा है कि "बटन X दबाएं," बिना अभिनेता का चेहरा या सेट दिखाए। फिर मूवी मेकर को यह अनुमान लगाने के लिए बहुत काम करना पड़ता है कि रोबोट कैसा दिखता है और कमरा कैसे प्रतिक्रिया देता है, जिससे अक्सर भ्रमित करने वाली फिल्में बनती हैं।

यह पेपर इस पहेली को सुलझाने का एक चतुर नया तरीका पेश करता है, जिसे "रोबोट-फैक्टर्ड वर्ल्ड मॉडल्स" (Robot-Factored World Models) कहा जाता है। लेखक सुझाव देते हैं कि हमें मूवी मेकर से रोबोट की शारीरिक भाषा का अनुमान लगाने के लिए कहना बंद कर देना चाहिए। इसके बजाय, हमें मूवी मेकर को रोबोट के हिलने-डुलने का एक पूर्व-निर्मित, 3D एनिमेशन देना चाहिए, जिसे ठीक एक वीडियो गेम चरित्र की तरह रेंडर किया गया हो। वे इसे एक "नोमिनल ट्रजेक्टरी" (nominal trajectory) कहते हैं। रोबोट के छूने से पहले ही, कंप्यूटर सटीक रूप से गणना करता है कि अपने स्वयं के निर्देशों के आधार पर रोबोट कैसे हिलेगा, कमरे की अव्यवस्थित वास्तविकता को एक क्षण के लिए अनदेखा करते हुए। फिर वे उस गणना को हवा में तैरते हुए रोबोट के हाथ और बांह के एक विजुअल वीडियो में बदल देते हैं।

जादू तब होता है जब वे इस "तैरते हुए रोबोट वीडियो" को कमरे के वीडियो के साथ वर्ल्ड मॉडल में फीड करते हैं। मॉडल को अब यह अनुमान लगाने की आवश्यकता नहीं है कि रोबोट कैसा दिखता है; वह बस वीडियो में रोबोट को चलते हुए देखता है और सीखता है कि कमरे की वस्तुओं में उस विशिष्ट गति के प्रति कैसी प्रतिक्रिया होती है। यह सुनिश्चित करने के लिए कि रोबोट को पता चल जाए कि वह वास्तव में कप को छू रहा है या उसके ऊपर केवल मंडरा रहा है, वे इसमें एक विशेष "डेप्थ मैप" (एक वीडियो जो दिखाता है कि चीजें कितनी दूर हैं) भी जोड़ते हैं।

परिणाम प्रभावशाली हैं। जब उन्होंने इसे वास्तविक रोबोट डेटा पर टेस्ट किया, तो वह मॉडल जिसने "रेंडर किए गए रोबोट वीडियो" को देखा था, कच्चे कंप्यूटर कोड को पढ़ने वाले मॉडलों की तुलना में यह अनुमान लगाने में बहुत बेहतर था कि आगे क्या होगा। यह रोबोट के आकार और गति को समझने में इतना अच्छा था कि यह भी अनुमान लगा सका कि यदि एक अलग रोबोट (जिसे उसने पहले कभी नहीं देखा था) वही चाल चलने की कोशिश करता, तो क्या होता, बशर्ते कि उस नए रोबोट की गति को उसी विजुअल फॉर्मेट में रेंडर किया गया हो। उन्होंने यह भी दिखाया कि आप एक मानव के हाथ हिलाने के वीडियो को रोबोट की गति में बदल सकते हैं, और मॉडल सही ढंग से भविष्यवाणी कर सकता था कि एक रोबोट वस्तुओं के साथ कैसे इंटरैक्ट करेगा। esenciaतः, रोबोट के कार्यों को कोड की एक स्ट्रिंग के बजाय एक स्पष्ट, दृश्य कहानी में बदलकर, उन्होंने एआई को भौतिक दुनिया को बहुत अधिक स्पष्टता से समझने की शिक्षा दी।

अपने क्षेत्र के पेपरों की भीड़ में उलझे हुए हैं?

आपके रिसर्च कीवर्ड से मेल खाने वाले सबसे नए और अलग सोच वाले पेपरों का रोज़ाना Digest पाएँ—तकनीकी सारांश के साथ, आपकी भाषा में।

Digest आज़माएँ →