← नवीनतम पेपर
💻 computer science

OmniTrack: General Motion Tracking via Physics-Consistent Reference

OmniTrack एक दो-चरणीय ढांचा है जो सिमुलेशन में रोबोट-डायनामिक-अनुकूल संदर्भ गतियों को पहले उत्पन्न करके और फिर उन्हें ट्रैक करने के लिए एक पॉलिसी को प्रशिक्षित करके भौतिक व्यवहार्यता को सामान्य गति ट्रैकिंग से अलग करता है, जिससे मानव सदृश (ह्यूमनॉइड) रोबोटों के लिए कलाबाजी और टेलीऑपरेशन जैसे जटिल कार्यों के लिए स्थिर, दीर्घकालिक और सामान्यीकरण योग्य नियंत्रण सक्षम होता है।

मूल लेखक: Yuhan Li, Peiyuan Zhi, Yunshen Wang, Tengyu Liu, Sixu Yan, Wenyu Liu, Xinggang Wang, Baoxiong Jia, Siyuan Huang

प्रकाशित 2026-03-02
📖 6 मिनट में पढ़ें🧠 गहराई से पढ़ें

मूल लेखक: Yuhan Li, Peiyuan Zhi, Yunshen Wang, Tengyu Liu, Sixu Yan, Wenyu Liu, Xinggang Wang, Baoxiong Jia, Siyuan Huang

मूल पेपर CC BY 4.0 (http://creativecommons.org/licenses/by/4.0/) के तहत लाइसेंस किया गया है। ✨ नीचे दिए गए पेपर की यह व्याख्या AI से तैयार की गई है। इसे लेखकों ने न तो लिखा है, न इसका समर्थन किया है। तकनीकी सटीकता के लिए मूल पेपर देखें। पूरा डिस्क्लेमर पढ़ें

कल्पना कीजिए कि आप एक रोबोट को नाचना, जिम्नास्टिक करना या बस इंसानों की तरह चलना सिखाना चाहते हैं। आपके पास वास्तविक मनुष्यों द्वारा ये अद्भुत चीजें करने के घंटों के वीडियो फुटेज हैं। विचार सरल लगता है: "रोबोट, जो इंसान कर रहा है उसकी नकल करो!"

लेकिन यहाँ एक समस्या है: इंसान और रोबोट बहुत अलग तरह से बने होते हैं।

एक इंसान के पास एक लचीली रीढ़, कोमल जोड़ और फर्श को पकड़ने वाले पैर होते हैं। एक रोबोट धातु से बना होता है, जिसमें सख्त मोटर और सपाट ब्लॉक जैसे पैर होते हैं। यदि आप केवल रोबोट को इंसान की हरकत की हुबहू नकल करने के लिए कहते हैं, तो रोबोट कुछ ऐसा करने की कोशिश कर सकता है जो भौतिक रूप से असंभव है, जैसे कि हवा में एक सेकंड के लिए तैरना, दीवार के आर-पार चलना, या अपने पैर को पीछे की ओर मोड़ लेना। जब रोबट इन "असंभव" निर्देशों का पालन करने की कोशिश करता है, तो वह भ्रमित हो जाता है, डगमगाता है और गिर जाता है।

यह पेपर OmniTrack पेश करता है, जो सिखाने का एक नया तरीका है जो इस समस्या को हल करता है क्योंकि यह एक स्मार्ट अनुवादक (translator) और एक सुरक्षा कोच (safety coach) दोनों के रूप में कार्य करता है।

समस्या: "खराब अनुवाद" (The "Bad Translation")

मान लीजिए कि कच्चा मानव गति डेटा (raw human motion data) एक विदेशी भाषा में लिखा गया पत्र है। यदि आप व्याकरण (भौतिकी/physics) को समझे बिना इसका शब्द-दर-शब्द अनुवाद करने का प्रयास करते हैं, तो परिणाम समझ में नहीं आएगा।

  • आर्टिफैक्ट (The Artifact): पेपर में, वे इन त्रुटियों को "आर्टिफैक्ट्स" कहते हैं। कल्पना कीजिए कि एक मानव नर्तक कूद रहा है। वीडियो में, वे जमीन पर उतरने से पहले एक पल के लिए हवा में तैरते हुए लग सकते हैं। एक रोबोट जो उस "तैरने" की नकल करने की कोशिश करेगा, वह गिर जाएगा क्योंकि वह उड़ नहीं सकता।
  • द्वंद्व (The Conflict): रोबोट का दिमाग दो हिस्सों में बंटा होता है: "क्या मैं वीडियो का ठीक से पालन करूँ (भले ही इससे मैं गिर जाऊँ), या क्या मैं सीधा खड़ा रहने की कोशिश करूँ?" यह भ्रम जटिल मूव्स सीखने में बाधा डालता है।

समाधान: दो-चरणीय "OmniTrack" प्रणाली

लेखकों ने इस समस्या को ठीक करने के लिए एक दो-चरणीय प्रणाली बनाई है, जिसे वे OmniTrack कहते हैं।

चरण 1: "फिजिक्स फ़िल्टर" (सुरक्षा कोच)

रोबोट के हिलने-डुलने से पहले, OmniTrack कच्चे मानव वीडियो को लेता है और उसे एक अत्यंत सटीक वर्चुअल सिम्युलेटर के माध्यम से चलाता है।

  • क्या होता है: एक विशेष AI (जिसे "जनरलिस्ट पॉलिसी" कहा जाता है) मानव वीडियो को देखता है। वह जानता है कि रोबोट का शरीर कैसे काम करता है (उसका वजन, मोटर की सीमाएं और गुरुत्वाकर्षण)।
  • जादू: यदि मानव वीडियो दिखाता है कि रोबोट "तैर" रहा है या "फर्श के आर-पार चल" रहा है, तो यह AI कहता है, "नहीं, यह इस रोबोट के लिए असंभव है।" यह तुरंत निर्देशों को इस तरह से फिर से लिखता है कि वे भौतिक रूप से संभव हो जाएं, जबकि नृत्य की शैली बनी रहे।
  • परिणाम: रोबोट को कच्चा, अव्यवस्थित मानव वीडियो नहीं मिलता। उसे नृत्य का एक साफ, सुधरा हुआ, "फिजिक्स-सेफ" संस्करण मिलता है। यह एक कोच की तरह है जो छात्र से कहता है, "10 फीट ऊँचा कूदने की कोशिश मत करो; इसके बजाय, 3 फीट ऊँचा कूदो लेकिन उसी ऊर्जा और शैली के साथ।"

चरण 2: "वास्तविक दुनिया का नर्तक" (छात्र)

अब, रोबोट इन साफ, सुधरे हुए निर्देशों की नकल करना सीखता है।

  • लाभ: क्योंकि निर्देश पहले से ही सुरक्षित और भौतिक रूप से संभव हैं, रोबोट को सीधा खड़ा रहने के लिए अपनी मानसिक शक्ति बर्बाद करने की आवश्यकता नहीं होती। वह पूरी तरह से गति की नकल करने पर ध्यान केंद्रित कर सकता है।
  • आंखों पर पट्टी: वास्तविक दुनिया में, रोबोट सब कुछ नहीं देख सकता (वह नहीं जानता कि सिम्युलेटर की तरह उसकी सटीक गति या कमरे में स्थिति क्या है)। उसे केवल अपने सेंसरों पर निर्भर रहना पड़ता है (जैसे कि आंखों पर पट्टी बंधा हुआ नर्तक फर्श को महसूस करता है)। लेकिन चूंकि निर्देश इतने स्पष्ट हैं, फिर भी वह पूरी तरह से नाच सकता है।

यह एक बड़ी बात क्यों है?

  1. यह एक "एक-साइज-फिट्स-ऑल" मस्तिष्क है: पिछले रोबोट्स को चलने, दौड़ने या नाचने के लिए अलग-अलग दिमाग की आवश्यकता होती थी। OmniTrack एक एकल मस्तिष्क (single brain) है जो ये सभी चीजें कर सकता है। यह तुरंत धीमी चाल से बैकफ्लिप में बदल सकता है।
  2. यह घंटों तक काम करता है: पेपर दिखाता है कि रोबोट बिना गिरे एक घंटे से अधिक समय तक ये मूव्स लगातार कर सकता है। यह एक नर्तक द्वारा बिना थके या संतुलन खोए पूरा मैराथन करने जैसा है।
  3. यह "खराब" इनपुट को संभालता है: टीम ने टेलीऑपरेशन (जहाँ एक इंसान VR हेडसेट या मोशन सूट का उपयोग करके वास्तविक समय में रोबोट को नियंत्रित करता है) के साथ इसका परीक्षण किया। भले ही मानव नियंत्रक डगमगा रहा हो, झटके ले रहा हो या गलती कर रहा हो, "फिजिक्स फ़िल्टर" इसे तुरंत साफ कर देता है। रोबोट स्मूथ और स्थिर रहता है, भले ही मानव ऑपरेटर लड़खड़ा रहा हो।
  4. यह असंभव (लेकिन भौतिक रूप से संभव) को करता है: रोबोट ने सफलतापूर्वक कार्टव्हील, फ्लिप और हाई-स्पीड रनिंग का प्रदर्शन किया। ये वे मूव्स हैं जो आमतौर पर रोबोट को तोड़ देते हैं क्योंकि वे बहुत गतिशील होते हैं। OmniTrack इन्हें आसान बना देता है।

उपमा: फिल्म निर्देशक और अभिनेता

सोचिए कि Raw Human Data एक पागल निर्देशक द्वारा लिखे गए स्क्रिप्ट की तरह है जो चाहता है कि अभिनेता उड़े, दीवारों के आर-पार चले और टेलीपोर्ट हो जाए।

  • पुराने तरीके: आप यह स्क्रिप्ट अभिनेता (रोबोट) को सौंप देते हैं। अभिनेता इसका पालन करने की कोशिश करता है, क्रैश हो जाता है, और फिल्म विफल हो जाती है।
  • OmniTrack:
    • चरण 1 (संपादक): एक स्मार्ट संपादक पहले स्क्रिप्ट को पढ़ता है। वे दृश्य को फिर से लिखते हैं: "ठीक है, पात्र उड़ नहीं सकता, लेकिन वह बहुत ऊँची छलांग लगा सकता है जो उड़ने जैसा दिखता है। और वह दीवार के आर-पार नहीं जा सकता, लेकिन वह उसके नीचे से फिसल सकता है।" वे एक शूट करने योग्य स्क्रिप्ट बनाते हैं।
    • चरण 2 (अभिनेता): अभिनेता (रोबोट) इस नए, यथार्थवादी स्क्रिप्ट को पढ़ता है। वह जानता है कि उसे क्या करना है। वह दृश्य को पूरी तरह से निभाता है, बिल्कुल वैसा ही जैसा निर्देशक चाहता था, लेकिन भौतिकी के नियमों को तोड़े बिना।

सारांश में

OmniTrack एक बड़ी सफलता है क्योंकि यह रोबोट को असंभव करने के लिए मजबूर करना बंद कर देता है। इसके बजाय, यह पहले निर्देशों को ठीक करता है, यह सुनिश्चित करता है कि वे रोबोट के शरीर के लिए सुरक्षित हों, और फिर रोबोट को उन पूर्ण निर्देशों का पालन करना सिखाता है। यह रोबोट को अंततः मनुष्यों की तरह गरिमा, गति और विविधता के साथ, नृत्य से लेकर कलाबाजी तक, चलते रहने की अनुमति देता है, और वह भी अपने पैरों पर टिके रहते हुए।

अपने क्षेत्र के पेपरों की भीड़ में उलझे हुए हैं?

आपके रिसर्च कीवर्ड से मेल खाने वाले सबसे नए और अलग सोच वाले पेपरों का रोज़ाना Digest पाएँ—तकनीकी सारांश के साथ, आपकी भाषा में।

Digest आज़माएँ →