← नवीनतम पेपर
🤖 AI

PhyScensis: Physics-Augmented LLM Agents for Complex Physical Scene Arrangement

PhyScensis एक भौतिकी-संवर्धित (physics-augmented) LLM एजेंट फ्रेमवर्क है जो उच्च वस्तु घनत्व और सटीक स्थानिक संबंधों के साथ जटिल, भौतिक रूप से प्रशंसनीय 3D दृश्य उत्पन्न करने के लिए एक भौतिकी-आधारित सॉल्वर के साथ पुनरावृत्ति में सहयोग करता है, जिससे सिमुलेशन में रोबोटिक डेटा संग्रह को आगे बढ़ाया जा सके।

मूल लेखक: Yian Wang, Han Yang, Minghao Guo, Xiaowen Qiu, Tsun-Hsuan Wang, Wojciech Matusik, Joshua B. Tenenbaum, Chuang Gan

प्रकाशित 2026-02-17
📖 6 मिनट में पढ़ें🧠 गहराई से पढ़ें

मूल लेखक: Yian Wang, Han Yang, Minghao Guo, Xiaowen Qiu, Tsun-Hsuan Wang, Wojciech Matusik, Joshua B. Tenenbaum, Chuang Gan

मूल पेपर CC BY 4.0 (http://creativecommons.org/licenses/by/4.0/) के तहत लाइसेंस किया गया है। ✨ नीचे दिए गए पेपर की यह व्याख्या AI से तैयार की गई है। इसे लेखकों ने न तो लिखा है, न इसका समर्थन किया है। तकनीकी सटीकता के लिए मूल पेपर देखें। पूरा डिस्क्लेमर पढ़ें

कल्पना कीजिए कि आप एक वास्तुकार (architect) हैं जो एक रोबोट को काम करना सिखाने के लिए एक लघु दुनिया (miniature world) बनाना चाहते हैं। आप चाहते हैं कि रोबोट किताबों को एक के ऊपर एक रखने, एक बिखरी हुई मेज को व्यवस्थित करने, या एक सूटकेस पैक करने का अभ्यास करे।

मौजूदा "वर्ल्ड बिल्डर्स" (world builders) के साथ समस्या यह है कि वे बुरे कार्टूनिस्टों की तरह होते हैं। वे मेज पर रखी एक प्याली का चित्र तो बना सकते हैं, लेकिन वे गुरुत्वाकर्षण (gravity) को नहीं समझते। यदि आप उनसे 20 किताबों का एक टॉवर बनाने के लिए कहते हैं, तो वे ड्राइंग में उन्हें बिल्कुल सीधा खड़ा कर देंगे, जबकि असल जिंदगी में वह टॉवर तुरंत गिर जाएगा। या, वे एक किताब को हवा में तैरते हुए दिखा सकते हैं क्योंकि वे यह भूल गए कि उसके नीचे खड़े होने के लिए कुछ होना चाहिए।

PhyScensis एक नया सिस्टम है जो एक ऐसे सुपर-स्मार्ट आर्किटेक्ट की तरह काम करता है जो एक भौतिक विज्ञान (physics) का प्रोफेसर भी है।

यह कैसे काम करता है, इसे एक नाटक के तीन सरल पात्रों में विभाजित किया गया है:

1. द ड्रीमर (The Dreamer - LLM Agent)

इसे एक क्रिएटिव डायरेक्टर के रूप में समझें। आप इसे एक प्रॉम्प्ट देते हैं जैसे, "ट्रेन के पुर्जों, औजारों और रंगों के साथ एक शौकिया व्यक्ति की बिखरी हुई मेज बनाएं।"
ड्रीमर केवल यह अनुमान नहीं लगाता कि चीजें कहाँ होनी चाहिए। यह एक स्क्रिप्ट राइटर की तरह काम करता है, जो हर वस्तु के लिए निर्देशों (predicates) की एक सूची लिखता है। यह कहता है जैसे:

  • "हथौड़े को मेज पर रखें।"
  • "रिंच (wrenches) को ड्रिल के बगल में रखें।"
  • "सुनिश्चित करें कि पेंट के डिब्बे बॉक्स के अंदर हों।"

लेकिन यहाँ एक पेंच है: ड्रीमर भाषा में तो माहिर है लेकिन भौतिकी (physics) में कमजोर है। यह एक ऐसी स्क्रिप्ट लिख सकता है जो कहती है, "एक चम्मच के बिल्कुल किनारे पर चाय का कप संतुलित करें।" वास्तविक दुनिया में, यह असंभव है।

2. द बिल्डर (The Builder - Physics Solver)

यह गुरुत्वाकर्षण सिम्युलेटर वाला निर्माण दल (construction crew) है। वे ड्रीमर की स्क्रिप्ट लेते हैं और वास्तव में दृश्य को बनाने का प्रयास करते हैं।

  • वे एक फिजिक्स इंजन (जैसे एक वीडियो गेम इंजन जो जानता है कि चीजें कितनी भारी हैं और घर्षण/friction कैसे काम करता है) का उपयोग करते हैं।
  • वे वस्तुओं को रखने का प्रयास करते हैं। यदि ड्रीमर ने कहा "किताबों को एक के ऊपर एक रखें," तो बिल्डर जाँच करता है: क्या वे गिर जाएंगी?
  • यदि किताबें फिसल जाती हैं, तो बिल्डर हार नहीं मानता। वे प्रोबेबिलिस्टिक प्रोग्रामिंग (probabilistic programming) नामक एक विशेष तकनीक का उपयोग करते हैं। कल्पना कीजिए कि मेज को थोड़ा हिलाकर यह देखना कि क्या टॉवर डगमगाता है। यदि टॉवर बहुत अधिक डगमगाता है, तो बिल्डर को पता चल जाता है कि वह स्थान अस्थिर है।

3. द क्रिटिक (The Critic - Feedback System)

यह वह निरीक्षक (inspector) है जो निर्माण स्थल का चक्कर लगाता है।

  • यदि ड्रीमर ने बकवास लिखी: तो क्रिटिक कहता है, "हे, आपने मुझे नहीं बताया कि लैंप कहाँ रखना है!"
  • यदि बिल्डर विफल रहा: तो क्रिटिक कहता है, "किताबों का ढेर गिर गया क्योंकि आपने उन्हें किनारे से बहुत दूर रखा था। उन्हें केंद्र के करीब लाने का प्रयास करें।"
  • यदि दृश्य बहुत खाली है: तो क्रिटिक कहता है, "आपके पास बाईं ओर एक बड़ा खाली स्थान है; वहां कुछ औजार रखें।"

क्रिटिक यह फीडबैक वापस ड्रीमर को भेजता है, जो स्क्रिप्ट को फिर से लिखता है। बिल्डर फिर से प्रयास करता है। वे इस लूप को तब तक दोहराते रहते हैं जब तक कि दृश्य एकदम सही न हो जाए।

यह एक बड़ी बात क्यों है?

1. यह "बिखराव" और "वास्तविकता" को समझता है
अधिकांश रोबोट एक आदर्श, स्वच्छ दुनिया में प्रशिक्षण लेते हैं। लेकिन वास्तविक जीवन बिखरा हुआ होता है। आपके पास प्लेटों का एक ढेर हो सकता है जो तकनीकी रूप से स्थिर है लेकिन ऐसा दिखता है जैसे गिरने ही वाला है (एक "अस्थिर" ढेर)। PhyScensis ऐसे कठिन, वास्तविक परिदृश्य बना सकता है। यह जानबूझकर अस्थिर टॉवर भी बना सकता है ताकि रोबले को नाजुक स्थितियों को संभालने के लिए प्रशिक्षित किया जा सके ताकि वे चीजों को तोड़ें नहीं।

2. यह एक "टेक्स्ट-टू-वर्ल्ड" मशीन है
आपको 3D मॉडलिंग या कोडिंग जानने की आवश्यकता नहीं है। आप बस एक वाक्य टाइप करते हैं, और सिस्टम एक जटिल, इंटरैक्टिव 3D कमरा बनाता है जो भौतिकी के नियमों का पालन करता है। यह दर्जनों किताबों से भरी एक छोटी शेल्फ, या कपड़ों के साथ एक सूटकेस पैक कर सकता है, यह सुनिश्चित करते हुए कि कुछ भी तैर नहीं रहा है या एक-दूसरे के आर-पार (clip through) नहीं जा रहा है।

3. यह बेहतर रोबोट शिक्षक बनाता है
इस शोध ने एक रोबोटिक हाथ को कप उठाने और स्थानांतरित करने के लिए प्रशिक्षित करके इसका परीक्षण किया। PhyScensis द्वारा बनाए गए दृश्यों पर प्रशिक्षित रोबोट, पुराने तरीकों से प्रशिक्षित रोबोटों की तुलना में वास्तविक दुनिया के कार्यों को संभालने में बहुत बेहतर थे। क्यों? क्योंकि प्रशिक्षण डेटा वास्तविक दुनिया जैसा दिखता था और महसूस होता था।

उपमा सारांश (Analogy Summary)

  • पुराने तरीके: एक बच्चे द्वारा घर का चित्र बनाने जैसा है। यह एक घर जैसा दिखता है, लेकिन यदि आप इसे धक्का देंगे, तो यह बिखर जाएगा क्योंकि यह केवल कागज पर स्याही है।
  • PhyScensis: इंजीनियरों की एक टीम द्वारा लेगो (LEGO) सेट बनाने जैसा है। एक व्यक्ति योजना बनाता है, दूसरा यह देखते हुए इसे बनाता है कि ईंटें आपस में जुड़ रही हैं या नहीं, और तीसरा जाँच करता है कि टॉवर डगमगा रहा है या नहीं। यदि यह डगमगाता है, तो वे योजना को ठीक करते हैं और फिर से प्रयास करते हैं जब तक कि टॉवर मजबूती से खड़ा न हो जाए।

संक्षेप में, PhyScensis कल्पना (हम दृश्य को कैसा देखना चाहते हैं) और वास्तविकता (भौतिकी वास्तव में कैसे काम करती है) के बीच के अंतर को पाटता है, जिससे रोबोटों के लिए हमारी बिखरी हुई, जटिल दुनिया के साथ बातचीत करने के लिए एक आदर्श खेल का मैदान तैयार होता है।

अपने क्षेत्र के पेपरों की भीड़ में उलझे हुए हैं?

आपके रिसर्च कीवर्ड से मेल खाने वाले सबसे नए और अलग सोच वाले पेपरों का रोज़ाना Digest पाएँ—तकनीकी सारांश के साथ, आपकी भाषा में।

Digest आज़माएँ →