← नवीनतम पेपर
💻 computer science

SemanticXR: Low Power and Real-time Queryable Semantic Mapping with an Object-Level Device-Cloud Architecture

SemanticXR एक नवीन डिवाइस-क्लाउड सिस्टम है जो वस्तुओं को प्रथम-श्रेणी की इकाइयों के रूप में मानकर डिवाइस-सर्वर सीमा के पार संचार, गणना और मेमोरी को अनुकूलित करता है, जिससे XR अनुप्रयोगों के लिए रीयल-टाइम, कम-शक्ति वाले, ओपन-वोकेबुलरी सिमेंटिक मैपिंग और क्वेरीइंग को प्राप्त किया जा सके।

मूल लेखक: Rahul Singh, Devdeep Ray, Connor Smith, Sarita Adve

प्रकाशित 2026-06-12
📖 5 मिनट में पढ़ें🧠 गहराई से पढ़ें

मूल लेखक: Rahul Singh, Devdeep Ray, Connor Smith, Sarita Adve

मूल पेपर CC BY 4.0 (http://creativecommons.org/licenses/by/4.0/) के तहत लाइसेंस किया गया है। ✨ नीचे दिए गए पेपर की यह व्याख्या AI से तैयार की गई है। इसे लेखकों ने न तो लिखा है, न इसका समर्थन किया है। तकनीकी सटीकता के लिए मूल पेपर देखें। पूरा डिस्क्लेमर पढ़ें

कल्पना कीजिए कि आपने स्मार्ट चश्मा पहना है जो आपके कमरे को "देख" सकता है और वहां मौजूद हर चीज़ को समझ सकता है। आप पूछ सकते हैं, "मेरी चाबियाँ कहाँ हैं?" और चश्मा कैबिनेट की ओर इशारा कर देगा। यह सिमेंटिक मैपिंग (Semantic Mapping) का सपना है।

हालाँकि, एक छोटे, बैटरी से चलने वाले डिवाइस (जैसे हेडसेट या फोन) पर ऐसा करना अविश्वसनीय रूप से कठिन है। चश्मे को हजारों वस्तुओं को पहचानना होगा, उन्हें 3D स्पेस में याद रखना होगा, और तुरंत सवालों के जवाब देने होंगे, और यह सब एक छोटी सी बैटरी पर चलते हुए करना होगा। यदि चश्मा यह सारा काम खुद करने की कोशिश करेगा, तो वह कुछ ही मिनटों में गर्म होकर बंद हो जाएगा। यदि वह सारा डेटा क्लाउड में मौजूद एक शक्तिशाली कंप्यूटर को भेजता है, तो इंटरनेट कनेक्शन टूट सकता है, या डेटा ट्रांसफर बहुत धीमा और भारी हो सकता है।

SemanticXR एक नया सिस्टम है जिसे ठीक इसी समस्या को हल करने के लिए डिज़ाइन किया गया है। यह कैसे काम करता है, इसे सरल उपमाओं के माध्यम से यहाँ समझाया गया है:

मुख्य विचार: "ऑब्जेक्ट" (वस्तु) ही असली सितारा है

अधिकांश सिस्टम पूरे कमरे को डेटा के एक विशाल, अव्यवset ढेर के रूप में प्रोसेस करने की कोशिश करते हैं। SemanticXR नियमों को बदल देता है। "पूरे कमरे" को देखने के बजाय, यह हर एक वस्तु (एक कुर्सी, एक लैंप, एक कॉफी कप) को अपने स्वयं के आईडी कार्ड के साथ एक व्यक्तिगत पात्र के रूप में मानता है।

इसे एक लाइब्रेरी की तरह समझें।

  • पुराना तरीका: आप एक किताब खोजने के लिए पूरी लाइब्रेरी को एक साथ पढ़ने की कोशिश करते हैं। यह धीमा है, और यदि लाइब्रेरी बहुत बड़ी है, तो आप खो जाते हैं।
  • SemanticXR का तरीका: हर किताब का अपना एक विशिष्ट बारकोड होता है। सिस्टम केवल उन्हीं विशिष्ट किताबों की परवाह करता है जिनकी आपको आवश्यकता है, न कि पूरी इमारत की।

यह पावर और स्पीड कैसे बचाता है ("क्लाउड" का कमाल)

यह सिस्टम काम को आपके चश्मे (डिवाइस) और डेटा सेंटर में मौजूद एक शक्तिशाली कंप्यूटर (क्लाउड) के बीच विभाजित करता है।

  1. क्लाउड भारी काम करता है:
    आपके चश्मे एक तस्वीर लेते हैं और उसे क्लाउड को भेजते हैं। क्लाउड सुपर-स्मार्ट AI का उपयोग करके यह पता लगाता है कि, "वह एक लाल कुर्सी है," "वह एक नीला लैंप है," और "वह एक कॉफी मग है।"

    • नवाचार: पूरी तस्वीर को एक साथ प्रोसेस करने के बजाय, क्लाउड प्रत्येक वस्तु को अलग से प्रोसेस करता है। यह एक पार्किंग लॉट में एक ही व्यक्ति द्वारा एक साथ कई कारों को पेंट करने के बजाय, 100 श्रमिकों द्वारा प्रत्येक को एक विशिष्ट कार पेंट करने जैसा है। इससे क्लाउड 2.2 गुना तेज़ हो जाता है।
  2. कम डेटा भेजना ("डाउनसैंपलिंग" का कमाल):
    हाई-डेफिनिशन डेप्थ मैप्स (3D माप) को क्लाउड पर भेजना एक बड़े, भारी पत्थर को डाक से भेजने जैसा है।

    • नवाचार: SemanticXR क्लाउड को भेजने से पहले उस "पत्थर" को सिकोड़ देता है। यह डेप्थ डेटा का एक छोटा, हल्का संस्करण भेजता है। क्लाउड इतना स्मार्ट है कि वह जानता है कि दूर स्थित एक छोटी वस्तु के लिए, उसे एकदम सटीक विवरण की आवश्यकता नहीं है। यह वस्तु को पहचानने की क्षमता खोए बिना क्लाउड को भेजे जाने वाले डेटा को 90% तक कम कर देता है।

क्या होता है जब इंटरनेट टूट जाता है?

यही इस सिस्टम की सबसे बड़ी शक्ति है। आमतौर पर, यदि आपका इंटरनेट कट जाता है, तो आपके स्मार्ट चश्मे "बेवकूफ" हो जाते हैं क्योंकि वे क्लाउड से मदद नहीं मांग सकते।

  • "पॉकेट नोटबुक" का दृष्टिकोण: SemanticXR आपके चश्मे पर एक छोटी, हल्की "नोटबुक" रखता है। यह पूरे कमरे को स्टोर नहीं करता है; यह केवल उन वस्तुओं की सूची और उनकी स्थिति को स्टोर करता है जिन्हें वह जानता है।
  • स्मार्ट अपडेट: जब इंटरनेट काम कर रहा होता है, तो क्लाउड इस नोटबुक को अपडेट भेजता है। लेकिन यह केवल बदलाव भेजता है। यदि आप एक कुर्सी हटाते हैं, तो क्लाउड पूरा कमरा दोबारा नहीं भेजता; वह बस एक नोट भेजता है, "कुर्सी हिल गई है।"
  • परिणाम: यदि इंटरनेट पूरी तरह से कट भी जाए, तो भी आपके चश्मे "मेरी चाबियाँ कहाँ हैं?" जैसे सवालों का तुरंत उत्तर (100 मिलीसेकंड से भी कम समय में) दे सकते हैं, क्योंकि जवाब पहले से ही स्थानीय नोटबुक में मौजूद है।

द "ट्यूनेबल" डायल (समायोज्य डायल)

यह सिस्टम लचीला है। कल्पना कीजिए कि आपके चश्मे पर एक डायल है जो आपको गति (Speed) और विस्तार (Detail) के बीच चयन करने की अनुमति देता है।

  • यदि आप जल्दी में हैं, तो आप बैटरी और बैंडविड्थ बचाने के लिए सिस्टम को विवरणों के मामले में "आलसी" होने के लिए कह सकते हैं।
  • यदि आपको उच्च सटीकता की आवश्यकता है, तो आप विवरण को बढ़ा सकते हैं।
  • सिस्टम स्वचालित रूप से आपके द्वारा किए जा रहे कार्य के आधार पर खुद को समायोजित करता है, बिना सॉफ्टवेयर को दोबारा लिखे।

निष्कर्ष

SemanticXR यह सिद्ध करता है कि आप अपने चश्मे में एक शक्तिशाली, AI-संचालित "स्मार्ट असिस्टेंट" रख सकते हैं जो:

  • बैटरी पर चलता है: यह केवल खाली बैठे रहने की तुलना में लगभग 2% अधिक बिजली का उपयोग करता है।
  • ऑफलाइन काम करता है: वाई-फाई खत्म होने पर भी यह काम करता रहता है।
  • तेज़ है: यह पलक झपकते ही सवालों के जवाब देता है।
  • स्केलेबल है: यह मेमोरी खत्म हुए बिना दसियों हज़ार वस्तुओं को याद रख सकता है।

संक्षेप में, SemanticXR आपके चश्मे से भारी सोच-विचार का बोझ हटा देता है, क्लाउड को केवल आवश्यक "नोट्स" भेजता है, और आपके डिवाइस पर एक स्मार्ट, हल्का सारांश रखता है ताकि इंटरनेट जाने पर भी आप अपनी चाबियाँ कभी न खोएं।

अपने क्षेत्र के पेपरों की भीड़ में उलझे हुए हैं?

आपके रिसर्च कीवर्ड से मेल खाने वाले सबसे नए और अलग सोच वाले पेपरों का रोज़ाना Digest पाएँ—तकनीकी सारांश के साथ, आपकी भाषा में।

Digest आज़माएँ →