← नवीनतम पेपर
💻 computer science

Efficient Universal Perception Encoder

यह शोध पत्र एफिशिएंट यूनिवर्सल परसेप्शन एनकोडर (EUPE) को प्रस्तुत करता है, जो एज डिवाइसेस के लिए एक संक्षिप्त विजन मॉडल है, जो सीधे उनसे स्केल डाउन करने के बजाय, कई डोमेन-एक्सपर्ट फाउंडेशन मॉडल्स को एकत्रित करके बनाए गए एक बड़े प्रॉक्सी टीचर से ज्ञान को डिस्टिल करके विविध कार्यों में बहुमुखी, उच्च-प्रदर्शन वाली रिप्रजेंटेशन्स प्राप्त करता है।

मूल लेखक: Chenchen Zhu, Saksham Suri, Cijo Jose, Maxime Oquab, Marc Szafraniec, Wei Wen, Yunyang Xiong, Patrick Labatut, Piotr Bojanowski, Raghuraman Krishnamoorthi, Vikas Chandra

प्रकाशित 2026-03-25
📖 5 मिनट में पढ़ें🧠 गहराई से पढ़ें

मूल लेखक: Chenchen Zhu, Saksham Suri, Cijo Jose, Maxime Oquab, Marc Szafraniec, Wei Wen, Yunyang Xiong, Patrick Labatut, Piotr Bojanowski, Raghuraman Krishnamoorthi, Vikas Chandra

मूल पेपर CC BY 4.0 (http://creativecommons.org/licenses/by/4.0/) के तहत लाइसेंस किया गया है। नीचे दिए गए पेपर की यह व्याख्या AI से तैयार की गई है। इसे लेखकों ने न तो लिखा है, न इसका समर्थन किया है। तकनीकी सटीकता के लिए मूल पेपर देखें। पूरा डिस्क्लेमर पढ़ें

कल्पना कीजिए कि आप अपने स्मार्टफोन के लिए एक स्विस आर्मी नाइफ (Swiss Army Knife) बनाने की कोशिश कर रहे हैं। आप इसे इतना छोटा बनाना चाहते हैं कि यह आपकी जेब में समा जाए (कुशलतापूर्ण) लेकिन इतना शक्तिशाली हो कि यह सब कुछ कर सके: कुत्ते की नस्ल की पहचान करना, किसी विदेशी भाषा में मेनू पढ़ना, दीवार तक की दूरी मापना और एक दृष्टिहीन व्यक्ति को दृश्य का वर्णन करना।

वर्तमान में, अधिकांश AI मॉडल विशिष्ट उपकरणों (specialized tools) की तरह हैं। एक मास्टर शेफ है (जो भोजन पहचानने में माहिर है), दूसरा एक मास्टर आर्किटेक्ट है (जो स्थानों को मापने में माहिर है), और तीसरा एक अनुवादक (translator) है (जो टेक्स्ट पढ़ने में माहिर है)। यदि आप चाहते हैं कि आपका फोन ये सभी काम करे, तो आपको तीन भारी, बड़े उपकरण साथ लेकर चलने होंगे, जिससे बैटरी खत्म होगी और फोन धीमा हो जाएगा।

समस्या:
शोधकर्ताओं ने इन तीन उपकरणों को एक साथ मिलाकर एक 'सुपर-टूल' बनाने की कोशिश की। लेकिन जब उन्होंने उन्हें बस आपस में मिला दिया, तो परिणाम एक अनाड़ी, आधा-अधूरा उपकरण निकला जो किसी भी चीज़ में बहुत अच्छा नहीं था। यह एक शेफ, एक आर्किटेक्ट और एक अनुवादक को एक छोटे से कमरे में रखने जैसा था; वे एक-दूसरे के पैरों के नीचे आते रहे, और अंतिम उत्पाद भ्रमित हो गया।

समाधान: EUPE (द "मास्टर अपेंटिस" मेथड)
Meta के लेखकों ने एक चतुर नई रेसिपी विकसित की जिसे EUPE (एफिशिएंट यूनिवर्सल परसेप्शन एनकोडर) कहा जाता है। केवल उपकरणों को आपस में टकराने के बजाय, उन्होंने तीन-चरणीय "मास्टर अपेंटिस" (गुरु-शिष्य) रणनीति का उपयोग किया:

1. "सुपर-ब्रेन" चरण (स्केलिंग अप)

सबसे पहले, उन्होंने सीधे छोटे फोन को सिखाने की कोशिश नहीं की। इसके बजाय, उन्होंने एक विशाल, अत्यंत बुद्धिमान "प्रॉक्सी टीचर" (एक विशाल AI मॉडल) बनाया।

  • उपमा: कल्पना कीजिए कि आप एक बच्चे को मास्टर शेफ, आर्किटेक्ट और अनुवादक बनने के लिए सिखाना चाहते हैं। आप उसे बस रसोई में नहीं फेंक देते। पहले, आप एक सुपर-जीनियस मेंटर (महाबुद्धि गुरु) को नियुक्त करते हैं जिसने दशकों तक इन तीनों क्षेत्रों का अध्ययन किया है।
  • उन्होंने क्या किया: उन्होंने सबसे अच्छे "विशेषज्ञ" मॉडलों (शेफ, आर्किटेक्ट और अनुवादक) को उस सुपर-जीनियस मेंटर को सिखाया। मेंटर ने उन सभी विशेषज्ञों से सारा ज्ञान सोख लिया और यह पता लगाया कि कैसे उन्हें एक पूर्ण, एकीकृत समझ में संयोजित किया जाए।

2. "क्लासरूम" चरण (स्केलिंग डाउन - फिक्स्ड)

अब जब सुपर-जीनियस मेंटर मौजूद है, तो वे छोटे, कुशल छात्र (वह मॉडल जो वास्तव में आपके फोन पर चलेगा) को साथ लाते हैं।

  • उपमा: मेंटर एक शांत क्लासरूम में छात्र के साथ बैठता है। वे सरल, मानक पाठों (फिक्स्ड रेजोल्यूशन) के साथ शुरुआत करते हैं। छात्र मेंटर के संयुक्त ज्ञान से सीखता है, न कि तीन अलग-अलग विशेषज्ञों से जो आपस में बहस कर रहे हों।
  • यह क्यों काम करता है: एक छोटे छात्र के लिए एक आदर्श शिक्षक से सीखना, एक साथ तीन अलग-अलग विशेषज्ञों से सीखने की तुलना में बहुत आसान है। मेंटर ने पहले ही विशेषज्ञों के ज्ञान को उस भाषा में "अनुवादित" करने का कठिन काम कर लिया है जिसे छात्र समझ सके।

3. "फील्ड ट्रिप" चरण (स्केलिंग डाउन - वेरिएबल)

अंत में, छात्र को वास्तविक दुनिया के लिए तैयार होना होगा, जहाँ चीजें हमेशा एक ही आकार की नहीं होतीं।

  • उपमा: मेंटर छात्र को फील्ड ट्रिप पर ले जाता है। कभी वे एक नन्ही चींटी को देखते हैं (लो रेजोल्यूशन), कभी एक विशाल हाथी को (हाई रेजोल्यूशन)। छात्र सीखता है कि वस्तु चाहे बड़ी हो या छोटी, पैटर्न को कैसे पहचानना है।
  • परिणाम: छात्र अब एक छोटा, कुशल मॉडल है जो किसी भी आकार की छवियों को संभाल सकता है और कोई भी कार्य कर सकता है।

परिणाम: द अल्टीमेट स्विस आर्मी नाइफ

जब उन्होंने अपने फोन पर इस नए "EUPE" मॉडल का परीक्षण किया:

  • यह छोटा है: यह बिना बैटरी खत्म किए आपके स्मार्टफोन पर आसानी से फिट हो जाता है।
  • यह बहुमुखी है: यह विशेषज्ञ "विशेषज्ञ" मॉडलों जितना ही प्रदर्शन करता है।
    • यह "इमेज एक्सपर्ट" की तरह वस्तुओं की पहचान करता है।
    • यह "आर्किटेक्चर एक्सपर्ट" की तरह गहराई (depth) को मापता है।
    • यह "ट्रांसलेटर एक्सपर्ट" की तरह टेक्स्ट पढ़ता है और प्रश्नों के उत्तर देता है।
  • यह प्रतियोगिता को पछाड़ देता है: इन कौशलों को मिलाने के पिछले प्रयास (जैसे "RADIO" विधि) एक अनाड़ी मल्टी-टूल की तरह थे। EUPE एक चिकना, उच्च-प्रदर्शन वाला टूल है जो सब कुछ अच्छी तरह से करता है।

यह क्यों महत्वपूर्ण है

यह एज एआई (Edge AI) (वह AI जो क्लाउड के बजाय आपके डिवाइस पर चलता है) के लिए एक बड़ी बात है।

  • गोपनीयता (Privacy): आपकी तस्वीरें और प्रश्न आपके फोन पर ही रहते हैं।
  • गति (Speed): इंटरनेट कनेक्शन का इंतजार करने की जरूरत नहीं है।
  • बैटरी लाइफ: यह आपकी बैटरी खत्म नहीं करता क्योंकि मॉडल कुशल है।

संक्षेप में: पेपर ने यह पता लगाया कि एक छोटा, स्मार्ट AI बनाने के लिए, आप केवल बड़े विशेषज्ञों को सिकोड़ (shrink) नहीं सकते। आपको पहले सब कुछ सीखने के लिए एक विशाल "सुपर-ब्रेन" बनाना होगा, और फिर उस ज्ञान को एक छोटे छात्र को सिखाना होगा। परिणाम एक छोटा AI है जो आश्चर्यजनक रूप से शक्तिशाली है और लगभग वह सब कुछ कर सकता है जो आप उससे पूछते हैं।

अपने क्षेत्र के पेपरों की भीड़ में उलझे हुए हैं?

आपके रिसर्च कीवर्ड से मेल खाने वाले सबसे नए और अलग सोच वाले पेपरों का रोज़ाना Digest पाएँ—तकनीकी सारांश के साथ, आपकी भाषा में।

Digest आज़माएँ →