← नवीनतम पेपर
💻 computer science

GenAU: Language-Grounded Industrial Anomaly Understanding with Vision-Language Models

GenAU एक एकीकृत विजन-लैंग्वेज फ्रेमवर्क है जो औद्योगिक निरीक्षण के लिए विशेष सेगमेंटेशन टोकन के साथ एक VLM को संवर्धित करके इमेज-लेवल डिटेक्शन, पिक्सेल-लेवल सेगमेंटेशन, मल्टी-टाइप विसंगति पहचान और लैंग्वेज-ग्राउंडेड डिफेक्ट विश्लेषण को एक एकल इंस्ट्रक्शन-फॉलोइंग मॉडल में एकीकृत करता है।

मूल लेखक: Hongkuan Zhou, Tristan Rehm, Nadeem Nazer, Lavdim Halilaj, Jingcheng Wu, Steffen Staab

प्रकाशित 2026-07-02
📖 5 मिनट में पढ़ें🧠 गहराई से पढ़ें

मूल लेखक: Hongkuan Zhou, Tristan Rehm, Nadeem Nazer, Lavdim Halilaj, Jingcheng Wu, Steffen Staab

मूल पेपर CC BY 4.0 (http://creativecommons.org/licenses/by/4.0/) के तहत लाइसेंस किया गया है। नीचे दिए गए पेपर की यह व्याख्या AI से तैयार की गई है। इसे लेखकों ने न तो लिखा है, न इसका समर्थन किया है। तकनीकी सटीकता के लिए मूल पेपर देखें। पूरा डिस्क्लेमर पढ़ें

एक ऐसे कारखाने के फर्श की कल्पना करें जहाँ एक मशीन को हर दिन हज़ारों उत्पादों का निरीक्षण करने की आवश्यकता होती है। पारंपरिक रूप से, इस मशीन की "आंखें" एक बहुत ही सख्त सुरक्षा गार्ड की तरह हैं जिनके पास केवल दो उत्तर हैं: "सब कुछ ठीक है" या "कुछ गलत है।" यदि गार्ड को कोई खरोंच दिखती है, तो वह चिल्लाकर कहता है "गलत!" लेकिन वह आपको यह नहीं बता सकता कि वह खरोंच कहाँ है, वह किस प्रकार की खरोंच है, या वह क्यों महत्वपूर्ण है।

अन्य सिस्टम एक जासूस की तरह हैं जो अपराध स्थल का विस्तृत विवरण दे सकते हैं ("बाईं ओर एक टूटा हुआ हैंडल है!"), लेकिन वे ब्लूप्रिंट पर उस सटीक स्थान की ओर इशारा नहीं कर सकते जहाँ क्षति हुई है।

GenAU एक नया सिस्टम है जो एक ही समय में सुरक्षा गार्ड और जासूस दोनों बनने की कोशिश करता है। यह एक "जनरलिस्ट" (Generalist) AI है जो एक ही बार में चार काम कर सकता है:

  1. डिटेक्ट करना (Detect): क्या कोई समस्या है?
  2. लोकलइज़ करना (Localize): समस्या कहाँ है, ठीक उसी जगह इशारा करना (जैसे किसी चीज़ के चारों ओर घेरा बनाना)।
  3. पहचानना (Identify): समस्या के प्रकार का नाम बताना (जैसे "दरार," "छेद," "गायब हिस्सा")।
  4. व्याख्या करना (Explain): आपको सरल अंग्रेजी (साधारण भाषा) में बताना कि यह एक समस्या क्यों है।

यह कैसे काम करता है? "स्टिकी नोट्स" का सादृश्य (Analogy)

अधिकांश AI सिस्टम जो छवियों को देखते हैं और टेक्स्ट पढ़ते हैं, वे अलग-अलग होते हैं। GenAU इन दोनों को AI के मस्तिष्क के भीतर "स्टिकी नोट्स" के एक चतुर प्रयोग का उपयोग करके जोड़ता है।

शोधकर्ताओं ने AI को सिखाया कि जब वह किसी छवि को देखता है, तो वह दो विशेष "स्टिकी नोट्स" (जिन्हें टोकन कहा जाता है) उत्पन्न करे:

  • एक नोट कहता है: "यह सामान्य है।"
  • दूसरा नोट कहता है: "यह दोषपूर्ण है।"

जैसे ही AI छवि को देखता है, वह इन दो नोट्स के विरुद्ध चित्र के हर छोटे से हिस्से की तुलना करता है।

  • यदि चित्र का कोई हिस्सा "दोषपूर्ण" नोट जैसा दिखता है, तो AI उस स्थान को हाइलाइट करता है।
  • यदि वह "सामान्य" नोट जैसा दिखता है, तो वह उसे छोड़ देता है।

क्योंकि ये नोट्स AI की भाषा प्रणाली का हिस्सा हैं, इसलिए AI इनका उपयोग यह समझाने के लिए वाक्य लिखने में भी कर सकता है कि वह क्या देख रहा है। यह ऐसा है जैसे AI सोच रहा हो, "मैं यहाँ एक दरार देख रहा हूँ [स्थान की ओर इशारा करते हुए], और मुझे पता है कि यह एक दरार है क्योंकि यह मेरे 'दोषपूर्ण' नोट से मेल खाती है।"

प्रशिक्षण: एक कारखाने से सीखने के बाद कई जगहों पर काम करना

पेपर इस AI को प्रशिक्षित करने के एक विशिष्ट तरीके का वर्णन करता है। कल्पना करें कि आप एक छात्र को फैक्ट्री A (MVTica-AD) की पाठ्यपुस्तक का उपयोग करके पढ़ाते हैं। आप उन्हें उस फैक्ट्री के सामान्य और टूटे हुए सामानों की तस्वीरें दिखाते हैं।

फिर, आप उसी छात्र को फैक्ट्री B (VisA) और फैक्ट्री C (Real-IAD) में ले जाते हैं जो पूरी तरह से अलग हैं और जिनमें अलग प्रकार की मशीनें हैं। आप छात्र को फिर से नहीं पढ़ाते; आप बस उन्हें वह लागू करने के लिए कहते जो उन्होंने सीखा है। इसे "ज़ीरो-शॉट" (Zero-Shot) लर्निंग कहा जाता है।

पेपर का दावा है कि GenAU इसमें बहुत अच्छा है। भले ही इसे केवल फैक्ट्री A के लिए प्रशिक्षित किया गया था, फिर भी यह फैक्ट्री B और C में जा सकता है, खराब हिस्सों को ढूंढ सकता है, उनका नक्शा बना सकता है, और बिना किसी नए लेसन प्लान के उन्हें समझा सकता है।

उन्होंने क्या पाया?

शोधकर्ताओं ने GenAU का अन्य शीर्ष-स्तरीय सिस्टम के विरुद्ध परीक्षण किया और पाया:

  • ऑल-राउंडर: GenAU एकमात्र ऐसा सिस्टम है जिसका परीक्षण किया गया जो एक ही मॉडल में चारों कार्य (डिटेक्ट, लोकलाइज़, आइडेंटिफाई, एक्सप्लेन) कर सकता है। अन्य सिस्टम आमतौर पर केवल एक या दो ही कर पाते हैं।
  • ट्रेड-ऑफ (समझौता): इतना स्मार्ट होने की एक छोटी सी "कीमत" है। जब GenAU चीजों को समझाने (रीज़निंग) के बारे में सीखता है, तो इसकी दोषों के चारों ओर सटीक रूप से घेरा बनाने की क्षमता उन सिस्टमों की तुलना में थोड़ी कम सटीक हो जाती है जो केवल घेरा बनाने पर ध्यान केंद्रित करते हैं। हालांकि, पेपर का तर्क है कि यह एक उचित समझौता है क्योंकि स्पष्टीकरण प्राप्त करना आमतौर पर एक सटीक रूपरेखा प्राप्त करने से अधिक मूल्यवान होता है।
  • कमजोरी: GenAU उन चीजों को पकड़ने में बहुत अच्छा है जो स्पष्ट रूप से गलत दिखती हैं (जैसे एक बड़ा छेद या खरोंच)। हालांकि, यह "लॉजिक" (तर्क) की समस्याओं में संघर्ष करता है। उदाहरण के लिए, यदि एक पेंच (screw) गायब है, तो AI को तब तक पता नहीं चलेगा जब तक कि उसे पता न हो कि पेंच कहाँ होना चाहिए था। यह ऐसा है जैसे AI एक खाली जगह को देखता है और सोचता है, "यह सामान्य लग रहा है," क्योंकि उसके पास पूरी मशीन का ब्लूप्रिंट उसके दिमाग में नहीं है।

मुख्य निष्कर्ष (The Bottom Line)

GenAU एक स्मार्ट औद्योगिक निरीक्षक की दिशा में एक कदम है। केवल "लाइन रोकें!" या "यह टूटा हुआ है" कहने के बजाय, यह कह सकता है, "लाइन रोकें! गियर के ऊपरी-बाएँ कोने पर एक दरार है। यह एक स्ट्रेस फ्रैक्चर (stress fracture) जैसा दिखता है, जिसके कारण मशीन ओवरहीट हो सकती है।"

यह पिक्सेल देखने की क्षमता और शब्दों को समझने की क्षमता को एक साथ जोड़ता है, जिससे यह आधुनिक विनिर्माण निरीक्षण के लिए एक शक्तिशाली उपकरण बन जाता है।

अपने क्षेत्र के पेपरों की भीड़ में उलझे हुए हैं?

आपके रिसर्च कीवर्ड से मेल खाने वाले सबसे नए और अलग सोच वाले पेपरों का रोज़ाना Digest पाएँ—तकनीकी सारांश के साथ, आपकी भाषा में।

Digest आज़माएँ →