← नवीनतम पेपर
💻 computer science

AnomalyVFM -- Transforming Vision Foundation Models into Zero-Shot Anomaly Detectors

यह शोध पत्र AnomalyVFM का प्रस्ताव करता है, जो एक सामान्य ढांचा है जो एक सुदृढ़ तीन-चरणीय सिंथेटिक डेटासेट जनरेशन योजना के साथ एक पैरामीटर-कुशल अनुकूलन तंत्र को जोड़कर प्रीट्रेंड विजन फाउंडेशन मॉडल्स को अत्याधुनिक ज़ीरो-शॉट विसंगति डिटेक्टरों में परिवर्तित करता है, जिससे यह विविध डेटासेट्स पर मौजूदा विधियों से काफी बेहतर प्रदर्शन करता है।

मूल लेखक: Matic Fučka, Vitjan Zavrtanik, Danijel Skočaj

प्रकाशित 2026-04-10
📖 6 मिनट में पढ़ें🧠 गहराई से पढ़ें

मूल लेखक: Matic Fučka, Vitjan Zavrtanik, Danijel Skočaj

मूल पेपर CC BY 4.0 (http://creativecommons.org/licenses/by/4.0/) के तहत लाइसेंस किया गया है। नीचे दिए गए पेपर की यह व्याख्या AI से तैयार की गई है। इसे लेखकों ने न तो लिखा है, न इसका समर्थन किया है। तकनीकी सटीकता के लिए मूल पेपर देखें। पूरा डिस्क्लेमर पढ़ें

कल्पना कीजिए कि आप एक फैक्ट्री में क्वालिटी कंट्रोल इंस्पेक्टर हैं। आपका काम कन्वेयर बेल्ट पर दोषपूर्ण (defective) उत्पादों को पहचानना है। आमतौर पर, आपके पास उन "परफेक्ट" उत्पादों की तस्वीरों का एक बड़ा ढेर होता है जो दिखते कैसे हैं, ताकि आप आसानी से देख सकें कि कौन से टूटे हुए, खरोंच वाले या अजीब हैं।

लेकिन क्या होगा अगर अचानक आपसे एक नए उत्पाद का निरीक्षण करने के लिए कहा जाए जिसे आपने पहले कभी नहीं देखा है, और आपके पास अध्ययन करने के लिए एक भी फोटो नहीं है? यह "जीरो-शॉट" (Zero-Shot) समस्या है। यह एक अजीब, अज्ञात गैजेट को हाथ में लेने जैसा है और आपसे कहा गया है, "इसका टूटा हुआ हिस्सा ढूंढो," जबकि आपने पहले कभी उस गैजेट को देखा तक नहीं है।

लंबे समय तक, कंप्यूटर इस काम में संघर्ष करते रहे। वे बिल्लियों या कुत्तों को पहचानने में बहुत अच्छे थे क्योंकि उन्होंने लाखों को देखा था, लेकिन वे एक नई, अनदेखी वस्तु के सामने विफल हो जाते थे।

यहाँ AnomalyVFM आता है। इस पेपर को एक मास्टर की (master key) के रूप में देखें जो कंप्यूटरों के इस समस्या को हल करने के नए तरीके को अनलॉक करती है। यह कैसे काम करता है, यहाँ सरल अवधारणाओं में दिया गया है:

1. समस्या: "स्मार्ट" बनाम "विजुअल"

शोधकर्ताओं ने इस कार्य के लिए उपयोग किए जाने वाले दो प्रकार के कंप्यूटर "मस्तिष्क" (मॉडल्स) देखे:

  • "लाइब्रेरियन" (विज़न-लैंग्वेज मॉडल्स): ये एक लाइब्रेरियन की तरह हैं जिसने अब तक लिखी गई हर किताब पढ़ी है। वे "टूटा हुआ" या "दरार वाला" के संकल्पना (concept) को जानते हैं क्योंकि उन्होंने इसके बारे में पढ़ा है। वे जीरो-शॉट डिटेक्शन में अच्छे हैं, लेकिन वे दृश्य विवरणों (visual details) के बारे में थोड़े अस्पष्ट हो सकते हैं।
  • "आर्टिस्ट" (विज़न फाउंडेशन मॉडल्स): ये एक मास्टर पेंटर की तरह हैं जिसने लाखों छवियों का अध्ययन किया है। वे रंगों, बनावट (textures) और आकारों को किसी भी अन्य व्यक्ति से बेहतर समझते हैं। हालाँकि, अतीत में, वे नई वस्तुओं पर दोषों को पहचानने में बहुत खराब थे क्योंकि उन्हें केवल "सामान्य" चीजों को पहचानने के लिए सिखाया गया था, न कि "टूटी हुई" चीजों के लिए। वे एक ऐसे कलाकार की तरह थे जो केवल परफेक्ट सेब पेंट करना जानता है लेकिन पूछा जाए कि कोई दाग वाला सेब कहाँ है, तो भ्रमित हो जाता है।

पेपर का तर्क है: क्यों "आर्टिस्ट" (विजुअल एक्सपर्ट) को लेकर उसे दोषों को पहचानना नहीं सिखाया जा सकता?

2. समाधान: एक तीन-चरणीय जादू का खेल

"आर्टिस्ट" को बिना वास्तविक टूटे हुए उत्पादों को दिखाए दोषों को पहचानना सिखाने के लिए, शोधकर्ताओं ने एक सिंथेटिक फैक्ट्री (Synthetic Factory) बनाई। उन्होंने वास्तविक टूटे हुए आइटम का उपयोग नहीं किया; उन्होंने दोषों को "कल्पना" करने के लिए AI का उपयोग किया।

यहाँ उनकी तीन-चरणीय प्रक्रिया दी गई है:

  • चरण 1: द ड्रीमर (परफेक्ट ऑब्जेक्ट बनाना)
    उन्होंने एक AI इमेज जनरेटर (जैसे DALL-E या Midjourney का हाई-टेक संस्करण) से एक वस्तु (जैसे, एक "परफेक्ट लाल सेब") की एक दोषरहित, शानदार फोटो बनाने के लिए कहा।

    • उपमा: कल्पना कीजिए कि एक 3D प्रिंटर एक दोषरहित, बिल्कुल नया खिलौना कार बना रहा है।
  • चरण 2: द सबोटूर (दोष डालना)
    इसके बाद, उन्होंने AI को उस परफेक्ट ऑब्जेक्ट को "तोड़ने" के लिए कहा। उन्होंने इनपेंटिंग (Inpainting) नामक तकनीक का उपयोग किया। उन्होंने AI से कहा, "इस सेब के एक छोटे से हिस्से को लो और इसे एक 'सड़े हुए, दागदार कचरे' में बदल दो।"

    • उपमा: कल्पना कीजिए कि एक शरारती रोबोट उस परफेक्ट खिलौना कार में एक छोटा सा हिस्सा काट देता है और उस पर एक खरोंच पेंट कर देता है, जिससे वह क्षतिग्रस्त दिखने लगती है।
  • चरण 3: द इंस्पेक्टर (कचरे को फ़िल्टर करना)
    कभी-कभी, AI आलसी या भ्रमित हो जाता है और वास्तव में वस्तु को तोड़ता नहीं है; यह बस उसी परफेक्ट सेब को फिर से बना देता है। शोधकर्ताओं ने एक "स्मार्ट फ़िल्टर" बनाया जो "परफेक्ट" छवि की तुलना "टूटी हुई" छवि से करता है। यदि दोनों छवियां बहुत समान दिखती हैं, तो फ़िल्टर उस छवि को फेंक देता है।

    • उपमा: एक क्वालिटी चेकर जो टूटे हुए खिलौने को देखता है। यदि वह अभी भी परफेक्ट दिखता है, तो वह उसे कचरे में डाल देता है। केवल वास्तव में टूटे हुए ही ट्रेनिंग के ढेर तक पहुँच पाते हैं।

3. ट्रेनिंग: आर्टिस्ट को कुशलतापूर्वक सिखाना

अब उनके पास "परफेक्ट" बनाम "टूटी हुई" छवियों का एक विशाल पुस्तकालय है, जो सभी कंप्यूटरों द्वारा बनाए गए हैं। उन्हें "आर्टिस्ट" (विज़न फाउंडेशन मॉडल) को इन अंतरों को पहचानने के लिए सिखाना है।

आमतौर पर, एक विशाल AI मॉडल को प्रशिक्षित करना एक पूरी इमारत को फिर से पेंट करने की कोशिश करने जैसा है ताकि केवल एक खिड़की को ठीक किया जा सके—इसमें बहुत समय लगता है और बहुत खर्च आता है।

  • नवाचार: पूरे मॉडल को फिर से प्रशिक्षित करने के बजाय, उन्होंने LoRA (लो-रैंक एडेप्टर्स) का उपयोग किया।
  • उपमा: कल्पना कीजिए कि AI मॉडल एक विशाल, जटिल ऑर्केस्ट्रा है। पूरे ऑर्केस्ट्रा को निकालने और नए लोगों को काम पर रखने के बजाय, उन्होंने संगीतकारों को विशेष शीट म्यूजिक (एडेप्टर्स) दिया है जो उन्हें "टूटे हुए" नोट्स कैसे बजाने हैं, यह सिखाता है। उन्होंने ऑर्केस्ट्रा की प्रतिभा को बरकरार रखा लेकिन निर्देश का एक छोटा, कुशल स्तर जोड़ा।

उन्होंने एक कॉन्फिडेंस वेट (Confidence Weight) भी जोड़ा। कभी-कभी, AI-जनरेटेड "टूटी हुई" छवियां थोड़ी धुंधली या अजीब होती हैं। मॉडल यह सीखता है कि, "मुझे 100% यकीन नहीं है कि यह एक दोष है, इसलिए मैं सावधान रहूँगा," बजाय इसके कि वह अंधाधुंध अनुमान लगाए।

4. परिणाम: एक सुपर-इंस्पेक्टर

जब उन्होंने इस नए सिस्टम का परीक्षण किया:

  • यह एक नई वस्तु को देख सका जिसे इसने पहले कभी नहीं देखा था (जैसे कि किसी विशिष्ट प्रकार का औद्योगिक गियर या मेडिकल स्कैन) और तुरंत दोषों को पहचान सका।
  • इसे सीखने के लिए वास्तविक टूटे हुए आइटम की तस्वीरों की आवश्यकता नहीं थी।
  • इसने सभी पिछले "लाइब्रेरियन" शैली के तरीकों (जो टेक्स्ट विवरणों पर निर्भर थे) को काफी बड़े अंतर से पीछे छोड़ दिया।

यह क्यों मायने रखता है

इससे पहले, यदि आप किसी नए उत्पाद में दोषों का पता लगाना चाहते थे, तो आपको उस उत्पाद के टूटे हुए संस्करणों की सैकड़ों तस्वीरें लेनी पड़ती थीं, जो महंगा और धीमा था।

AnomalyVFM खेल बदल देता है। यह कहता है: "हमें टूटे हुए उत्पाद को देखने की आवश्यकता नहीं है। हमें बस यह जानने की आवश्यकता है कि एक परफेक्ट वस्तु कैसी दिखती है, और हम आपके लिए टूटे हुए संस्करणों की कल्पना करने के लिए AI का उपयोग कर सकते हैं।"

यह एक शक्तिशाली विजुअल AI को एक सार्वभौमिक जासूस में बदल देता है जो किसी भी चीज़ को देख सकता है, कहीं भी, बिना किसी ट्रेनिंग मैनुअल की आवश्यकता के। यह एक सुरक्षा गार्ड को ऐसे चश्मे देने जैसा है जो किसी भी वस्तु में किसी भी खामी को तुरंत उजागर कर सकते हैं, सिर्फ इसलिए क्योंकि वे पूर्णता (perfection) के विचार को समझते हैं और उससे विचलन (deviation) को पहचान सकते हैं।

अपने क्षेत्र के पेपरों की भीड़ में उलझे हुए हैं?

आपके रिसर्च कीवर्ड से मेल खाने वाले सबसे नए और अलग सोच वाले पेपरों का रोज़ाना Digest पाएँ—तकनीकी सारांश के साथ, आपकी भाषा में।

Digest आज़माएँ →