← नवीनतम पेपर
💻 computer science

Co-identification of Vibration, Structural Looseness, and Surface Damage in Industrial Equipment Operation Videos

यह शोधपत्र एक संयुक्त विभेदन एल्गोरिदम प्रस्तुत करता है जो वीडियो स्विन ट्रांसफॉर्मर से स्थानिक-कालिक (spatiotemporal) विशेषताओं, RAFT ऑप्टिकल फ्लो से सूक्ष्म-विस्थापन विशेषताओं और बहु-कार्य उपस्थिति विश्लेषण को एकीकृत करके औद्योगिक उपकरणों के वीडियो में कंपन अवस्थाओं, संरचनात्मक ढीलेपन और सतह के दोषों की सहक्रियात्मक रूप से पहचान करता है, जिससे एकल-कार्य मॉडलों की तुलना में मिश्रित विसंगति परिदृश्यों में मिस डिटेक्शन (छूट जाने वाली पहचान) को महत्वपूर्ण रूप से कम किया जा सके।

मूल लेखक: Yukun Du, Zhihuang Chen, Quanle Liu, Yuang Dong

प्रकाशित 2026-07-21
📖 7 मिनट में पढ़ें🧠 गहराई से पढ़ें

मूल लेखक: Yukun Du, Zhihuang Chen, Quanle Liu, Yuang Dong

मूल पेपर CC BY 4.0 (https://creativecommons.org/licenses/by/4.0/) के तहत लाइसेंस किया गया है। नीचे दिए गए पेपर की यह व्याख्या AI से तैयार की गई है। इसे लेखकों ने न तो लिखा है, न इसका समर्थन किया है। तकनीकी सटीकता के लिए मूल पेपर देखें। पूरा डिस्क्लेमर पढ़ें

कल्पना कीजिए कि आप एक विशाल, शोरगुल वाले कारखाने के भीतर एक रहस्य सुलझाने की कोशिश कर रहे एक जासूस हैं। आमतौर पर, जब मशीनें खराब होती हैं, तो वे केवल बीच से टूट नहीं जातीं; वे धीरे-धीरे बीमार पड़ती हैं। पहले, वे शायद थोड़ा सा कांपना या थरथराना शुरू करती हैं। फिर, एक पेंच ढीला होकर हिलने लगता है। अंत में, धातु की त्वचा पर एक दरार दिखाई दे सकती है। पेचीदा बात यह है कि ये लक्षण अक्सर एक ही समय में होते हैं, और यदि आप केवल एक एकल स्नैपशॉट देखते हैं, तो उन्हें पहचानना बहुत कठिन होता है। यह बिल्कुल वैसा ही है जैसे किसी कार के इंजन के खराब होने का पता लगाने के लिए केवल हुड की एक फोटो देखना; आप यह मिस कर सकते हैं कि इंजन जोर-जोर से हिल रहा है या कोई बोल्ट धीरे-धीरे खुल रहा है। यहीं पर कंप्यूटर विजन काम आता है—एक ऐसा क्षेत्र जहाँ हम कंप्यूटर को कैमरों के माध्यम से दुनिया को "देखने" और समझने के लिए प्रशिक्षित करते हैं। लेकिन अधिकांश कंप्यूटर स्थिर चीजों (जैसे दीवार में दरार) या चलती हुई चीजों (जैसे सड़क से गुजरती कार) को पहचानने में माहिर होते हैं, लेकिन वे तब संघर्ष करते हैं जब कोई मशीन दोनों काम एक साथ कर रही हो: कंपन करना और साथ ही क्षतिग्रस्त होना।

यही वह पहेली है जिसे हल करने के लिए शोधकर्ताओं की एक टीम ने हाथ लगाया। वे एक सुपर-स्मार्ट सिस्टम बनाना चाहते थे जो औद्योगिक उपकरणों—जैसे पंप पाइप, वाल्व और धातु के खोल—के वीडियो देख सके और एक साथ तीन चीजों को पकड़ सके: अजीब कंपन, ढीले पुर्जे, और सतह की क्षति जैसे कि दरारें या जंग। केवल एक फोटो लेकर अनुमान लगाने के बजाय, उनका सिस्टम एक ऐसे जासूस की तरह काम करता है जो पूरी फिल्म देखता है, इस बात पर ध्यान देता है कि मशीन कैसे चलती है, वह कितना हिलती है, और उसकी सतह कैसी दिखती है, और यह सब एक साथ करता है।

जासूस का नया टूलकिट

शोधकर्ताओं ने एक ऐसा सिस्टम बनाया जो औद्योगिक निरीक्षण वीडियो को असंबद्ध चित्रों के बजाय एक जटिल कहानी की तरह मानता है। उन्होंने महसूस किया कि यदि आप केवल एक फ्रेम देखते हैं, तो आप सूक्ष्म सुरागों को मिस कर सकते हैं। उदाहरण के लिए, एक पाइप एक फोटो में ठीक दिख सकता है, लेकिन यदि आप एक 32-फ्रेम क्लिप (जो 25 फ्रेम प्रति सेकंड की दर से वीडियो का एक सेकंड से थोड़ा अधिक हिस्सा है) देखते हैं, तो आप देख सकते हैं कि वह थोड़ा कांप रहा है या एक ब्रैकेट धीरे-धीरे अपनी जगह से खिसक रहा है।

इन सुरागों को पकड़ने के लिए, टीम ने अपने कंप्यूटर के लिए एक "तीन-सिर वाला" मस्तिष्क बनाया:

  1. लय का निरीक्षक (वीडियो स्विन ट्रांसफॉर्मर - Video Swin Transformer): कल्पना कीजिए कि एक डांसर एक जटिल रूटीन सीखने की कोशिश कर रहा है। इस सिस्टम का यह हिस्सा मशीन की लय को समझने के लिए पूरे डांस सीक्वेंस (वीडियो फ्रेम) को देखता है। यह इस बात के पैटर्न को देखता है कि मशीन समय के साथ कैसे चलती है, यह पता लगाता है कि कंपन एक स्थिर गूंज है, एक आवधिक डगमगाहट है, या एक अराजक झटका है। यह एक गाने को सुनने जैसा है ताकि यह पता चल सके कि गायक सुर से बाहर है, बजाय इसके कि केवल एक फोटो में उसके चेहरे को देखा जाए।

  2. हिलने की गिनती करने वाला (RAFT ऑप्टिकल फ्लो - RAFT Optical Flow): यह सिस्टम का वह तरीका है जिससे वह उन सूक्ष्म गतिविधियों को मापता है जिन्हें मानवीय आँख शायद मिस कर दे। यह ट्रैक करता है कि हर एक पिक्सेल एक फ्रेम से दूसरे फ्रेम में कैसे चलता है। यदि एक बोल्ट को स्थिर रहना चाहिए लेकिन वह 0.5 मिलीमीटर खिसक रहा है, तो यह मॉड्यूल इसे पकड़ लेता है। यह सुनिश्चित करने के लिए कि यह केवल कैमरा हिलने के कारण नहीं है, सिस्टम बैकग्राउंड (जैसे दीवार या फर्श) को अनदेखा कर देता है और केवल मशीन के हिस्सों पर ध्यान केंद्रित करता है। यह सड़क ऊबड़-खाबड़ होने के बावजूद कार में होने वाले एक सूक्ष्म कंपन को महसूस करने जैसा है।

  3. क्षति का पता लगाने वाला (डिफेक्ट लोकलाइजेशन - Defect Localization): यह हिस्सा मशीन के "निशानों" को ढूंढता है: दरारें, जंग और क्षरण। इसे इन छोटी खामियों को खोजने के लिए प्रशिक्षित किया गया है, भले ही वे एक नाखून से भी छोटी (20 पिक्सेल से कम चौड़ी) हों।

सबको एक साथ लाना: "सह-पहचान" का जादू

असली जादू तब होता है जब ये तीनों सिर आपस में बात करते हैं। अतीत में, इंजीनियर कंपन की जांच के लिए एक उपकरण और दरार की जांच के लिए दूसरे उपकरण का उपयोग कर सकते थे। लेकिन शोधकर्ताओं ने पाया कि इससे अक्सर गलतियाँ होती थीं। यदि किसी मशीन में एक छोटी सी दरार और थोड़ा सा कंपन होता, तो एक सिंगल-टास्क सिस्टम सोच सकता था, "ओह, यह कंपन सामान्य शोर है," और दरार को मिस कर सकता था। या वह दरार को देख सकता था लेकिन सोच सकता था, "मशीन नहीं हिल रही है, इसलिए यह ठीक है," और इस तथ्य को मिस कर देता कि वह दरार संरचना को ढीला कर रही है।

नया सिस्टम सबको जोड़ देता है। यह पूछता है: "क्या मशीन कंपन कर रही है? क्या यह ढीली है? क्या इसमें कोई दरार है?" और फिर उनके बीच के संबंधों को खोजता है। उन्होंने पाया कि जब किसी मशीन में हल्का कंपन और शुरुआती दरार होती है, तो उसके टूटने का जोखिम केवल एक लक्षण को देखने की तुलना में बहुत अधिक होता है।

उन्होंने क्या पाया

टीम ने वास्तविक पंप स्टेशनों और कारखानों के वीडियो के एक विशाल पुस्तकालय पर अपने सिस्टम का परीक्षण किया—लगभग 36 घंटों का फुटेज, जो लगभग 72,000 प्रशिक्षण छवियों और 11,000 परीक्षण छवियों में बदल गया। उन्होंने सब कुछ लेबल किया: सामान्य संचालन, हल्का कंपन, आवधिक अनुनाद (periodic resonance), असामान्य कंपन, स्थिर संरचनाएं, संदिग्ध ढीलापन, दरारें और क्षरण।

परिणाम प्रभावशाली थे। सिस्टम ने कंपन की अवस्थाओं को 92.1% बार सही पहचाना। जब बात दरारों और जंग को खोजने की आई, तो यह 88.9% बार सही था (जिसे mAP@0.5 नामक एक मानक स्कोर द्वारा मापा गया है)। सबसे महत्वपूर्ण बात यह है कि जब उन्होंने अपने "ऑल-इन-वन" सिस्टम की तुलना पुराने "सिंगल-टास्क" सिस्टम से की, तो उन्होंने पाया कि नया सिस्टम खतरनाक स्थितियों को लगभग 16% कम मिस करता है।

उदाहरण के लिए, यदि किसी पाइप में एक छोटी सी दरार थी और वह थोड़ा हिल रहा था, तो पुराने सिस्टम अक्सर इसे मिस कर देते थे क्योंकि कंपन इतना "तेज़" नहीं था कि अलार्म बज सके, और दरार इतनी छोटी थी कि स्पष्ट रूप से दिखाई न दे। हालाँकि, नया सिस्टम बिंदुओं को जोड़ देता है: "अरे, यह छोटा सा कंपन और वह छोटी सी दरार मिलकर मतलब है कि यह हिस्सा ढीला हो रहा है!"

उन्होंने यह भविष्यवाणी करने के लिए कि किसी पुर्जे के अलग होने की कितनी संभावना है, एक "लूज़नेस स्कोर" (ढीलेपन का स्कोर) भी बनाया। यह स्कोर 79% बार (0.79 का सहसंबंध) मानव विशेषज्ञों की समीक्षाओं से मेल खाता था। उन्होंने पाया कि ढीलेपन के लिए सबसे महत्वपूर्ण सुराग केवल दरारें नहीं थीं, बल्कि सपोर्ट क्षेत्रों का पीक मूवमेंट और स्थानीय हिस्सों का एक-दूसरे से दूर खिसकना था।

यह क्यों महत्वपूर्ण है

यह अध्ययन बताता है कि हम मशीनों को टुकड़ों में नहीं देख सकते; हमें उन्हें एक पूर्ण, गतिशील प्रणाली के रूप में देखना होगा। गति की लय, पुर्जों के सूक्ष्म खिसकाव और क्षति के दृश्य निशानों को मिलाकर, हम समस्याओं को बहुत पहले पकड़ सकते हैं। हालांकि यह सिस्टम पूरी तरह से परफेक्ट नहीं है—यह अभी भी बहुत कम रोशनी, भारी प्रतिबिंबों, या जब हिस्से अन्य वस्तुओं के पीछे छिपे होते हैं, तो संघर्ष करता है—लेकिन यह एक महत्वपूर्ण प्रगति है। यह दिखाता है कि कंप्यूटर को मशीन के संचालन की केवल एक तस्वीर के बजाय उसके "कथानक" (story) को देखने के लिए सिखाकर, हम औद्योगिक उपकरणों को सुरक्षित रख सकते हैं और छोटी समस्याओं को बड़ी आपदाओं में बदलने से रोक सकते हैं।

अपने क्षेत्र के पेपरों की भीड़ में उलझे हुए हैं?

आपके रिसर्च कीवर्ड से मेल खाने वाले सबसे नए और अलग सोच वाले पेपरों का रोज़ाना Digest पाएँ—तकनीकी सारांश के साथ, आपकी भाषा में।

Digest आज़माएँ →