← नवीनतम पेपर
🤖 machine learning

Adversarial Vulnerabilities in Neural Operator Digital Twins: Gradient-Free Attacks on Nuclear Thermal-Hydraulic Surrogates

यह अध्ययन प्रकट करता है कि न्यूरल ऑपरेटर डिजिटल ट्विन्स परमाणु तापीय-द्रवगतिकी (थर्मल-हाइड्रोलिक) प्रणालियों के लिए 1% से भी कम इनपुट का उपयोग करके होने वाले अदृश्य, ग्रेडिएंट-मुक्त प्रतिकूल हमलों (एडवर्सरियल अटैक्स) के प्रति अत्यंत संवेदनशील हैं, जो विनाशकारी भविष्यवाणी त्रुटियां उत्पन्न कर सकते हैं और तैनाती से पहले मानक सत्यापन से परे मजबूती की गारंटी की आवश्यकता पर प्रकाश डालते हैं।

मूल लेखक: Samrendra Roy, Kazuma Kobayashi, Souvik Chakraborty, Rizwan-uddin, Syed Bahauddin Alam

प्रकाशित 2026-03-25
📖 7 मिनट में पढ़ें🧠 गहराई से पढ़ें

मूल लेखक: Samrendra Roy, Kazuma Kobayashi, Souvik Chakraborty, Rizwan-uddin, Syed Bahauddin Alam

मूल पेपर CC BY 4.0 (http://creativecommons.org/licenses/by/4.0/) के तहत लाइसेंस किया गया है। नीचे दिए गए पेपर की यह व्याख्या AI से तैयार की गई है। इसे लेखकों ने न तो लिखा है, न इसका समर्थन किया है। तकनीकी सटीकता के लिए मूल पेपर देखें। पूरा डिस्क्लेमर पढ़ें

मुख्य चित्र: "डिजिटल ट्विन" का जाल

कल्पना कीजिए कि आपके पास एक परमाणु ऊर्जा संयंत्र (न्यूक्लियर पावर प्लांट) का डिजिटल ट्विन (Digital Twin) है। यह एक सुपर-स्मार्ट कंप्यूटर प्रोग्राम है जो एक भविष्य बताने वाले क्रिस्टल बॉल की तरह काम करता है। वास्तविक भौतिक सिमुलेशन के लिए घंटों इंतजार करने के बजाय, यह जुड़वां (twin) कुछ सेंसर रीडिंग देखकर तुरंत बता सकता है कि रिएक्टर के अंदर क्या हो रहा है (तापमान, दबाव, प्रवाह)।

वैज्ञानिक इसलिए उत्साहित हैं क्योंकि ये "न्यूरल ऑपरेटर्स" अविश्वसनीय रूप से तेज़ और सटीक हैं। वे प्रतिभाशाली शेफ (Genius Chefs) की तरह हैं जो सूप की एक बूंद चखकर तुरंत बता सकते हैं कि पूरे बर्तन का स्वाद कैसा है, नमक के आखिरी कण तक।

समस्या: इस शोध पत्र ने खोजा है कि इन प्रतिभाशाली शेफों की एक भयानक कमजोरी (blind spot) है। वे इतने संवेदनशील हैं कि यदि आप उनके कान में एक बहुत छोटा, लगभग अदृश्य झूठ फुसफुसाते हैं, तो वे चिल्लाकर कह सकते हैं कि रिएक्टर सुरक्षित है, जबकि वास्तव में वह पिघलने वाला होता है।

हमला: "फुसफुसाहट" बनाम "चीख"

शोधकर्ताओं ने इन AI मॉडलों के चार अलग-अलग प्रकारों का परीक्षण किया। उन्होंने उन्हें एडवर्सरियल अटैक्स (Adversarial Attacks) का उपयोग करके चकमा देने की कोशिश की।

  • उपमा: कल्पना कीजिए कि आप एक सुरक्षा गार्ड को बेवकूफ बनाने की कोशिश कर रहे हैं।
    • पुराना तरीका (ग्रेडिएंट अटैक): आप गार्ड को ज़ोर से धक्का देते हैं, लेकिन वह आपको आते हुए देख लेता है और आपको रोक देता है। इसके लिए आपको उसके रहस्यों (कि उसका दिमाग कैसे काम करता है) को जानने की आवश्यकता होती है।
    • नया तरीका (इस पेपर का तरीका): आप एक ग्रेडिएंट-फ्री (gradient-free) विधि का उपयोग करते हैं। आपको उसके रहस्यों को जानने की ज़रूरत नहीं है। आप बस अलग-अलग छोटी-छोटी कोशिशें (nudges) करते हैं जब तक कि आपको वह विशिष्ट स्थान न मिल जाए जहाँ एक छोटा सा धक्का उसे गिरा सकता है।

चौंकाने वाला परिणाम:
शोधकर्ताओं ने पाया कि वे AI द्वारा देखे जा रहे डेटा के 1% से भी कम हिस्से को बदल सकते हैं (जैसे 100 में से केवल एक या दो सेंसर की रीडिंग बदलना)।

  • इनपुट (Input): एक बहुत छोटा बदलाव। नई सेंसर रीडिंग अभी भी सामान्य और सुरक्षित सीमाओं के भीतर है। यह किसी भी इंसान या मानक अलार्म सिस्टम के लिए पूरी तरह से असली दिखती है।
  • आउटपुट (Output): AI का अनुमान पूरी तरह से पागल हो जाता है। त्रुटि (error) एक मामूली 1.5% (बिल्कुल ठीक) से बढ़कर 60% (विनाशकारी विफलता) हो जाती है।
  • छलावा (Stealth): AI का नया, गलत अनुमान अभी भी मानक सुरक्षा जांच के लिए "सामान्य" दिखता है। यह Z-score टेस्ट (विसंगतियों के लिए एक सांख्यिकीय जांच) को पास कर लेता है। यह भेड़ के भेष में भेड़िये जैसा है जिसे चरवाहे का कुत्ता भी सूंघ नहीं पाता।

चार मॉडल: चार वास्तुकारों की कहानी

पेपर ने इन AI मॉडलों के चार अलग-अलग "आर्किटेक्चर" (डिज़ाइन) का परीक्षण किया। वे इन हमलों के प्रति बहुत अलग तरह से प्रतिक्रिया करते हैं, जिसे लेखक "सेंसिटिविटी मैप" (Sensitivity Map) के माध्यम से समझाते हैं।

सोचिए कि AI का मस्तिष्क 102 दरवाजों (इनपुट) वाला एक भवन है। शोधकर्ता जानना चाहते थे: कौन सा दरवाजा, अगर आप उसे धकेलते हैं, तो पूरे भवन को हिला देगा?

उन्होंने एक अवधारणा पेश की जिसे इफेक्टिव परटर्बेशन डायमेंशन (deffd_{eff}) कहा जाता है। इसे एक "फोकस स्कोर" के रूप में सोचें।

  • कम फोकस स्कोर (deff1d_{eff} \approx 1): भवन एक अकेले स्तंभ (pillar) पर टिका है। यदि आप उस एक स्तंभ को धकेलते हैं, तो पूरी इमारत गिर जाती है।
  • उच्च फोकस स्कोर (deff30d_{eff} \approx 30): भवन 30 स्तंभों पर टिका है। इसे गिराने के लिए आपको 30 के 30 स्तंभों को एक साथ धकेलना होगा।

यहाँ बताया गया है कि चारों मॉडलों का प्रदर्शन कैसा रहा:

1. POD-DeepONet: "नाजुक लेकिन सीमित" मॉडल

  • मिजाज: यह मॉडल एक ही मजबूत स्तंभ पर बने घर जैसा है।
  • हमला: उस एक स्तंभ को खोजना बेहद आसान है। शोधकर्ताओं को वह तुरंत मिल गया।
  • ट्विस्ट: भले ही उन्होंने वह स्तंभ ढूंढ लिया, लेकिन घर पूरी तरह से ढहा नहीं। क्यों? क्योंकि इस मॉडल के पास एक "सुरक्षा जाल" (Low-Rank Projection) है। यह सभी भविष्यवाणियों को एक सुचारू, सीमित सीमा के भीतर रहने के लिए मजबूर करता है। यह एक ट्रैम्पोलिन की तरह है: आप ऊँचा कूद सकते हैं, लेकिन आप अंतरिक्ष में नहीं उड़ सकते।
  • परिणाम: हमला करना आसान था, लेकिन नुकसान सीमित था।

2. S-DeepONet: "परफेक्ट स्टॉर्म" (सबसे खतरनाक)

  • मिजाज: यह मॉडल एक ऐसे घर जैसा है जिसमें 4 या 5 मुख्य स्तंभ हैं, और वे सभी कांच के बने हैं।
  • हमला: शोधकर्ताओं को ये 4-5 स्तंभ आसानी से मिल गए। क्योंकि स्तंभ कांच के हैं (उच्च संवेदनशीलता), उन्हें धकेलने से भारी नुकसान होता है।
  • परिणाम: यह सबसे बुरा परिदृश्य (worst-case scenario) था। 3 सेंसरों पर एक छोटे से धक्के ने AI को यह अनुमान लगाने पर मजबूर कर दिया कि रिएक्टर पिघल रहा है, जबकि सब कुछ ठीक था। इसमें "ढूंढने में आसान" और "तोड़ने में आसान" का सही मिश्रण था।

3. MIMONet और NOMAD: "किला" (Fortress)

  • मिजाज: ये मॉडल 30 मजबूत स्तंभों वाले किले की तरह हैं जो चारों ओर फैले हुए हैं।
  • हमला: इसे तोड़ने के लिए हमलावर को 30 अलग-अलग सेंसरों को एक ही समय में धकेलना होगा।
  • परिणाम: इसे तोड़ना बहुत कठिन है। शोधकर्ताओं को उसी स्तर की अराजकता पैदा करने के लिए बहुत अधिक मेहनत करनी पड़ी (अधिक सेंसर बदलने पड़े)।

खतरे का "दो-कारक" नियम

पेपर एक सरल नियम के साथ समाप्त होता है कि एक मॉडल कितना खतरनाक है। यह केवल इस बारे में नहीं है कि वह कितना संवेदनशील है; यह दो चीजों के गुणनफल के बारे में है:

  1. कंसंट्रेशन (Concentration): मॉडल को तोड़ने के लिए कितने इनपुट की आवश्यकता है? (जितने कम, उतना बुरा)।
  2. एम्प्लीफिकेशन (Amplification): जब आप इसे तोड़ते हैं, तो मॉडल कितना बड़ा विस्फोट करता है? (जितना अधिक, उतना बुरा)।

S-DeepONet सबसे खतरनाक था क्योंकि इसमें कम कंसंट्रेशन (कमजोर कड़ी ढूंढना आसान) और उच्च एम्प्लीफिकेशन (कमजोर कड़ी के कारण बड़ा विस्फोट होना) दोनों थे।

वास्तविक दुनिया के लिए इसका महत्व

हम एक ऐसे भविष्य की ओर बढ़ रहे हैं जहाँ AI परमाणु संयंत्रों, पावर ग्रिडों और मौसम के पूर्वानुमान को नियंत्रित करेगा। हम वर्तमान में इन मॉडलों पर भरोसा करते हैं क्योंकि वे कागज़ पर "सटीक" हैं।

पेपर की चेतावनी:

  • सटीकता (Accuracy) का मतलब सुरक्षा (Safety) नहीं है: एक मॉडल सामान्य दिनों में 99% सटीक हो सकता है, लेकिन उस दिन 0% विश्वसनीय हो सकता है जब कोई इसे धोखा देने की कोशिश करता है।
  • अदृश्य खतरा: क्योंकि ये हमले इतने छोटे (डेटा के 1% से कम को बदलना) हैं और भौतिक सीमाओं के भीतर रहते हैं, वर्तमान सुरक्षा अलार्म इन्हें नहीं देख पाएंगे। AI ऑपरेटर को आत्मविश्वास से बताएगा, "सब कुछ ठीक है," जबकि वास्तव में रिएक्टर खतरे में होगा।
  • समाधान: हमें केवल तेज़ मॉडल बनाने की ज़रूरत नहीं है; हमें मजबूत (robust) मॉडल बनाने की ज़रूरत है। हमें उन्हें ऐसे डिज़ाइन करने की आवश्यकता है ताकि उनमें वे "कांच के स्तंभ" न हों। हमें वास्तविक दुनिया के बुनियादी ढांचे को चलाने से पहले उन्हें इन "फुसफुसाहट" वाले हमलों के साथ टेस्ट करना होगा।

सारांश उपमा

कल्पना कीजिए कि एक डिजिटल ट्विन एक मौसम भविष्यवक्ता (weather forecaster) है।

  • सामान्य दिन: भविष्यवक्ता एकदम सटीक है।
  • हमला: एक हैकर एक दूर के गाँव में एक सेंसर के तापमान रीडिंग को बहुत मामूली मात्रा (0.1 डिग्री) से बदल देता है।
  • परिणाम: भविष्यवक्ता, अपने तर्क में एक छिपे हुए दोष के कारण, अचानक शहर में कैटेगरी 5 के तूफान की भविष्यवाणी कर देता है, भले ही आसमान साफ हो।
  • खतरा: शहर में निकासी (evacuation) शुरू हो जाती है, जिससे भगदड़ और आर्थिक नुकसान होता है, और यह सब एक सेंसर में एक छोटे से, अदृश्य झूठ के कारण होता है।

यह पेपर साबित करता है कि हमारे वर्तमान "प्रतिभाशाली" AI मौसम भविष्यवक्ता (और परमाणु ट्विन) बिल्कुल इसी तरह के धोखे के प्रति संवेदनशील हैं, और हमें उन्हें काम संभालने देने से पहले उनके तर्क को ठीक करने की आवश्यकता है।

अपने क्षेत्र के पेपरों की भीड़ में उलझे हुए हैं?

आपके रिसर्च कीवर्ड से मेल खाने वाले सबसे नए और अलग सोच वाले पेपरों का रोज़ाना Digest पाएँ—तकनीकी सारांश के साथ, आपकी भाषा में।

Digest आज़माएँ →