← नवीनतम पेपर
💻 computer science

Cracks in the Foundation: A Civil Infrastructure Dataset to Challenge Vision Foundation Models

यह शोध पत्र "क्रैक्स इन द फाउंडेशन" (CiF) को प्रस्तुत करता है, जो लगभग 150,000 उच्च-रिज़ॉल्यूशन वाली छवियों वाला एक बड़े पैमाने का सिविल इंफ्रास्ट्रक्चर डेटासेट है, ताकि यह प्रदर्शित किया जा सके कि वर्तमान विजन फाउंडेशन मॉडल और विशिष्ट सेगमेंटेशन एल्गोरिदम वास्तविक दुनिया के दोषों का पता लगाने में काफी संघर्ष करते हैं, जो निर्मित वातावरण (built environment) में इंटरनेट-प्रशिक्षित एआई को लागू करने की मौलिक सीमाओं को उजागर करता है।

मूल लेखक: Nicola Farronato, Niccolo Avogaro, Thomas Frick, Mattia Rigotti, Rizwan Ullah Khan, Michele Magno, Konrad Schindler, Cristiano Malossi, Florian Scheidegger

प्रकाशित 2026-05-19
📖 5 मिनट में पढ़ें🧠 गहराई से पढ़ें

मूल लेखक: Nicola Farronato, Niccolo Avogaro, Thomas Frick, Mattia Rigotti, Rizwan Ullah Khan, Michele Magno, Konrad Schindler, Cristiano Malossi, Florian Scheidegger

मूल पेपर CC BY 4.0 (http://creativecommons.org/licenses/by/4.0/) के तहत लाइसेंस किया गया है। नीचे दिए गए पेपर की यह व्याख्या AI से तैयार की गई है। इसे लेखकों ने न तो लिखा है, न इसका समर्थन किया है। तकनीकी सटीकता के लिए मूल पेपर देखें। पूरा डिस्क्लेमर पढ़ें

कल्पना कीजिए कि आपके पास एक सुपर-स्मार्ट रोबोट है जिसने हर किताब पढ़ ली है, इंटरनेट पर मौजूद हर फोटो देख ली है और बिल्लियों, कारों और सेबों को किसी भी इंसान से बेहतर पहचानना सीख लिया है। आप सोच सकते हैं, "बहुत बढ़िया! चलिए इस रोबोट को हमारे पुलों और सड़कों का निरीक्षण करने के लिए भेजते हैं ताकि दुर्घटनाओं से पहले दरारों का पता लगाया जा सके।"

लेकिन इस पेपर के अनुसार, वह रोबोट पूरी तरह से खो जाएगा। यह वैसा ही है जैसे किसी विश्व स्तरीय शतरंज के ग्रैंडमास्टर को कीचड़ भरी दीवार पर "डॉट कनेक्ट करने वाला खेल" खेलने के लिए भेजना; उन्हें शतरंज के नियम तो पता हैं, लेकिन उन्हें यह विशिष्ट खेल खेलना नहीं आता।

यहाँ इस पेपर की कहानी को सरल रूप में समझाया गया है:

1. समस्या: AI में एक "अंधा मोड़" (Blind Spot)

वर्षों से, हम इमारतों में दोषों (जैसे कंक्रीट में दरारें या स्टील पर जंग) को पहचानने के लिए AI बना रहे हैं। समस्या यह है कि हमारे पास AI को सिखाने के लिए पर्याप्त "अभ्यास परीक्षण" (डेटा) नहीं थे।

  • पुराना तरीका: हमने इंटरनेट की तस्वीरों का उपयोग करके AI को सिखाने की कोशिश की। लेकिन इंटरनेट की तस्वीरें आमतौर पर रंगीन, बनावट वाली और आसानी से पहचाने जाने वाली होती हैं। हालाँकि, कंक्रीट के पुल अक्सर धूसर (gray), सपाट और उबाऊ होते हैं। एक इंसान के लिए, एक दरार एक पतली, टेढ़ी-मेढ़ी रेखा की तरह होती है। इंटरनेट की तस्वीरों पर प्रशिक्षित एक AI के लिए, यह केवल एक और छाया या धब्बा जैसा दिखता है।
  • परिणाम: आज के सबसे उन्नत AI मॉडल भी, जिन्हें "यूनिवर्सल" होना चाहिए और जो सब कुछ समझते हैं, वास्तविक पुलों को देखते समय बुरी तरह विफल हो जाते हैं। वे एक हानिरहित छाया और एक खतरनाक दरार के बीच अंतर नहीं कर पाते।

2. समाधान: "क्रैक्स इन द फाउंडेशन" (CiF)

इसे ठीक करने के लिए, शोधकर्ताओं ने एक विशाल नया प्रशिक्षण पुस्तकालय बनाया जिसे CiF (Cracks in the Foundation) कहा गया।

  • पैमाना: उन्होंने वास्तविक सिविल इंजीनियरों के साथ मिलकर लगभग 1,50,000 हाई-रिज़ॉल्यूशन फोटो एकत्र करने में पाँच साल बिताए।
  • विस्तार: ये धुंधली तस्वीरें नहीं हैं। ये अविश्वसनीय रूप से स्पष्ट चित्र हैं, जैसे माइक्रोस्कोप के माध्यम से किसी पुल को देखना। उन्होंने सूक्ष्म बाल जैसी दरारों (जो केवल कुछ पिक्सेल चौड़ी थीं) और शैवाल (algae) या जंग के बड़े पैच को भी कैप्चर किया।
  • लेबलिंग: विशेषज्ञों द्वारा हाथ से हर एक दरार, जंग के धब्बे और शैवाल के पैच को सावधानीपूर्वक रेखांकित किया गया था। यह बिल्कुल वैसा ही है जैसे एक शिक्षक छात्र के टेस्ट पेपर पर हर गलती के चारों ओर एक घेरा बनाता है, ताकि छात्र अगली बार जान सके कि उसे क्या ढूँढना है।

3. प्रयोग: AI को परखना

शोधकर्ताओं ने आज के सबसे स्मार्ट AI मॉडलों (उन "फाउंडेशन मॉडल्स" सहित जिनके बारे में हर कोई उत्साहित है) को इन नई तस्वीरों में दोष खोजने के लिए कहा।

परिणाम चौंकाने वाले थे:

  • "इंटरनेट" वाला AI: वे मॉडल जो सामान्य इंटरनेट डेटा पर प्रशिक्षित थे (जैसे कि वे जो फोटो में बिल्ली की पहचान कर सकते हैं), दरारें ढूँढने के मामले में लगभग शून्य सही थे। वे समस्या के प्रति पूरी तरह अंधे थे।
  • "विशेषज्ञ" AI: यहाँ तक कि वे मॉडल जिन्हें विशेष रूप से दरारें देखने के लिए प्रशिक्षित किया गया था (नए डेटा का उपयोग करके), वे एक सीमा पर आकर रुक गए। वे बड़ी, स्पष्ट समस्याओं को तो ढूंढ सकते थे, लेकिन छोटी, खतरनाक समस्याओं के साथ संघर्ष करते थे। उनका प्रदर्शन उस स्तर पर आकर थम गया जो वास्तविक दुनिया के उपयोग के लिए सुरक्षित नहीं है।
  • "मैजिक प्रॉम्प्ट": कुछ नए AI मॉडल दावा करते हैं कि आप बस उन्हें कुछ खोजने के लिए "कह" सकते हैं (जैसे "दरार ढूँढो" कहना)। शोधकर्ताओं ने इसे आजमाया, और AI फिर भी विफल रहा। यह वैसा ही है जैसे किसी ऐसे व्यक्ति से किसी दरार को ढूँढने के लिए कहना जिसने कभी पुल देखा ही न हो; वे केवल अनुमान लगाते हैं।

4. बड़ा निष्कर्ष: "क्रैक्स इन द फाउंडेशन"

इस पेपर का शीर्षक एक दोहरा अर्थ रखता है।

  1. शाब्दिक रूप से: वे पुलों में भौतिक दरारें ढूंढ रहे हैं।
  2. लाक्षणिक रूप से: उन्होंने आर्टिफिशियल इंटेलिजेंस के वर्तमान आधार (foundation) में "दरारें" पाई हैं।

पेपर तर्क देता है कि हमारा वर्तमान AI एक कमजोर नींव पर बना है। यह मजेदार इंटरनेट कार्यों (जैसे कुत्तों की फोटो टैग करना) के लिए बहुत अच्छा काम करता है, लेकिन यह हमारे बुनियादी ढांचे को सुरक्षित रखने जैसे उच्च-जोखिम वाले कार्यों के लिए तैयार नहीं है। इसमें उस विशिष्ट "कॉमन सेंस" और दृश्य कौशल की कमी है जो धूसर, सपाट और जटिल सतहों को समझने के लिए आवश्यक है।

सारांश

वर्तमान AI को एक ऐसे छात्र के रूप में सोचें जिसने पूरी डिक्शनरी रट ली है लेकिन उसने कभी वास्तविक पुल नहीं देखा है। यह पेपर वास्तविक पुलों और दरारों का पहला विशाल, उच्च-गुणवत्ता वाला "पाठ्यपुस्तक" प्रदान करता है। जब उन्होंने इस नई पाठ्यपुस्तक के साथ छात्र का परीक्षण किया, तो छात्र परीक्षा में विफल रहा।

संदेश स्पष्ट है: हम अभी अपने वर्तमान "स्मार्ट" AI पर अपने पुलों को बचाने के लिए भरोसा नहीं कर सकते। हमें पूरी तरह से नए, विशिष्ट AI सिस्टम बनाने की आवश्यकता है, और यह नया डेटासेट उन्हें यह सिखाने की दिशा में पहला कदम है कि दुनिया को एक सिविल इंजीनियर की तरह कैसे देखा जाए।

अपने क्षेत्र के पेपरों की भीड़ में उलझे हुए हैं?

आपके रिसर्च कीवर्ड से मेल खाने वाले सबसे नए और अलग सोच वाले पेपरों का रोज़ाना Digest पाएँ—तकनीकी सारांश के साथ, आपकी भाषा में।

Digest आज़माएँ →