← नवीनतम पेपर
💻 computer science

From Pixels to Explanations: Interpretable Diabetic Retinopathy Grading with CNN-Transformer Ensembles, Visual Explainability and Vision-Language Models

यह अध्ययन सीएनएन (CNN) और ट्रांसफार्मर मॉडलों के संयोजन द्वारा व्याख्या योग्य डायबिटिक रेटिनोपैथी ग्रेडिंग के लिए एक कार्यप्रणाली प्रस्तावित करता है और विज़ुअल एट्रिब्यूशन मैप्स तथा विज़न-लैंग्वेज मॉडल द्वारा जनरेट किए गए टेक्स्टुअल तर्क के माध्यम से नैदानिक उपयोगिता को बढ़ाता है।

मूल लेखक: Pir Bakhsh Khokhar, Carmine Gravino, Fabio Palomba, Sule Yildirim Yayilgan, Sarang Shaikh

प्रकाशित 2026-04-28
📖 4 मिनट में पढ़ें☕ कॉफ़ी ब्रेक में पढ़ें

मूल लेखक: Pir Bakhsh Khokhar, Carmine Gravino, Fabio Palomba, Sule Yildirim Yayilgan, Sarang Shaikh

मूल पेपर CC BY 4.0 (http://creativecommons.org/licenses/by/4.0/) के तहत लाइसेंस किया गया है। नीचे दिए गए पेपर की यह व्याख्या AI से तैयार की गई है। इसे लेखकों ने न तो लिखा है, न इसका समर्थन किया है। तकनीकी सटीकता के लिए मूल पेपर देखें। पूरा डिस्क्लेमर पढ़ें

"स्मार्ट आई डॉक्टर" प्रोजेक्ट: AI को अपना काम समझाना सिखाना

कल्पना कीजिए कि आप आँखों के डॉक्टर के पास जाते हैं, और इंसान के बजाय एक कंप्यूटर आपकी आँख की फोटो देखता है और कहता है, "आपको स्टेज 3 डायबिटिक रेटिनोपैथी है।"

आप शायद पूछेंगे, "तुम्हें कैसे पता? मुझे दिखाओ!"

वर्तमान में अधिकांश AI एक "ब्लैक बॉक्स" की तरह हैं। वे उत्तर तो देते हैं, लेकिन अपने तर्क को समझा नहीं सकते। यह उस छात्र की तरह है जो गणित की परीक्षा में सही उत्तर तो लिख देता है लेकिन अपना काम (स्टेप्स) नहीं दिखा पाता—आपको बस उन पर भरोसा करना पड़ता है। यह पेपर एक ऐसा AI बनाने के बारे में है जो न केवल उत्तर दे, बल्कि सबूतों की ओर इशारा भी करे और सरल अंग्रेजी (साधारण भाषा) में एक रिपोर्ट भी लिखे।

उन्होंने इसे कैसे किया, यहाँ तीन सरल भागों में दिया गया है:


1. "दिमाग" का चयन (सबसे अच्छे विशेषज्ञों को खोजना)

शोधकर्ताओं ने यह देखने के लिए विभिन्न प्रकार के "AI दिमागों" (जिन्हें बैकबोन कहा जाता है) का परीक्षण किया कि आँख की बीमारी पकड़ने में कौन सा सबसे अच्छा है।

  • CNNs (विस्तार के जासूस): इन्हें आवर्धक लेंस (मैग्नीफाइंग ग्लास) वाले जासूसों की तरह समझें। वे बहुत छोटी, विशिष्ट चीजों को खोजने में माहिर हैं, जैसे कि एक छोटा सा बिंदु या आँख में एक छोटा सा रिसाव।
  • Transformers (बड़ी तस्वीर देखने वाले): इन्हें हेलीकॉप्टर से पूरे अपराध स्थल को देखने वाले जासूसों की तरह समझें। वे यह देखने में माहिर हैं कि आँख में सब कुछ एक-दूसरे से कैसे संबंधित है, लेकिन वे धूल के एक छोटे से कण को मिस कर सकते हैं।

परिणाम: "विस्तार के जासूस" (विशेष रूप से ResNet-50 और ConvNeXt जैसे मॉडल) बीमारी की गंभीरता को ग्रेड देने में चैंपियन रहे।

2. "कमेटी" रणनीति (एन्सेम्बलिंग)

कभी-कभी, सबसे अच्छा विशेषज्ञ भी गलती कर सकता है। इसे ठीक करने के लिए, शोधकर्ताओं ने एक "कमेटी दृष्टिकोण" का उपयोग किया। केवल एक AI पर निर्भर रहने के बजाय, उन्होंने कई AI को आपस में मिला दिया।

  • मतदान प्रणाली: उन्होंने "वेटेड सॉफ्ट वोटिंग" (Weighted Soft Voting) नामक एक विधि का उपयोग किया। कल्पना कीजिए कि एक कमेटी है जहाँ, यदि कोई विशेषज्ञ "माइल्ड" (हल्के) मामलों को पहचानने में जीनियस माना जाता है, तो कमेटी "माइल्ड" मामला आने पर उनकी बात अधिक सुनती है।

परिणाम: AI मॉडल्स को मिलकर "वोट" करने देने से, सटीकता बढ़ गई और गलतियाँ बहुत कम हो गईं।

3. "अनुवादक" (पिक्सेल को शब्दों में बदलना)

यह सबसे रोमांचक हिस्सा है। शोधकर्ता चाहते थे कि AI "पिक्सेल से स्पष्टीकरण" की ओर बढ़े। उन्होंने डॉक्टर से "बात" करने के लिए एक दो-चरणीय तरीका बनाया:

  • चरण A: हाइलाइटर (दृश्य साक्ष्य): Grad-CAM नामक टूल का उपयोग करके, AI एक हाइलाइटर की तरह काम करता है। यह फोटो के उन हिस्सों को रंग देता है जिन्हें उसने संदिग्ध पाया है। यह ऐसा है जैसे AI कह रहा हो, "मुझे लगता है कि यहाँ कोई समस्या है, और मैं ठीक यहाँ देख रहा हूँ।"
  • चरण B: मेडिकल स्क्राइब (मौखिक तर्क): उन्होंने एक विज़न-लैंग्वेज मॉडल (VLM) का उपयोग किया—मूल रूप से एक ऐसा दिमाग जो "देख" और "बोल" सकता है। AI फोटो और हाइलाइट किए गए स्थानों को देखता है, और फिर एक छोटा नोट लिखता है: "मैं छोटे लाल धब्बे (हेमरेज) और कुछ पीले रिसाव (एक्सयूडेट्स) देख पा रहा हूँ, जिसके कारण मैंने इसे 'मॉडरेट' (मध्यम) के रूप में लेबल किया है।"

परिणाम: उन्होंने पाया कि जबकि एक AI "फैंसी मेडिकल शब्दों" का उपयोग करने में बेहतर था, दूसरा "सरल और सीधा" होने में बेहतर था। दोनों ने कंप्यूटर के गणित और डॉक्टर की समझ के बीच की खाई को पाटने में मदद की।


निष्कर्ष (द बॉटम लाइन)

शोधकर्ताओं ने डॉक्टरों को बदलने के लिए रोबोट नहीं बनाया; उन्होंने एक सुपर-पावर्ड असिस्टेंट बनाया है।

यह असिस्टेंट हजारों आँखों को बहुत तेज़ी से स्कैन कर सकता है, डॉक्टर के चेक करने के लिए संदिग्ध क्षेत्रों को हाइलाइट कर सकता है, और समय बचाने के लिए एक ड्राफ्ट रिपोर्ट लिख सकता है। यह AI को एक "रहस्यमय बॉक्स" से एक "पारदर्शी साथी" में बदल रहा है जो अपना काम दिखा सकता है और डॉक्टर का विश्वास जीत सकता है।

अपने क्षेत्र के पेपरों की भीड़ में उलझे हुए हैं?

आपके रिसर्च कीवर्ड से मेल खाने वाले सबसे नए और अलग सोच वाले पेपरों का रोज़ाना Digest पाएँ—तकनीकी सारांश के साथ, आपकी भाषा में।

Digest आज़माएँ →