← नवीनतम पेपर
💻 computer science

GazeLT: Visual attention-guided long-tailed disease classification in chest radiographs

यह शोध पत्र GazeLT पेश करता है, जो एक नवीन ढांचा (framework) है जो चेस्ट रेडियोग्राफ में लॉन्ग-टेल्ड डिजीज क्लासिफिकेशन को महत्वपूर्ण रूप से सुधारने के लिए एक इंटीग्रेशन-डिसेग्रेशन मैकेनिज्म के माध्यम से रेडियोलॉजिस्ट्स के टेम्पोरल विजुअल अटेंशन पैटर्न का लाभ उठाता है, जो बड़े पैमाने के सार्वजनिक डेटासेट्स पर मौजूदा तरीकों से बेहतर प्रदर्शन करता है।

मूल लेखक: Moinak Bhattacharya, Gagandeep Singh, Shubham Jain, Prateek Prasanna

प्रकाशित 2026-07-28
📖 7 मिनट में पढ़ें🧠 गहराई से पढ़ें

मूल लेखक: Moinak Bhattacharya, Gagandeep Singh, Shubham Jain, Prateek Prasanna

मूल पेपर CC BY 4.0 (http://creativecommons.org/licenses/by/4.0/) के तहत लाइसेंस किया गया है। नीचे दिए गए पेपर की यह व्याख्या AI से तैयार की गई है। इसे लेखकों ने न तो लिखा है, न इसका समर्थन किया है। तकनीकी सटीकता के लिए मूल पेपर देखें। पूरा डिस्क्लेमर पढ़ें

जासूस की दृष्टि: कंप्यूटर को वह दिखाना सिखाना जो इंसान देखते हैं

कल्पना कीजिए कि आप एक रोबोट को एक विशाल, अस्त-व्यस्त कमरे में छिपी वस्तुओं को पहचानना सिखाने की कोशिश कर रहे हैं। यदि आप केवल रोबोट को कमरे की एक हज़ार तस्वीरें दिखा देते हैं, तो वह लाल रंग की कुर्सी या नीले रंग के कालीन जैसी बड़ी, स्पष्ट चीजों को खोजने में बहुत कुशल हो सकता है। लेकिन यदि आप उससे कपड़ों के ढेर के नीचे छिपे एक छोटे से, दुर्लभ चांदी के सिक्के को खोजने के लिए कहते हैं, तो वह संभवतः हर बार उसे पहचानने में चूक जाएगा। यह आर्टिफिशियल इंटेलिजेंस की दुनिया में एक क्लासिक समस्या है जिसे "लॉन्ग-टेल्ड क्लासिफिकेशन" (long-tailed classification) कहा जाता है। यह तब होता है जब कुछ चीजें बहुत आम होती हैं ("पूंछ का सिर") और अन्य अविश्वसनीय रूप से दुर्लभ होती हैं ("पूंछ"), जिससे कंप्यूटर के लिए दुर्लभ चीजों को सीखना कठिन हो जाता है।

इसे हल करने के लिए, वैज्ञानिक अक्सर इस बात पर गौर करते हैं कि मनुष्य समस्याओं को कैसे हल करते हैं। चिकित्सा के क्षेत्र में, रेडियोलॉजिस्ट नामक डॉक्टर एक्स-रे देखते हैं। लेकिन वे केवल एक तस्वीर को देखकर अनुमान नहीं लगाते; उनकी आँखें एक विशिष्ट नृत्य की तरह चलती हैं। वे पूरी छवि को स्कैन करते हैं, संदिग्ध स्थानों पर ज़ूम करते हैं, किनारों पर नज़र डालते हैं, और कभी-कभी उन चीजों को भी देखते हैं जो बाद में हानिरहित निकलती हैं। आँखों की इस गति को "गेज़" (gaze) कहा जाता है, जो इस बात का गुप्त नक्शा है कि एक विशेषज्ञ कैसे सोचता है। बड़ा सवाल यह है: क्या हम कंप्यूटर को इस "आई-डान्स" (eye-dance) की नकल करना सिखा सकते हैं ताकि वह केवल स्पष्ट चीजों को ही न देखे, बल्कि उन दुर्लभ, पेचीदा बीमारियों का भी शिकार करे जिन्हें वह आमतौर पर मिस कर देता है?

पेपर का बड़ा विचार: GazeLT

यह पेपर एक नई विधि पेश करता है जिसे GazeLT (Gaze-guided Long-Tailed classification) कहा जाता है। शोधकर्ताओं ने चेस्ट एक्स-रे के साथ काम करते हुए यह देखना चाहा कि क्या वे एक रेडियोलॉजिस्ट की आँखों की गतिविधियों का उपयोग करके AI को एक बेहतर जासूस बना सकते हैं। एक्स-रे दिखाने के बजाय, उन्होंने AI को एक्स-रे साथ ही एक वीडियो दिखाया कि एक वास्तविक डॉक्टर ने निदान करते समय अपनी आँखें कहाँ घुमाई थीं।

उनके विचार का मूल आधार यह है कि मेडिकल इमेज को देखना कोई स्थिर, जमा हुआ क्षण नहीं है; यह एक ऐसी प्रक्रिया है जो समय के साथ चलती है। लेखकों ने महसूस किया कि पिछले AI मॉडल डॉक्टर के ध्यान को एक एकल, धुंधले स्नैपशॉट के रूप में देखते थे। लेकिन वास्तव में, एक डॉक्टर की दृष्टि बदलती रहती है। शुरुआत में, वे पूरे सीने का एक त्वरित, व्यापक चक्कर लगा सकते हैं (बड़ी, स्पष्ट समस्याओं को देखने के लिए)। बाद में, वे सूक्ष्म, विशिष्ट विवरणों पर ज़ूम कर सकते हैं (दुर्लभ, सूक्ष्म मुद्दों को खोजने के लिए)।

इसे पकड़ने के लिए, टीम ने डॉक्टर के देखने के समय को चार समान विंडोज़ (windows) में विभाजित किया। उन्होंने दो विशेष "अटेंशन मोड" बनाए:

  1. इंटीग्रेशन (Integration): यह डॉक्टर के किसी विशिष्ट, विस्तृत सुराग पर ज़ूम करने और बिंदुओं को जोड़ने जैसा है।
  2. डिइंटीग्रेशन (Disintegration): यह डॉक्टर के पूरी तस्वीर का एक व्यापक, वैश्विक दृश्य प्राप्त करने के लिए पीछे हटने जैसा है।

उन्होंने AI को सिखाने के लिए एक "टीचर-स्टूडेंट" (Teacher-Student) सिस्टम बनाया। टीचर एक स्मार्ट AI है जो रेडियोलॉजिस्ट के आई-गेज़ डेटा से सीधे सीखता है। यह उन चार टाइम विंडोज़ के माध्यम से एक्स-रे को देखने का अभ्यास करता है, बारीक विवरणों को एकीकृत करना और व्यापक दृश्य में विलीन होना सीखता है। एक बार जब टीचर प्रशिक्षित हो जाता है, तो उसे आई-गेज़ डेटा की आवश्यकता नहीं होती। फिर यह स्टूडेंट (एक सरल, तेज़ AI) को एक्स-रे को देखना सिखाता है। स्टूडेंट टीचर के फोकस की नकल करना सीखता है, लेकिन इसे काम करने के लिए केवल एक्स-रे इमेज की आवश्यकता होती है। इसका मतलब है कि अंतिम AI का उपयोग अस्पताल में बिना वास्तविक समय में डॉक्टर की आँखों को ट्रैक किए किया जा सकता है।

उन्हें क्या मिला

टीम ने दो विशाल चेस्ट एक्स-रे संग्रहों पर GazeLT का परीक्षण किया: NIH-CXR-LT डेटासेट (89,237 छवियों के साथ) और MIMIC-CXR-LT डेटासेट (111,981 छवियों के साथ)। ये डेटासेट "लॉन्ग-टेल्ड" हैं, जिसका अर्थ है कि इनमें कई सामान्य बीमारियाँ (जैसे निमोनिया) और बहुत कम दुर्लभ बीमारियाँ (जैसे न्यूमोमीडियास्टिनम) हैं।

परिणाम काफी उत्साहजनक थे। GazeLT ने न केवल अच्छा प्रदर्शन किया; इसने मौजूदा सर्वोत्तम तरीकों को महत्वपूर्ण रूप से पीछे छोड़ दिया।

  • औसतन, GazeLT ने शीर्ष "लॉन्ग-टेल्ड लॉस" विधियों को 4.1% से पछाड़ दिया।
  • इसने पिछले "विजुअल अटेंशन" बेसलाइन्स को भारी 21.7% के अंतर से कुचल दिया।

सबसे महत्वपूर्ण बात यह है कि AI दुर्लभ बीमारियों को खोजने में बहुत बेहतर हो गया। NIH डेटासेट पर, इसने दुर्लभ "टेल" क्लासेस के पता लगाने में 10.9% का सुधार किया, और MIMIC डेटासेट पर, 12.2% का सुधार किया। हालांकि यह सबसे आम बीमारियों को पहचानने में थोड़ा कम सटीक था (लगभग 5% की गिरावट), लेकिन दुर्लभ, खतरनाक स्थितियों को खोजने में हुई यह बढ़त एक बड़ी जीत मानी गई, क्योंकि चिकित्सा में उन्हें मिस करना अक्सर सबसे गंभीर त्रुटि होती है।

उन्होंने इसे कैसे साबित किया

शोधकर्ताओं ने केवल यह अनुमान नहीं लगाया कि यह काम करेगा; उन्होंने इसे साबित करने के लिए प्रयोगों की एक श्रृंखला चलाई। उन्होंने Gaze-LT की तुलना मानक AI मॉडल से की जो दुर्लभ वर्गों को संभालने के लिए बुनियादी गणित का उपयोग करते हैं, साथ ही अन्य मॉडलों से भी जो आई-गेज़ डेटा का उपयोग करने की कोशिश करते थे लेकिन टाइम विंडोज़ में विभाजित नहीं होते थे।

उन्होंने "एब्लेशन स्टडीज" (ablation studies) भी चलाईं, जो एक फैंसी तरीका है यह कहने का कि उन्होंने अपने मशीन के हिस्सों को यह देखने के लिए अलग किया कि कौन सा हिस्सा मुख्य काम कर रहा है। उन्होंने पाया कि:

  • केवल "इंटीग्रेशन" भाग या केवल "डिइंटीग्रेशन" भाग का उपयोग करना दोनों को एक साथ उपयोग करने जितना प्रभावी नहीं था।
  • समय को 4 विंडोज़ में विभाजित करना "स्वीट स्पॉट" (सही संतुलन) था। इसे 2 विंडोज़ में विभाजित करने से पर्याप्त विवरण नहीं मिल पा रहा था, और 8 विंडोज़ में विभाजित करने से बहुत अधिक भ्रम और अतिरेक (redundancy) पैदा हो रहा था। 4-विंडो सेटअप ने बड़े चित्र और छोटे विवरणों को देखने की आवश्यकता के बीच सही संतुलन बनाया।

कमी और भविष्य

पेपर एक सीमा के बारे में बहुत स्पष्ट है: "टीचर" AI को प्रशिक्षित करने के लिए, आपको वास्तव में एक रेडियोलॉजिस्ट की आवश्यकता है जो आई-ट्रैकिंग चश्मा पहनकर एक्स-रे देखे। वास्तविक दुनिया में इसे करना कठिन है क्योंकि इसके लिए विशेष हार्डवेयर और इच्छुक डॉक्टरों की आवश्यकता होती है। हालांकि, लेखक इस बात पर जोर देते हैं कि एक बार जब टीचर प्रशिक्षित हो जाता है और उसने स्टूडेंट को सिखा दिया होता है, तो स्टूडेंट बिना किसी आई-ट्रैकिंग डेटा के बिल्कुल ठीक से काम कर सकता है। आप बस एक एक्स-रे फीड करते हैं, और वह निदान दे देता है।

शोधकर्ता सुझाव देते हैं कि इस दृष्टिकोण का उपयोग अंततः अन्य प्रकार के मेडिकल इमेजेस, जैसे CT स्कैन या MRI के लिए भी किया जा सकता है, न कि केवल चेस्ट एक्स-रे के लिए। उन्होंने यह भी उल्लेख किया कि उन्होंने डॉक्टरों के निदान में उनके आत्मविश्वास को शामिल नहीं किया है, जो एक ऐसी चीज़ है जिसे वे भविष्य में एक्सप्लोर कर सकते हैं।

संक्षेप में, GazeLT यह सुझाव देता है कि यदि हम AI को उस तरह से "देखना" सिखाते हैं जैसे मानव विशेषज्ञ देखते हैं—व्यापक रूप से स्कैन करने और फिर गहराई से ज़ूम करने के साथ—तो हम स्मार्ट मेडिकल टूल्स बना सकते हैं जो शोर के बीच छिपे दुर्लभ, जीवन रक्षक संकेतों को मिस नहीं करते हैं।

अपने क्षेत्र के पेपरों की भीड़ में उलझे हुए हैं?

आपके रिसर्च कीवर्ड से मेल खाने वाले सबसे नए और अलग सोच वाले पेपरों का रोज़ाना Digest पाएँ—तकनीकी सारांश के साथ, आपकी भाषा में।

Digest आज़माएँ →