← नवीनतम पेपर
💻 computer science

Synergistic Perception-Reasoning Governance: Grounding Medical MLLMs with Verifiable Anatomical Evidence

यह शोध पत्र सिनर्जिस्टिक परसेप्शन-रीजनिंग गवर्नेंस (SPRG) का प्रस्ताव करता है, जो एक ट्रेनिंग-फ्री फ्रेमवर्क है जो ROI-गाइडेड विजुअल मॉड्यूलेशन और कोऑर्डिनेट-टू-टोकन सिमेंटिक एंकरिंग के माध्यम से सत्यापन योग्य शारीरिक साक्ष्य इंजेक्ट करके मेडिकल मल्टीमॉडल लार्ज लैंग्वेज मॉडल्स में मतिभ्रम (hallucinations) को कम करता है, जिससे विविध बेंचमार्क पर सटीकता में महत्वपूर्ण सुधार और मतिभ्रम में कमी आती है।

मूल लेखक: Rui Hao, Qiankun Li, Junyuan Mao, Linghao Meng, Dirui Xie, Dayu Tan, Zhigang Zeng

प्रकाशित 2026-07-02
📖 5 मिनट में पढ़ें🧠 गहराई से पढ़ें

मूल लेखक: Rui Hao, Qiankun Li, Junyuan Mao, Linghao Meng, Dirui Xie, Dayu Tan, Zhigang Zeng

मूल पेपर CC BY 4.0 (http://creativecommons.org/licenses/by/4.0/) के तहत लाइसेंस किया गया है। नीचे दिए गए पेपर की यह व्याख्या AI से तैयार की गई है। इसे लेखकों ने न तो लिखा है, न इसका समर्थन किया है। तकनीकी सटीकता के लिए मूल पेपर देखें। पूरा डिस्क्लेमर पढ़ें

कल्पना कीजिए कि एक प्रतिभाशाली लेकिन कभी-कभी अति-आत्मविश्वासी मेडिकल छात्र है जो बातें करने में तो माहिर है, लेकिन एक्स-रे देखते समय कभी-कभी मनगढ़ंत बातें भी बना देता है। वह छात्र यह कह सकता है, "मुझे यहाँ एक टूटी हुई हड्डी दिख रही है," भले ही हड्डी बिल्कुल ठीक दिख रही हो, सिर्फ इसलिए क्योंकि वह स्मार्ट दिखने की कोशिश कर रहा है या इसलिए क्योंकि उसका ध्यान इमेज के बैकग्राउंड के शोर (noise) की ओर भटक गया है। आर्टिफिशियल इंटेलिजेंस की दुनिया में, इसे हैलुसिनेशन (hallucination) कहा जाता है।

यह पेपर एक नया "सुपरवाइजर" सिस्टम पेश करता है जिसे इन मेडिकल एआई मॉडल्स को मनगढ़ंत बातें बनाने से रोकने के लिए डिज़ाइन किया गया है, और इसके लिए उन्हें फिर से प्रशिक्षित (retrain) करने या उन्हें नए सबक सिखाने की आवश्यकता नहीं है। यह कैसे काम करता है, इसे सरल अवधारणाओं में यहाँ समझाया गया है:

समस्या: "आत्मविश्वासी लेकिन गलत" एआई

वर्तमान मेडिकल एआई मॉडल (जिन्हें मल्टीमॉडल लार्ज लैंग्वेज मॉडल्स कहा जाता है) उस छात्र की तरह हैं। वे एक एक्स-रे देख सकते हैं और उसकी रिपोर्ट लिख सकते हैं, लेकिन कभी-कभी वे आत्मविश्वास के साथ ऐसी बीमारियों या शरीर के अंगों का वर्णन करते हैं जो वास्तव में वहाँ मौजूद ही नहीं हैं। इन्हें ठीक करने के मौजूदा समाधान अक्सर एक पूरी नई टीम के शिक्षकों को काम पर रखने (रिट्रेनिंग) या तथ्यों को जांचने के लिए एक विशाल पुस्तकालय बनाने (एक्सटर्नल डेटाबेस) की तरह होते हैं, जो महंगा और जटिल है।

समाधान: "एविडेंस इंजेक्शन" फ्रेमवर्क (Evidence Injection Framework)

लेखक एक चतुर, ट्रेनिंग-फ्री (training-free) विधि का प्रस्ताव देते हैं। इसे ऐसे समझें जैसे आप एआई को सवाल का जवाब देने से ठीक पहले "सत्य के चश्मे" (truth goggles) और एक "तथ्य-जांच नोटबुक" (fact-checking notepad) दे रहे हों। वे इसे सिनर्जिस्टिक परसेप्शन-रीजनिंग गवर्नेंस (Synergistic Perception-Reasoning Governance) कहते हैं।

यहाँ वे तीन मुख्य तरकीबें दी गई हैं जिनका वे उपयोग करते हैं:

1. "स्पॉटलाइट" (विज़न-साइड रीकैलिब्रेशन)

कल्पना कीजिए कि एआई एक एक्स-रे देख रहा है, लेकिन उसकी दृष्टि थोड़ी धुंधली है, और उसका ध्यान फोटो के किनारों या बैकग्राउंड की ओर भटक रहा है।

  • वे क्या करते हैं: वे MedSAM (एक स्मार्ट सेगमेंटेशन टूल) नामक एक टूल का उपयोग करते हैं जो डॉक्टर द्वारा पूछे गए विशिष्ट शरीर के अंग (जैसे हृदय का "लेफ्ट एट्रियम") के चारों ओर स्वचालित रूप से एक बॉक्स खींचता है।
  • उपमा: यह उस विशिष्ट शरीर के अंग पर एक चमकदार स्पॉटलाइट डालने और कमरे के बाकी हिस्सों (बैकग्राउंड शोर) को अंधेरे में बदलने जैसा है।
  • परिणाम: एआई को मजबूर किया जाता है कि वह केवल बॉक्स के अंदर के साक्ष्य पर ही ध्यान दे। यदि बॉक्स "हृदय" का है, तो एआई "टूटी हुई टांग" का भ्रम नहीं पाल सकता क्योंकि स्पॉटलाइट वहाँ नहीं है।

2. "फैक्ट कार्ड" (टेक्स्ट-साइड एविडेंस इंजेक्शन)

कभी-कभी, केवल रोशनी डालना ही काफी नहीं होता; एआई को तथ्यों की याद दिलाने की भी आवश्यकता होती है।

  • वे क्या करते हैं: वे उस बॉक्स के निर्देशांक (coordinates) लेते हैं (जैसे, "यह बॉक्स स्थिति X, आकार Y पर है, और यह इमेज का 5% हिस्सा कवर करता है") और इस वाक्य को एक सरल टेक्स्ट वाक्य में बदल देते हैं। वे इस वाक्य को एआई के प्रश्न में ही शामिल कर देते हैं।
  • उपमा: यह छात्र को एक चीट शीट देने जैसा है जो कहती है, "याद रखें, हृदय चित्र में ठीक यहीं स्थित है।"
  • परिणाम: एआई का तर्क इस भौतिक साक्ष्य से "एंकर" (जुड़ा हुआ) हो जाता है। वह कल्पना की दुनिया में नहीं भटक सकता क्योंकि टेक्स्ट स्पष्ट रूप से उसे बताता है कि साक्ष्य कहाँ है।

3. "स्मार्ट ट्रैफिक पुलिस" (टास्क-अवेयर डायनेमिक राउटर)

हर मेडिकल सवाल एक जैसा नहीं होता। कुछ पूछते हैं "हृदय कहाँ है?" (जिसके लिए स्पॉटलाइट चाहिए), कुछ पूछते हैं "क्या वहां तरल पदार्थ है?" (जिसके लिए फैक्ट कार्ड चाहिए), और कुछ जटिल होते हैं जिनमें दोनों की आवश्यकता होती है।

  • वे क्या करते हैं: उन्होंने एक छोटा, तेज़ "ट्रैफिक पुलिस" बनाया है जो पहले सवाल को पढ़ता है।
  • उपमा: यदि सवाल स्थान (location) के बारे में है, तो पुलिस एआई को स्पॉटलाइट का उपयोग करने का इशारा करती है। यदि सवाल मापन या लक्षणों के बारे में है, तो पुलिस उसे फैक्ट कार्ड सौंप देती है। यदि यह एक जटिल रेडियोलॉजी रिपोर्ट है, तो पुलिस कहती है, "दोनों का उपयोग करें!"
  • परिणाम: एआई को विशिष्ट कार्य के लिए बिल्कुल सही टूल मिलता है, जिससे सटीकता और स्वाभाविक भाषा के बीच संतुलन बना रहता है।

परिणाम: कम झूठ, अधिक सत्य

शोधकर्ताओं ने अपने इस सिस्टम का परीक्षण कई अलग-अलग एआई मॉडल्स और मेडिकल डेटासेट्स (जैसे चेस्ट एक्स-रे) पर किया।

  • सटीकता (Accuracy): उन्होंने पाया कि एआई विशिष्ट मेडिकल सवालों पर 6% अधिक बार सही उत्तर देता है।
  • हैलुसिनेशन (Hallucinations): उन्होंने मनगढ़ंत तथ्यों की संख्या में लगभग 35% की कमी की।
  • बहुमुखी प्रतिभा (Versatility): यह विभिन्न प्रकार के एआई मॉडल्स पर अच्छी तरह से काम करता है, जो साबित करता है कि यह एक लचीला समाधान है।

संक्षेप में

एआई के मस्तिष्क को फिर से बनाने के बजाय, लेखकों ने इसे बोलने से ठीक पहले सत्यापनीय साक्ष्य (स्पốtलाइट और फैक्ट कार्ड) दिए। एआई को वास्तविक साक्ष्य देखने के लिए मजबूर करके और उसे तथ्यों की याद दिलाकर, उन्होंने इसे आत्मविश्वास के साथ मनगढ़ंत बातें बनाने से रोक दिया, जिससे यह चिकित्सा उपयोग के लिए बहुत अधिक सुरक्षित और विश्वसनीय बन गया।

अपने क्षेत्र के पेपरों की भीड़ में उलझे हुए हैं?

आपके रिसर्च कीवर्ड से मेल खाने वाले सबसे नए और अलग सोच वाले पेपरों का रोज़ाना Digest पाएँ—तकनीकी सारांश के साथ, आपकी भाषा में।

Digest आज़माएँ →