← नवीनतम पेपर
💬 NLP

OncoTriad-QA: A Patient-Level Radiology-Pathology-Genomics Benchmark for Pan-Cancer Reasoning

यह शोध पत्र OncoTriad-QA प्रस्तुत करता है, जो एक व्यापक रोगी-स्तरीय बेंचमार्क है जो प्रश्नोत्तर के माध्यम से पैन-कैंसर तर्क करने की मल्टीमॉडल मॉडलों की क्षमता का मूल्यांकन करने और सुधारने के लिए 9,281 TCGA मामलों से रेडियोलॉजी, पैथोलॉजी और जीनोमिक्स डेटा को एकीकृत करता है।

मूल लेखक: Ahnaf Munir, Dannong Wang, Michael W. McDonald, Mubarak Shah, Pegah Khosravi, Yu Tian

प्रकाशित 2026-08-05
📖 7 मिनट में पढ़ें🧠 गहराई से पढ़ें

मूल लेखक: Ahnaf Munir, Dannong Wang, Michael W. McDonald, Mubarak Shah, Pegah Khosravi, Yu Tian

मूल पेपर CC BY 4.0 (http://creativecommons.org/licenses/by/4.0/) के तहत लाइसेंस किया गया है। नीचे दिए गए पेपर की यह व्याख्या AI से तैयार की गई है। इसे लेखकों ने न तो लिखा है, न इसका समर्थन किया है। तकनीकी सटीकता के लिए मूल पेपर देखें। पूरा डिस्क्लेमर पढ़ें

एक मरीज के स्वास्थ्य के परम रहस्य को सुलझाने की कोशिश करें, लेकिन सुराग तीन पूरी तरह से अलग भाषाओं में बिखरे हुए हैं। एक सुराग ट्यूमर की एक धुंधली तस्वीर है (रेडियोलॉजी), दूसरा सूक्ष्मदर्शी के नीचे कोशिकाओं का एक सूक्ष्म दृश्य है (पैथोलॉजी), और तीसरा आनुवंशिक कोड परिवर्तनों की एक लंबी, जटिल सूची है (जीनोमिक्स)। लंबे समय तक, डॉक्टरों की मदद करने के लिए डिज़ाइन किए गए कंप्यूटर प्रोग्राम ऐसे जासूसों की तरह रहे हैं जो केवल इनमें से एक भाषा बोल सकते हैं। वे एक्स-रे पढ़ने में बहुत अच्छे हो सकते हैं लेकिन डीएनए को समझने में बहुत खराब, या इसके विपरीत। यह एक बड़ी समस्या है क्योंकि कैंसर एक रूप बदलने वाला (shape-shifter) है; इसे वास्तव में समझने के लिए, आपको पूर्ण चित्र देखने के लिए इन तीनों सुरागों को एक साथ अनुवादित करने की आवश्यकता है। लक्ष्य एक ऐसा आर्टिफिशियल इंटेलिजेंस बनाना है जो न केवल पहेली के एक टुकड़े को देखता है, बल्कि उस तस्वीर, सूक्ष्मदर्शी स्लाइड और आनुवंशिक सूची को एक साथ अपने "मन" में रख सके ताकि एक पूर्ण उत्तर दिया जा सके।

यह शोध पत्र OncoTriad-QA नामक एक नए उपकरण का परिचय देता है, जो इन AI जासूसों के लिए एक विशाल, अत्यंत चुनौतीपूर्ण परीक्षा की तरह कार्य करता है। शोधकर्ताओं ने 32 विभिन्न प्रकार के कैंसर के लगभग 9,000 वास्तविक रोगी मामलों से जानकारी एकत्र की। उन्होंने 86,100 प्रश्न तैयार किए जो AI को छवियों, ऊतक नमूनों (tissue samples) और जेनेटिक डेटा के बीच संबंध जोड़ने के लिए मजबूर करते हैं। इसे एक "ट्रिपल-थ्रेट" परीक्षा के रूप में सोचें जहाँ AI को ऐसे प्रश्नों के उत्तर देने होते हैं जैसे, "क्या स्कैन पर ट्यूमर का आकार सूक्ष्मदर्शी के नीचे कोशिकाओं के आक्रामक रूप से मेल खाता है, और क्या जीन यह समझाते हैं कि ऐसा क्यों है?" इस परीक्षण को सिद्ध करने के लिए, उन्होंने OncoVLM नामक एक नया AI मॉडल बनाया। जब उन्होंने इस मॉडल को इस नए परीक्षण पर प्रशिक्षित किया, तो यह पिछले मॉडलों की तुलना में इन जटिल, बहु-सुराग रहस्यों को सुलझाने में बहुत बेहतर हो गया। जबकि अन्य AI सिस्टम अक्सर इन विभिन्न प्रकार के साक्ष्यों को मिलाने के लिए पूछे जाने पर लड़खड़ा जाते थे, OncoVLM ने एक साथ तीनों भाषाओं को सुनना सीख लिया, जिससे यह प्रदर्शित होता है कि यह उपलब्ध सभी साक्ष्यों को एकीकृत करके मानव डॉक्टर की तरह कैंसर के मामलों के बारे में तर्क कर सकता है।

जासूस का नया टूलकिट

इस कार्य के पीछे का मूल विचार यह है कि कैंसर इतना जटिल है कि इसे केवल एक चीज़ को देखकर नहीं समझा जा सकता। वास्तविक दुनिया में, एक डॉक्टर केवल एक एक्स-रे नहीं देखता है; वह एक बायोप्सी (ऊतक का एक छोटा टुकड़ा) भी देखता है और आनुवंशिक उत्परिवर्तन (genetic mutations) के लिए रक्त परीक्षण भी करता है। शोध पत्र का तर्क है कि वर्तमान के अधिकांश AI मॉडल उन छात्रों की तरह हैं जिन्होंने केवल एक विषय का अध्ययन किया है। वे एक्स-रे पर टेस्ट में उत्कृष्ट प्रदर्शन कर सकते हैं लेकिन उस एक्स-रे को जेनेटिक रिपोर्ट के साथ जोड़ने के लिए पूछे जाने पर पूरी तरह विफल हो सकते हैं।

इसे ठीक करने के लिए, लेखकों ने OncoTriad-QA बनाया। कल्पना कीजिए कि एक विशाल पुस्तकालय है जिसमें 9,281 रोगी फाइलें हैं। प्रत्येक फाइल में तीन अलग-अलग अनुभाग हैं:

  1. रेडियोलॉजी: सीटी (CT) या एमआरआई (MRI) स्कैन ("बड़ी तस्वीर" वाले फोटो)।
  2. पैथोलॉजी: ऊतक नमूनों की होल-स्लाइड इमेजेज ("सूक्ष्म" दृश्य)।
  3. जीनोमिक्स: डीएनए उत्परिवर्तन, आरएनए (RNA) और मिथाइलेशन (कोशिकाओं के भीतर का "निर्देश मैनुअल") पर डेटा।

शोधकर्ताओं ने इन फाइलों को केवल एक साथ नहीं डाला; उन्होंने इस डेटा को एक क्विज़ (प्रश्नोत्तरी) में बदलने के लिए एक प्रणाली बनाई। उन्होंने एक शक्तिशाली AI (एक "शिक्षक" के रूप में कार्य करने वाला) का उपयोग किया जो रोगी की फाइल के तीनों अनुभागों को पढ़ता है और 86,100 प्रश्न उत्पन्न करता है। ये प्रश्न सरल बहुविकल्पीय प्रश्नों (जैसे "ट्यूमर का चरण क्या है?") से लेकर जटिल खुले-अंत वाले अनुरोधों (जैसे "इस विशिष्ट मामले में इमेजिंग और जेनेटिक्स किस प्रकार सहमत या असहमत हैं, यह समझाएं") तक विस्तृत हैं।

नया AI छात्र: OncoVLM

यह देखने के लिए कि क्या यह नया क्विज़ उपयोगी था, टीम ने OncoVLM नामक एक नया AI मॉडल बनाया। पुराने मॉडलों के विपरीत जो शायद किसी छवि के कम-रिज़ॉल्यूशन वाले थंबनेल को देखते हैं या टेक्स्ट सारांश पढ़ते हैं, OncoVLM को "नेटिव" (मूल) डेटा को पचाने के लिए डिज़ाइन किया गया है। यह वास्तविक उच्च-रिज़ॉल्यूशन वाली चिकित्सा छवियों और कच्चे जेनेटिक अनुक्रमों को देख सकता है, और फिर उन्हें एक ऐसी भाषा में अनुवादित कर सकता है जिसे इसका मुख्य AI मस्तिष्क समझ सके।

प्रशिक्षण प्रक्रिया एक दो-चरणीय बूट कैंप की तरह थी:

  1. भाषाओं को सीखना: सबसे पहले, मॉडल ने सीखा कि रेडियोलॉजी, पैथोलॉजी और जीनोमिक्स की "विदेशी भाषाओं" को एक ऐसे प्रारूप में कैसे अनुवादित किया जाए जिसे मुख्य AI मस्तिष्क समझ सके।
  2. अंतिम परीक्षा: इसके बाद, मॉडल को 86,100 प्रश्नों का उपयोग करके फाइन-ट्यून किया गया। इसे रोगी की फाइल में दिए गए साक्ष्य का उपयोग करके ही उत्तर देने के लिए प्रशिक्षित किया जाना था।

परिणामों ने क्या दिखाया

परिणाम बताते हैं कि यह नया दृष्टिकोण काम करता है। जब शोधकर्ताओं ने अन्य शीर्ष-स्तरीय चिकित्सा AI मॉडलों के विरुद्ध OncoVLM का परीक्षण किया, तो नया मॉडल काफी बेहतर प्रदर्शन करता है। विशेष रूप से, बहुविकल्पीय प्रश्नों के एक सेट पर, OncoVLM ने MedGemma-4B नामक एक अग्रणी मेडिकल मॉडल की तुलना में औसतन लगभग 10.7 अंक अधिक प्राप्त किए।

शोध पत्र कुछ प्रमुख खोजों पर प्रकाश डालता है:

  • एकीकरण ही कुंजी है: सबसे बड़े सुधार तब हुए जब मॉडल को तीनों स्रोतों (इमेजिंग, पैथोलॉजी और जीनोमिक्स) से साक्ष्य मिलाने के लिए कहा गया। यह सुझाव देता है कि मॉडल ने वास्तव में केवल एक सुराग के आधार पर अनुमान लगाने के बजाय "कड़ियों को जोड़ने" को सीखा है।
  • गायब सुराग कठिन हैं: शोधकर्ताओं ने यह भी परीक्षण किया कि यदि AI के पास केवल एक्स-रे हो या केवल जेनेटिक डेटा हो तो क्या होता है। मॉडल अभी भी अच्छा प्रदर्शन करता था, लेकिन यह स्पष्ट था कि तीनों साक्ष्यों का होना उत्तरों को बहुत अधिक सटीक बनाता था। यह वास्तविक जीवन की नकल करता है, जहाँ डॉक्टरों को कभी-कभी अपूर्ण जानकारी के साथ काम करना पड़ता है, लेकिन पूर्ण चित्र होना हमेशा बेहतर होता है।
  • बेहतर तर्क क्षमता: जब यह पूछा गया कि निदान क्यों किया गया (खुले-अंत वाले प्रश्न), तो नया मॉडल चीजें बनाने (hallucinate करने) की कम संभावना रखता था। एक स्वतंत्र जज (एक अन्य AI) ने नए मॉडल के उत्तरों को पसंद किया क्योंकि वे रोगी की फाइल में मौजूद वास्तविक साक्ष्यों के अधिक करीब थे, जबकि पुराने मॉडल अक्सर ऐसी विवरणों को बना देते थे जो वहां थे ही नहीं।

यह क्यों महत्वपूर्ण है

शोध पत्र सुझाव देता है कि हम उस युग से आगे बढ़ रहे हैं जहाँ AI एक समय में केवल एक प्रकार के चिकित्सा डेटा को देख सकता है। एक बेंचमार्क बनाकर जो मॉडलों को रेडियोलॉजी, पैथोलॉजी और जीनोमिक्स को एक साथ संभालने के लिए मजबूर करता है, लेखकों ने दिखाया है कि ऐसा AI बनाना संभव है जो मानव ऑन्कोलॉजिस्ट (कैंसर विशेषज्ञ) की तरह तर्क करता है। हालांकि यह मॉडल अभी डॉक्टर का विकल्प नहीं है, और उपयोग किया गया डेटा विशिष्ट ऐतिहासिक रिकॉर्ड से आता है जो हर रोगी आबादी का प्रतिनिधित्व नहीं कर सकता है, फिर भी यह कार्य एक स्पष्ट मार्ग प्रदान करता है। यह सिद्ध करता है कि यदि हम AI को एक साथ कैंसर की तीनों "भाषाओं" को बोलना सिखाते हैं, तो यह रोगी देखभाल के जटिल पहेलियों को बहुत अधिक प्रभावी ढंग से सुलझाना शुरू कर सकता है।

अपने क्षेत्र के पेपरों की भीड़ में उलझे हुए हैं?

आपके रिसर्च कीवर्ड से मेल खाने वाले सबसे नए और अलग सोच वाले पेपरों का रोज़ाना Digest पाएँ—तकनीकी सारांश के साथ, आपकी भाषा में।

Digest आज़माएँ →