← नवीनतम पेपर
⚡ electrical engineering

Colon-Bench: An Agentic Workflow for Scalable Dense Lesion Annotation in Full-Procedure Colonoscopy Videos

यह शोधपत्र Colon-Bench को प्रस्तुत करता है, जो एक व्यापक बेंचमार्क है जिसमें एक एजेंटिक वर्कफ़्लो के माध्यम से जनरेट किए गए सघन, बहु-मोडल एनोटेशन वाले 500 से अधिक पूर्ण-प्रक्रिया कोलोनोस्कोपी वीडियो शामिल हैं, जिसका उपयोग चिकित्सा घाव (लेजन) का पता लगाने और विश्लेषण के लिए मल्टीमॉडल लार्ज लैंग्वेज मॉडल्स के कठोर मूल्यांकन और सुधार के लिए किया जाता है।

मूल लेखक: Abdullah Hamdi, Changchun Yang, Xin Gao

प्रकाशित 2026-03-27
📖 6 मिनट में पढ़ें🧠 गहराई से पढ़ें

मूल लेखक: Abdullah Hamdi, Changchun Yang, Xin Gao

मूल पेपर CC BY 4.0 (http://creativecommons.org/licenses/by/4.0/) के तहत लाइसेंस किया गया है। नीचे दिए गए पेपर की यह व्याख्या AI से तैयार की गई है। इसे लेखकों ने न तो लिखा है, न इसका समर्थन किया है। तकनीकी सटीकता के लिए मूल पेपर देखें। पूरा डिस्क्लेमर पढ़ें

कल्पना कीजिए कि आप एक रोबोट को दुनिया का बेहतरीन कोलोनोस्कोपी डॉक्टर बनना सिखाने की कोशिश कर रहे हैं। समस्या यह है कि कोलोनोस्कोपी एक घास के ढेर में सुई खोजने जैसा है, लेकिन वह घास का ढेर हिल रहा है, धुंधला है और कीचड़ से ढका हुआ है। इसके अलावा, "सुइयां" (घाव जैसे पॉलिप्स या अल्सर) अलग-अलग आकार, प्रकार और रंगों की होती हैं।

अब तक, जिन "पाठ्यपुस्तकों" (डेटासेट) का उपयोग हम इन रोबोटों को प्रशिक्षित करने के लिए करते थे, वे बहुत सरल थे। वे ज्यादातर केवल एक ही प्रकार के पॉलिप की तस्वीरें दिखाते थे, जैसे कि केवल सेबों वाला एक फ्लैशकार्ड। लेकिन वास्तविक जीवन में सेब, संतरे, चोट के निशान और त्वचा की दरारें भी होती हैं।

पेश है "Colon-Bench"।

यह शोध पत्र एक विशाल नए प्रशिक्षण मैदान (training ground) को पेश करता है, जिसे KAUST के शोधकर्ताओं द्वारा बनाया गया है। यह उन्हें कैसे बनाने और क्या खोजने का सफर है, इसे सरल भाषा में समझाया गया है।

1. समस्या: "चलती हुई घास के ढेर में सुई"

कोलन कैंसर एक बड़ा हत्यारा है, लेकिन यदि इसे जल्दी पकड़ लिया जाए तो इसे रोका जा सकता है। इसे पकड़ने का एकमात्र तरीका कोलोनोस्कोपी है, जो एक लंबी, असहज वीडियो प्रक्रिया है।

  • चुनौती: डॉक्टरों को छोटी, छिपी हुई समस्याओं को खोजने के लिए घंटों का वीडियो देखना पड़ता है।
  • AI की कमी: हम चाहते हैं कि AI मदद करे, लेकिन एक AI को सिखाने के लिए, आपको हजारों वीडियो चाहिए जहाँ हर एक समस्या को एक स्टिकी नोट (एनोटेशन) के साथ चिह्नित किया गया हो। यह काम मैन्युअल रूप से करना ऐसा है जैसे पूरे समुद्र को पेंट करने की कोशिश करना; इसमें बहुत समय लगता है और यह बहुत महंगा है।

2. समाधान: "रोबोट फैक्ट्री" (एजेंटिक वर्कफ़्लो)

शोधकर्ताओं ने घावों के चारों ओर बॉक्स बनाने के लिए अधिक लोगों को काम पर नहीं रखा। इसके बजाय, उन्होंने एक बहु-चरणीय रोबोट असेंबली लाइन (जिसे "एजेंटिक वर्कफ़्लो" कहा जाता है) बनाई। इसे एक हाई-टेक गुणवत्ता नियंत्रण कारखाने की तरह समझें:

  • चरण 1: स्काउट (AI प्रस्ताव): एक स्मार्ट AI वीडियो को स्कैन करता है और कहता है, "हे, मुझे लगता है कि मुझे यहाँ कुछ संदिग्ध दिख रहा है!" यह हजारों संभावित स्थानों को चिह्नित करता है।
  • चरण 2: डिटेक्टिव (सत्यापन): दूसरा AI स्काउट के काम की जाँच करता है। "क्या तुम पक्का हो? या यह सिर्फ एक छाया है?" यह नकली अलार्म को फ़िल्टर करता है।
  • चरण 3: ट्रैकर (बॉक्स और मास्क): एक बार जब कोई स्थान कन्फर्म हो जाता है, तो तीसरा AI उसके चारों ओर एक सटीक बॉक्स बनाता है और वीडियो में उसके हिलने का पीछा करता है, भले ही वह मल या तरल पदार्थ के पीछे छिप जाए।
  • चरण 4: मानव विशेषज्ञ (द फाइनल बॉस): एक वास्तविक सर्जन शीर्ष उम्मीदवारों को देखता है। क्योंकि रोबोटों ने भारी काम कर दिया था, इसलिए सर्जन को केवल सबसे अच्छे 40% क्लिप्स को देखकर "हाँ" या "नहीं" कहना होता है।

परिणाम: उन्होंने 60 घंटों के कच्चे वीडियो को एक विशाल, सत्यापित लाइब्रेरी में बदल दिया जिसे Colon-Bench कहा जाता है।

  • 528 वीडियो पूर्ण प्रक्रियाओं के।
  • 14 अलग-अलग प्रकार के "विलेन" (केवल पॉलिप्स ही नहीं, बल्कि रक्तस्राव, अल्सर, परजीवी आदि भी)।
  • 3,00,000+ बाउंडिंग बॉक्स और 2,13,000+ मास्क (डिजिटल आउटलाइन)।
  • 1,33,000 शब्द नैदानिक विवरण (हर क्लिप के लिए डॉक्टर की डायरी प्रविष्टि की तरह)।

3. टेस्ट ड्राइव: क्या AI "देख" सकता है एक डॉक्टर की तरह?

उन्होंने इस नई लाइब्रेरी का उपयोग दुनिया के सबसे स्मार्ट AI मॉडल (जैसे Gemini, GPT-5, और Qwen) का परीक्षण करने के लिए किया। उन्होंने AI से तीन प्रकार के प्रश्न पूछे:

  1. क्विज़ (VQA): "यह कौन सा घाव है, और यह कहाँ है?"
  2. शिकार (डिटेक्शन): "इस वीडियो में पॉलिप को खोजो।"
  3. ट्रेस (सेगमेंटेशन): "पॉलिप के हिलने के दौरान उसकी सटीक रूपरेखा बनाओ।"

बड़ा आश्चर्य:
शोधकर्ताओं को उम्मीद थी कि विशेष चिकित्सा AI (specialized medical AI) जीतेगा। इसके बजाय, सामान्य-उद्देश्य वाले "सुपर-ब्रेन" AI (मल्टीमॉडल लार्ज लैंग्वेज मॉडल्स) ने सबको पछाड़ दिया।

  • Gemini 3 Pro और Gemini 3 Flash शीर्ष डॉक्टर बन गए, जिन्होंने विशेष उपकरणों की तुलना में घावों की पहचान और ट्रैकिंग बेहतर तरीके से की।
  • वास्तव में, ये सामान्य AI लोकलाइजेशन (स्थान निर्धारण) में इतने अच्छे थे कि उन्होंने प्रसिद्ध "सेगमेंट एनीथिंग" मॉडल (SAM-3) को बड़े अंतर से पीछे छोड़ दिया। यह एक सामान्य जासूस द्वारा चिकित्सा रहस्य सुलझाने जैसा है, जो किसी विशेषज्ञ से बेहतर प्रदर्शन करता है क्योंकि उसने दुनिया के बारे में बहुत कुछ देखा है।

4. गुप्त हथियार: "Colon-Skill"

यहाँ तक कि सबसे स्मार्ट AI भी गलतियाँ करते हैं। वे एक "सेसाइल पॉलिप" (सपाट) को "पेडुनकुलेटेड पॉलिप" (डंठल वाला) समझने में या एक छेद (डाइवर्टिकुलम) को ट्यूमर समझने में गलती कर सकते हैं।

शोधकर्ताओं ने विश्लेषण किया कि AI कहाँ विफल हुए और उन्होंने एक "चीट शीट" लिखी (जिसे वे Colon-Skill कहते हैं)।

  • उपमा: कल्पना कीजिए कि आप ड्राइविंग टेस्ट दे रहे हैं। आप नियम जानते हैं, लेकिन आप पैरेलल पार्किंग में बार-बार फेल हो जाते हैं। कोई आपको एक नोट देता है जो कहता है: "याद रखें: स्टीयरिंग को जल्दी घुमाएं, शीशे में देखें, और कर्ब से न टकराएं।"
  • परिणाम: जब उन्होंने इस "Colon-Skill" नोट को टेस्ट से पहले AI को दिया, तो उनके स्कोर में 9.7% तक की वृद्धि हुई। उन्हें फिर से प्रशिक्षित करने की आवश्यकता नहीं थी; उन्हें बस एक बेहतर संकेत (hint) की आवश्यकता थी।

यह क्यों मायने रखता है?

  • मरीजों के लिए: यह उस AI की दिशा में एक कदम है जो वास्तविक समय में कोलोनोस्कोपी वीडियो देख सकता है, डॉक्टरों को उन सूक्ष्म कैंसरों के प्रति सचेत कर सकता है जिन्हें वे शायद मिस कर दें, जिससे यह प्रक्रिया सुरक्षित और अधिक प्रभावी बन जाती है।
  • AI के लिए: यह साबित करता है कि सामान्य AI मॉडल, जब उन्हें सही डेटा और सही "संकेत" दिए जाते हैं, तो वे अत्यंत जटिल और कठिन चिकित्सा कार्यों को संभाल सकते हैं।
  • भविष्य के लिए: उन्होंने दिखाया कि हम सेनाओं की संख्या में इंसानों को काम पर रखे बिना, रोबोटों और कुछ विशेषज्ञ इंसानों के स्मार्ट मिश्रण का उपयोग करके बड़े, उच्च-गुणवत्ता वाले मेडिकल डेटासेट बना सकते हैं।

संक्षेप में: शोधकर्ताओं ने AI डॉक्टरों के लिए एक विशाल, हाई-डेफिनिशन "प्रशिक्षण जिम" बनाया है। उन्होंने पाया कि सामान्य AI सुपर-ब्रेन आश्चर्यजनक रूप से कोलोन संबंधी समस्याओं को पहचानने में सक्षम हैं, और थोड़े से "स्टडी गाइड" (Colon-Skill) के साथ, वे और भी तेज हो सकते हैं। यह जल्द ही कोलोन कैंसर स्क्रीनिंग को सस्ता, तेज़ और अधिक सटीक बनाकर जीवन बचाने में मदद कर सकता है।

अपने क्षेत्र के पेपरों की भीड़ में उलझे हुए हैं?

आपके रिसर्च कीवर्ड से मेल खाने वाले सबसे नए और अलग सोच वाले पेपरों का रोज़ाना Digest पाएँ—तकनीकी सारांश के साथ, आपकी भाषा में।

Digest आज़माएँ →