Deep Learning Based Automated Assessment of Ulcerative Colitis Endoscopic Severity Using Local Global Transformer and Graph Convolutional Networks
تقترح هذه الدراسة نموذج L-GTACNet، وهو إطار عمل هجين للتعلم العميق يجمع بين محولات (Transformers) محلية-عالمية وشبكات تلافيفية رسومية مع تقنيات تحسين الصور لتحقيق دقة بنسبة 94.8% في التقييم الآلي والموضوعي لشدة التهاب القولون التقرحي بناءً على مقياس مايوو للتشخيص بالمنظار.
المؤلفون الأصليون:Latha Dharmalingam, Lakshmi Dhandapani, R. Kumar, S. Vijayakumar
داخل جسم الإنسان، يُعد القولون أنبوبًا طويلًا ومرنًا يمتص الماء والمواد المغذية من الطعام. وعندما يصبح هذا البطانة ملتهبة بشكل مزمن، يتطور حالة تُعرف باسم التهاب القولون التقرحي. هذا المرض لا يبقى ساكنًا؛ بل يشتد ويهدأ، مما يجعل الأنسجة تصبح حمراء ومتورمة وهشة. ولفهم مدى سوء الالتهاب، يستخدم الأطباء كاميرا مثبتة على أنبوب مرن، تسمى منظار القولون، للنظر مباشرة إلى داخل القولون. ويقومون بتعيين درجة لما يرونه، تتراوح من سطح أملس وصحي إلى سطح ينزف ومغطى بقروح مفتوحة. هذه الدرجة، المعروفة باسم "مقياس مايو للناظور"، توجه قرارات العلاج. ومع ذلك، فإن النظر في هذه الصور أمر صعب؛ إذ يمكن أن تكون الإضاءة داخل الجسم غير متساوية، كما يبدو النسيج مختلفًا من شخص لآخر، والفرق بين التهيج الطفيف والضرر المتوسط قد يكون دقيقًا. وحتى الأطباء ذوو الخبرة قد يختلفون في تحديد شدة الحالة بدقة، مما قد يؤدي إلى عدم اتساق في الرعاية.
لقد طور فريق من الباحثين نظامًا حاسوبيًا جديدًا مصممًا للمساعدة في حل مشكلة الاختلاف البشري والغموض البصري هذه. فقد أنشأوا أداة يمكنها النظر في صور تنظير القولون وتعيين درجة الشدة الصحيحة تلقائيًا بدقة عالية. يعمل النظام، المسمى L-GTACNet، من خلال الجمع بين طريقتين مختلفتين للرؤية. أولاً، يستخدم طريقة تعمل مثل "نظارات ذكية"، حيث تصحح الإضاءة غير المتساوية وتعزز التباين بحيث تصبح الحمرة الخفيفة أو التمزقات الصغيرة في الأنسجة واضحة. بعد ذلك، يحلل الصورة بطريقتين في آن واحد؛ فهو ينظر بدقة إلى التفاصيل الصغيرة، مثل بقعة واحدة من الاحمرار أو تآكل صغير، بينما يتراجع في الوقت نفسه لرؤية الصورة الكبيرة لكيفية انتشار الالتهاب عبر المشهد بأكمله. كما يربط بين هذه النقاط المختلفة، مدركًا أن تجمع المشكلات الصغيرة في منطقة واحدة قد يرتبط بنمط أكبر قريب منها. ومن خلال نسج هذه التفاصيل المحلية والأنماط العالمية معًا، يتعلم الكمبيوتر التعرف على البصمات البصرية المحددة لكل مرحلة من مراحل المرض.
اختبر الباحثون هذا النظام باستخدام مجموعة كبيرة تضم أكثر من أحد عشر ألف صورة لتنظير القولون من أكثر من خمسمائة مريض. وقد تم تصنيف هذه الصور بعناية من قبل أطباء خبراء حددوا شدة الالتهاب في كل إطار. تم تدريب الكمبيوتر على معظم هذه الصور ثم اختُبر على مجموعة منفصلة لم يسبق له رؤيتها، مما يضمن أن أداءه كان حقيقيًا وليس مجرد نتيجة للحفظ. كانت النتائج مذهلة؛ فقد حدد النظام شدة المرض بشكل صحيح في ما يقرب من 95 بالمائة من الحالات. وكان متميزًا بشكل خاص في التمييز بين القولون السليم والقولون المصاب بالتهاب طفيف، وكذلك في تحديد الحالات الأكثر خطورة حيث تكون الأنسجة متقرحة ونازفة. وعندما ارتكب الكمبيوتر أخطاءً، كانت عادةً أخطاءً بسيطة، مثل الخلط بين حالة خفيفة وحالة متوسطة، بدلاً من ارتكاب خطأ كبير مثل وصف قولون سليم بأنه شديد؛ وهذا يشير إلى أن النظام يستوعب الطبيعة التدريجية لتطور المرض.
ما يجعل هذا النهج واعدًا بشكل خاص ليس دقته فحسب، بل قدرته على "إظهار عمله". فالنظام لا يكتفي بإخراج رقم فقط؛ بل يسلط الضوء على المناطق المحددة في الصورة التي أدت إلى قراره. فعندما يحدد الكمبيوتر حالة شديدة، فإنه يركز انتباهه على القروح النازفة والأنسجة التالفة والخشنة، متجاهلًا الأجزاء السليمة من القولون. وعندما يرى حالة خفيفة، فإنه يركز على الاحمرار الطفيف وفقدان نمط الأوعية الدموية الطبيعي. تتيح هذه الشفافية للأطباء رؤية ما ينظر إليه الكمبيوتر بالضبط، مما يساعد في بناء الثقة في هذه الأداة. وقد وجد الباحثون أن النظام ركز اهتمامه على نفس السمات التي يبحث عنها الخبراء البشريون، مثل وجود النزيف، وملمس الأنسجة، ومدى الضرر.
بينما قدم النظام أداءً استثنائيًا في هذه الدراسة، يحرص الباحثون على ملاحظة أنه ليس جاهزًا بعد لاستبدال الأطباء البشر. فقد أُجري الاختبار على مجموعة محددة من الصور، والممارسة الطبية في العالم الحقيقي تتضمن متغيرات عديدة، مثل أنواع مختلفة من الكاميرات وحالات المرضى المتفاوتة. تشير الدراسة إلى أن هذه التكنولوجيا يمكن أن تصبح مساعدًا قويًا، يقدم رأيًا ثانيًا يتسم بالاتساق والموضوعية. ويمكنها أن تساعد في ضمان حصول كل مريض على المستوى المناسب من الرعاية بناءً على تقييم موثوق لحالته. في الوقت الحالي، يظل النظام أداة متطورة تعلمت كيف ترى "اللغة الخفية" للالتهاب في القولون، محولةً البيانات البصرية المعقدة إلى درجة واضحة وقابلة للتنفيذ، يمكنها يومًا ما أن تساعد الأطباء في اتخاذ قرارات أفضل لمرضاهم.
ملخص تقني: شبكة L-GTACNet للتقييم الآلي لشدة التهاب القولون التقرحي
بيان المشكلة يعد التقييم الدقيق لشدة التهاب القولون التقرحي (UC) أمراً بالغ الأهمية لاختيار العلاج والتنبؤ بالمسار المرضي، وهو ما يعتمد عادةً على مقياس "مايو" للتقييم التنظيري (MES)، والذي يتراوح من 0 (طبيعي) إلى 3 (شديد). ومع ذلك، فإن التقييم اليدوي عبر تنظير القولون يتسم بالذاتية، ويعاني من تباين في التقدير بين المراقبين، كما تزداد صعوبته بسبب الاختلافات المورفولوجية الدقيقة بين درجات الشدة المتجاورة. تواجه النماذج الحالية للتعلم العميق قيوداً محددة؛ حيث غالباً ما تفشل الشبكات العصبية التلافيفية (CNNs) في التقاط الاعتمادات المكانية طويلة المدى والأنماط السياقية العالمية، بينما قد تفتقر نماذج "المحول" (Transformer) المستقلة إلى التفاصيل المحلية الدقيقة مثل الحمرة المبكرة أو التآكلات السطحية. علاوة على ذلك، غالباً ما تتعامل الطرق الحالية مع تحسين الصور، واستخراج الميزات، والاستدلال العلائقي كعناصر منفصلة، مما يفتقر إلى إطار عمل موحد يمكنه نمذجة العلاقات المكانية بين المناطق المخاطية المميزة مع ضمان القابلية للتفسير السريري.
المنهجية يقترح المؤلفون L-GTACNet (شبكة التلافيف الرسومية القائمة على انتباه المحول المحلي-العالمي)، وهي إطار عمل هجين للتعلم العميق مصمم لمعالجة هذه الفجوات من خلال مسار متكامل:
المعالجة المسبقة للبيانات وتحسينها:
تصحيح الإضاءة: يتم تطبيق خوارزمية قائمة على "ريتيكس" (Retinex) لفصل انعكاس الأنسجة عن الإضاءة غير المنتظمة، مما يؤدي إلى تصحيح تدرجات السطوع دون تغيير الأنماط اللونية المرضية.
تحسين التباين: يُستخدم تقليب الهيستوغرام التكيفي المحدود للتباين (CLAHE) لتحسين التباين المحلي في مناطق الاهتمام دون تضخيم الضوضاء.
التقييس: تخضع الصور لعمليات تطبيع وتوسيع بيانات تكيفي (تحويلات هندسية وضوئية طفيفة) لضمان المتانة.
مجموعة البيانات: تستخدم الدراسة مجموعة بيانات متاحة للجمهور تضم 564 سجلاً للمرضى و11,276 صورة لتنظير القولون، تم تصنيفها من قبل خبراء في طب الجهاز الهضمي باستخدام تسميات MES (0–3). ومن الأهمية بمكان أن تقسيم البيانات يتم على مستوى المريض لمنع تسرب البيانات وضمان القدرة على التعميم.
تصميم البنية:
المحول المحلي-العالمي (Local–Global Transformer): يقوم المشفر البصري الأساسي بتحويل الصورة إلى سلسلة من الرموز (tokens). وهو يستخدم نهجاً ثنائي المسارات:
المسار المحلي: يستخدم آليات الانتباه لتحديد ووزن المناطق المميزة دقيقة التفاصيل (مثل آفات محددة أو تغيرات وعائية).
المسار العالمي: يستخدم الانتباه الذاتي لنمذجة الاعتمادات طويلة المدى والتقاط السياق الالتهابي العام (مثل الحمرة المنتشرة).
الشبكة التلافيفية الرسومية الموجهة بالانتباه (Attention-Guided GCN): يتم تحويل الرموز المحلية الأكثر تميزاً إلى عقد رسومية. تُبنى الحواف بناءً على كل من التقارب المكاني والتشابه الدلالي. تقوم وحدة التلافيف الرسومية بنشر المعلومات عبر هذه العقد، مما يسمح بنمذجة الاعتمادات العلائقية بين المناطق المخاطية الموزعة مكانياً.
دمج الميزات: تسمح آلية بوابية متعلمة بدمج التمثيلات المحلية والعالمية والقائمة على الرسوم ديناميكياً، مما يسمح للنموذج بتكييف استراتيجية اتخاذ القرار بناءً على محتوى الصورة (على سبيل المثال، الاعتماد أكثر على الميزات المحلية للآفات الصغيرة مقابل الميزات العالمية للالتهاب المنتشر).
التصنيف: يتم تمرير التمثيل المدمج إلى رأس التصنيف للتنبؤ بفئات MES الأربع (0–3).
التدريب والتقييم:
يتم تدريب النموذج باستخدام فقدان "التقاطع الفئوي" (categorical cross-entropy loss) مع أوزان الفئات للتعامل مع عدم التوازن.
يتم تقييم الأداء باستخدام الدقة (accuracy)، والدقة التنبؤية (precision)، والاستدعاء (recall)، ودرجة F1، والنوعية (specificity)، والمساحة تحت منحنى خصائص تشغيل المستقبِل (AUROC)، ومعامل كوهين كابا (Cohen's Kappa).
يتم تقييم القابلية للتفسير عبر خرائط الانتباه للتحقق من أن النموذج يركز على الشذوذات المخاطية ذات الصلة سريرياً.
المساهمات الرئيسية
البنية الهجينة: يسمح دمج "المحولات المحلية-العالمية" مع "الشبكات التلافيفية الرسومية" بالتقاط تفاصيل الآفات المحلية دقيقة التفاصيل والأنماط السياقية العالمية في آن واحد، مع نمذجة العلاقات المكانية بين المناطق الالتهابية بشكل صريح.
مسار موحد: يجمع إطار العمل بين تحسين الصور (Retinex/CLAHE)، واستخراج الميزات الهرمي، والاستدلال العلائقي في نظام واحد متكامل، مما يعالج التجزئة التي شهدتها الأعمال السابقة. การ
القابلية للتفسير السريري: يوفر النموذج تفسيرات ذات صلة بالمرض من خلال تسليط الضوء على مناطق مخاطية محددة (مثل التقرح أو النزيف) التي تساهم في التنبؤ بالشدة، بما يتماشى مع المعايير التشخيصية للخبير.
التحقق القوي على مستوى المريض: تستخدم الدراسة تقسيماً صارماً للبيانات على مستوى المريض لضمان أن مقاييس الأداء تعكس قدرات التعميم الحقيقية بدلاً من الإفراط في التخصيص لإطارات مريض معين.
النتائج تم تقييم L-GTACNet المقترح على مجموعة الاختبار وأظهر أداءً فائقاً مقارنة بالشبكات التلافيفية (CNNs) الأساسية، ونماذج المحول القياسية (ViT, Swin)، والبنيات الهجينة:
الأداء العام: حقق دقة بنسبة 94.80%، ودقة تنبؤية 94.67%، واستدعاء 94.51%، ودرجة F1 بنسبة 94.58%، وAUROC بلغ 0.986.
الأداء حسب الفئة: حافظ النموذج على أداء عالٍ عبر جميع فئات MES، حيث سجل أعلى درجة F1 بنسبة 97.66% للفئة MES-0 (إلى جانب 97.31% دقة تنبؤية، و98.02% استدعاء، و98.74% نوعية) ونتائج متسقة لمراحل المرض النشطة (MES-1 إلى MES-3).
التمييز بين الحدود: ميز النموذج بفعالية بين درجات الشدة المتجاورة، حيث وقعت معظم الأخطاء بين MES-1 وMES-2، مما يعكس الغموض البصري المتأصل في الالتهاب المتوسط.
دراسة الاستئصال (Ablation Study): أكدت الإضافة التدريجية للمكونات (تحسين الصورة ← المحول المحلي-العالمي ← الانتباه المحلي ← التلافيف الرسومية) أن كل وحدة ساهمت بشكل تراكمي في الأداء النهائي.
المتانة: حافظ النموذج على دقة عالية (>90%) تحت ظروف التدهور المحاكية بما في ذلك انخفاض الإضاءة، وفقدان التباين، والضوضاء، وضبابية الحركة.
الكفاءة الحسابية: مع 18.7 مليون معلمة وزمن استدلال قدره 21.4 مللي ثانية لكل صورة، يوفر النموذج توازناً ملائماً بين الدقة والتكلفة الحسابية مقارنة بنماذج المحول الأكثر ثقلاً.
الأهمية والادعاءات تدعي الورقة أن L-GTACNet يوفر أداة قوية وموضوعية وقابلة للتكرار لتقييم شدة التهاب القولون التقرحي، مما قد يقلل من تباين التقدير بين المراقبين في الممارسة السريلية. ويؤكد المؤلفون أن قدرة النموذج على تحديد الميزات المرضية المحددة (الحمرة، فقدان الأوعية الدموية، الهشاشة، التقرح) ونمذجة علاقاتها المكانية تجعل منه قابلاً للتفسير سريرياً.
ومع ذلك، يحافظ المؤلفون على موقف متواضع فيما يتعلق بالنشر السريري. فهم يصرحون صراحة بأن L-GTACNet هو أداة استشرافية مصممة لمساعدة أطباء الجهاز الهضمي، وليس لاستبدالهم. وتخلص الورقة إلى أنه قبل الاعتماد السريري الروتيني، يتطلب إطار العمل تحققاً خارجياً عبر مؤسسات مختلفة، وأجهزة تنظير، وفئات مرضى متنوعة، بالإضافة إلى دراسات سريرية استشرافية لتأكيد فائدته في البيئات الواقعية.