DS@GT ARC at ImageCLEFmedical 2026: Architectural Diversity for Concept Detection and Foundation-Model Scaling for Caption Prediction in Medical Image Analysis
حقق فريق DS@GT المركز الأول في مهمة كشف المفاهيم ضمن مسابقة ImageCLEFmedical 2026 باستخدام نموذج تجميع دمج متأخر متنوع مع ضبط عتبة صادق، بينما أثبت أيضاً أن خط معالجة استرجاع KNN الخالي من التدريب يمكنه مضاهاة أداء الضبط الدقيق بجزء بسيط من التكلفة، إلى جانب مشاركات متنوعة في وصف الصور تشمل أحجاماً مختلفة من النماذج.
تخيل أنك محقق تحاول حل لغز ما، ولكن بدلاً من مسرح جريمة، فإن دليلك هو صورة أشعة سينية ضبابية أو فحص رنين مغناطيسي ملون. في عالم العلوم الطبية، تشبه هذه الصور الرموز السرية؛ حيث يحتاج الأطباء إلى ترجمتها إلى شيئين: قائمة من المصطلحات الطبية المحددة (مثل "كسر في العظم" أو "التهاب رئوي") وقصة واضحة باللغة البسيطة تشرح ما يحدث داخل الجسم. إنها مهمة صعبة لأن الصور الطبية معقدة للغاية، واللغة المستخدمة لوصفها يجب أن تكون دقيقة تماماً. إذا أخطأ الكمبيوتر، فقد يؤدي ذلك إلى ارتباك أو حتى خطر. هذا هو التحدي في "تحليل الصور الطبية"، وهو مجال يعلم فيه العلماء الحواسيب كيف "ترى" و"تقرأ" مثل أخصائيي الأشعة الخبراء. والسؤال الكبير هو: كيف نبني آلة لا تكتفي بمجرد التخمين، بل تفهم حقاً التفاصيل الدقيقة لجسم الإنسان؟
قرر فريق من الباحثين من معهد جورجيا للتكنولوجيا، يطلقون على أنفسهم اسم "DS@GT"، مواجهة هذا اللغز مباشرة في مسابقة كبيرة تسمى ImageCLEFmedical 2026. فكر في هذه المسابقة كأنها أولمبياد عالية المخاطر للذكاء الاصطناعي، حيث تتسابق فرق من جميع أنحاء العالم لمعرفة أي حاسوب يمكنه تفسير الصور الطبية بشكل أفضل. كان لدى الباحثين مهمتان رئيسيتان: أولاً، كان عليهم العمل كقاموس طبي، عبر رصد مفاهيم طبية محددة مخبأة في الصور. ثانياً، كان عليهم العمل كراوٍ للقصص، عبر كتابة فقرة تبدو طبيعية تصف الصورة. وللقيام بذلك، لم يعتمدوا فقط على روبوت واحد فائق الذكاء؛ بل جربوا مزيجاً من الاستراتيجيات، بدءاً من بناء "فريق أحلام" من عقول حاسوبية مختلفة، وصولاً إلى استخدام نموذج ذكاء اصطناعي ضخم مسبق التدريب كان قد قرأ بالفعل ملايين الكتب الطبية.
إليكم ما وجدوه. بالنسبة لجزء "القاموس الطبي" من التحدي، كانت أفضل استراتيجية لديهم هي بناء "فريق أحلام" مكون من ثلاثة أشخاص. لقد جمعوا بين ثلاثة أنواع مختلفة من نماذج الرؤية الحاسوبية — تخيلهم كثلاثة محققين بمهارات مختلفة. أحدهم كان بارعاً في رصد التفاصيل الدقيقة، والآخر تم تدريبه خصيصاً على الكتب الطبية، والثالث كان عاملاً كلاسيكياً موثوقاً. وبدلاً من تركهم يصوتون على الإجابة، استخدم الفريق حيلة ذكية تسمى "ضبط العتبة الصادقة" (Honest Threshold Tuning). تخيل لو كنت تصحح اختباراً، لكنك تخشى إعطاء درجات لإجابات نادرة لأنك لا تريد أن تقع في فخ طالب يخمن الإجابة. ضمن هذا الفريق عدم كون حاسوبهم واثقاً بشكل مفرط بشأن المصطلحات الطبية النادرة والصعبة. ومن خلال كونهم حذرين وصادقين، فاز "فريق أحلامهم" بالمركز الأول في المسابقة. ومن المثير للاهتمام، أنهم جربوا أيضاً طريقة أبسط بكثير: مجرد البحث عن صور تشبه الصورة التي يدرسونها ونسخ الملصقات الخاصة بها. ويا للمفاجأة، فقد كان أداء طريقة "التقليد" هذه، التي لم تتطلب أي تدريب تقريباً، قريباً جداً من أداء فريق أحلامهم المعقد، مما يثبت أن الأدوات البسيطة أحياناً تكون قوية بشكل مدهش.
أما بالنسبة لجزء "الراوي" من التحدي، فقد استكشف الفريق مجموعة واسعة من النهج. حاولوا تعليم نموذج حاسوبي أصغر كتابة القصص عبر تغذيته بالمصطلحات الطبية التي وجدوها سابقاً، آملين أن يساعد ذلك القصة في أن تكون أكثر منطقية. كما جربوا نموذج ذكاء اصطناعي ضخم يحتوي على 27 مليار معلمة (Gemma-3)، وهو يشبه عقلاً عملاقاً قد قرأ بالفعل مكتبة ضخمة من النصوص الطبية. ووجدوا أن هذا "العقل العملاق"، مع القليل من الضبط الدقيق، كان أفضل راوٍ للقصص، حيث احتل المركز الثالث إجمالاً وأنتج أوصافاً أكثر دقة من الناحية الواقعية. أما النماذج الأصغر فقد احتاجت إلى مساعدة؛ فغالباً ما كانت تكتب قصصاً سليمة نحوياً ولكنها خاطئة طبياً، أو العكس. واكتشف الفريق أنه بالنسبة لهذه النماذج الأصغر، عليك أن تكون ذكياً جداً، عبر خلط ومزج المخرجات المختلفة للحصول على نتيجة جيدة. ومع ذلك، بالنسبة للنموذج العملاق، كانت ضخامة حجمه وتدريبه كافيين لجعله يصيب الهدف دون الحاجة إلى الكثير من الحيل. كما اختبروا نموذجاً صغيراً يحتوي على 4 مليارات معلمة لم يتم تدريبه على بيانات المسابقة المحددة على الإطلاق. وقد قدم أداءً جيداً بشكل مفاجئ بمجرد تزويده بـ "أمر توجيهي" (prompt) ذكي، ولكن عندما حاولوا "تعليمه" المزيد، أصبح أسوأ في الكتابة بالأسلوب الصحيح. وهذا يشير إلى أنه بالنسبة لسرد القصص الطبي، فإن امتلاك عقل ضخم ومطلع غالباً ما يكون أفضل من محاولة عصر عقل أصغر ليتعلم كل شيء من الصفر.
في النهاية، يشير عمل الفريق إلى أنه عندما يتعلق الأمر بالذكاء الاصطناعي الطبي، لا يوجد سوى "رصاصة سحرية" واحدة. فمن أجل رصد مصطلحات طبية محددة، فإن الصيغة الفائزة هي فريق متنوع من النماذج المختلفة التي تعمل معاً، مع فحص دقيق لمدى ثقتها. أما بالنسبة لكتابة القصة النهائية، فإن حجم الذكاء الاصطناعي أمر بالغ الأهمية؛ إذ يبدو أن العقل الضخم مسبق التدريب يتعامل مع التوازن الصعب بين الدقة والواقعية بشكل أفضل من النماذج الأصغر والمتخصصة. لقد أظهر الباحثون أنه بينما يمكنك الوصول إلى مدى بعيد باستخدام الحيل الذكية وطرق الاسترجاع البسيطة، فإن أفضل نهج أحياناً هو ببساطة ترك ذكاء اصطناعي ضخم وجيد التعليم يقوم بالعمل الشاق. إن الكود الخاص بهم وطرقهم متاحة الآن ليراها أي شخص، مما يساعد الآخرين على تعلم كيفية بناء محققين ورواة قصص طبية أفضل.
ملخص تقني: DS@GT ARC في ImageCLEFmedical 2026
بيان المشكلة
تتناول الورقة تحدي ImageCLEFmedical Caption 2026، وهو معيار مبني على مجموعة بيانات ROCOv2 المحدثة. يتكون التحدي من مسارين متميزين:
كشف المفاهيم (المهمة 1): تعيين معرفات المفاهيم الفريدة (CUIs) لنظام اللغة الطبية الموحد (UMLS) لصور الأشعة. تتميز هذه المهمة بتوزيعات ذيل طويل للغاية، حيث تهيمن مجموعة صغيرة من المفاهيم على البيانات بينما تظهر آلاف المفاهيم النادرة بشكل غير متكرر، مما يؤدي إلى مخاطر شديدة من الإفراط في التخصيص (overfitting) أثناء تحسين العتبة.
توقع الوصف (المهمة 2): توليد أوصاف لغوية طبيعية ذات دلالة سريرية. تتضمن هذه المهمة مقايضة بين الحقيقة السريرية (دقة النتائج الطبية) والطلاقة اللغوية الطبيعية، لا سيما عند استخدام نماذج الرؤية واللغة الكبيرة (VLMs).
المنهجية
المهمة 1: كشف المفاهيم
استخدم الفريق نهجاً ذا استراتيجية مزدوجة، يجمع بين نموذج تجميعي (ensemble) ثقيل ومُدقق، وبين خط معالجة استرجاع خفيف الوزن ولا يتطلب تدريباً.
1. تجميع الدمج المتأخر ثلاثي المسارات مع "الضبط الصادق للعتبة"
البنية: يقوم التقديم الأساسي بدمج تنبؤات من ثلاثة مشفرات رؤية متميزة معمارياً:
ConvNeXt-V2-Base: تم ضبطه بدقة باستخدام خسارة غير متماثلة (Asymmetric Loss - ASL) للتعامل مع عدم توازن الملصقات.
BiomedCLIP ViT-B/16: يستفيد من التدريب المسبق على PubMed Central للحصول على مقدمات بصرية طبية قوية.
DenseNet-169: يوفر تنوعاً معمارياً بعدد أقل من المعلمات.
استراتيجية الدمج: تم تحديد وزن الدمج المتأخر الموزون (الأوزان: 0.60، 0.20، 0.20) عبر طريقة صعود الإحداثيات (coordinate ascent) على مجموعة التحقق.
الضبط الصادق للعتبة: للتخفيف من حدة الإفراط في التخصيص للمفاهيم النادرة (وهو نمط فشل شائع في توزيعات الذيل الطويل)، قدم المؤلفون خط معالجة عتبة منظماً:
التقسيم الحتمي: تم تقسيم مجموعة التحقق بنسبة 50/50؛ حيث تم إجراء تحسين العتبة (صعود الإحداثيات) حصرياً على نصف الضبط.
الاحتياط للذيل الطويل: بالنسبة للمفاهيم التي ظهرت أقل من 50 مرة في قسم الضبط، تم التخلي عن العتبات المحسنة لصالح خط أساس عالمي آمن (τglobal=0.490).
مزج العتبات: تم مزج العتبات المتبقية (τfinal=0.7τcoord+0.3τglobal) لمنع القيم المتطرفة.
تقليم الملصقات: تم تقييد مساحة الملصقات بأكثر 1,000 مفهوم فريد (CUI) تكراراً (تغطي 92.64% من الحدوثات) لضمان إشارات تدريب مستقرة.
2. خط معالجة استرجاع KNN الخالي من التدريب
النهج: نظام قائم على الاسترجاع باستخدام تضمينات (embeddings) ثابتة من BiomedCLIP.
الآلية: لكل صورة استعلام، يتم استرجاع أقرب K من الجيران من بيانات التدريب عبر تشابه جيب التمام (cosine similarity). يتم تجميع الـ CUIs بناءً على استراتيجية نسبة موزونة (يجب أن يتجاوز مجموع تشابه جيب التمام 35% من القيمة القصوى الممكنة).
التحسين: استهدفت مرحلة ثانوية تحديداً الـ 15 مفهوماً ثانوياً التي تم اختيارها يدوياً لتحسين المقياس الثانوي.
المهمة 2: توقع الوصف
استكشف المؤلفون طيفاً من أحجام النماذج ونماذج التدريب، بدءاً من النماذج الضخمة المضبوطة بدقة وصولاً إلى الاستدلال صفري المعرفة (zero-shot inference).
1. نموذج Gemma-3 27B المضبط بدقة
البنية: نموذج VLM بـ 27 مليار معلمة تم ضبطه بدقة باستخدام تقنية (QLoRA) مع تكميم 4-بت.
التدريب: تم توسيع الـ tokenizer ليشمل رموزاً خاصة لـ UMLS CUIs. تم تدريب النموذج بالكامل (مشفر الرؤية، والوصلة، والنموذج اللغوي) لمدة دورتين تدريبيتين (2 epochs).
الاستدلال: استخدم بحث الشعاع الثلاثي (3-beam search) للموازنة بين الحقيقة والطلاقة، مع طول أقصى للرموز قدره 150 وعدم وجود عقوبة التكرار للحفاظ على المصطلحات الطبية.
الاستراتيجية: حقن مفاهيم UMLS المتوقعة (من المهمة 1) في المطالبة (prompt) كنص مهيكل (النمط، التشريح، النتائج) لتوجيه عملية التوليد.
النماذج المختبرة:
InstructBLIP (Flan-T5-XL): أظهر مكاسب كبيرة من التثبيت.
LLaVA-Med (Mistral-7B): أظهر مكاسب متوسطة.
BLIP-base: لم يظهر أي مكسب صافٍ من التثبيت وحده بسبب المقايضة بين الحقيقة والصلة.
دمج Vizwins: بالنسبة لنموذج BLIP، اختارت خوارزمية مخصصة بين الأوصاف "البصرية فقط" والأوصاف "المثبتة بالمفاهيم" بناءً على عدد ضربات المفاهيم، مما استعاد الأداء المفقود بسبب عقوبة التثبيت.
3. نموذج MedGemma-4B صفري المعرفة
النهج: نموذج بـ 4 مليار معلمة تم تدريبه مسبقاً على PubMed Central، واستخدم دون ضبط دقيق.
المطالبة (Prompting): استخدم أسلوب مطالبة "PMC-legend" يطلب النمط، والتشريح، والنتائج.
النتيجة: رغم أنه أصغر بـ 7 مرات من نموذج Gemma-3 27B وخالٍ من الضبط الدقيق، فقد حقق نتائج تنافسية، مما يشير إلى أن تطابق توزيع التدريب المسبق هو رافعة حاسمة.
النتائج الرئيسية
المهمة 1: كشف المفاهيم
التقديم الأساسي: حقق التجميع ثلاثي المسارات مع الضبط الصادق للعتبة F1 أساسي قدره 0.5790، و F1 ثانوي قدره 0.9657، محتلاً المركز الأول بين جميع المشاركين.
خط معالجة الاسترجاع: حقق خط معالجة BiomedCLIP KNN الخالي من التدريب F1 أساسي قدره 0.5780 و F1 ثانوي قدره 0.9599، مما يجعله يكافئ التجميع المضبط بدقة في المسار الأساسي بتكلفة حوسبة أقل بكثير.
المقارنة: أكد نجاح التجميع فوق خط الأساس الخام لصعود الإحداثيات (0.5763) أن استراتيجية العتبة المنظمة نجحت في التخفيف من حدة الإفراط في التخصيض في الذيل الطويل.
المهمة 2: توقع الوصف
أعلى أداء: حقق نموذج Gemma-3 27B المضبط بدقة (بحث الشعاع الثلاثي، دورتان تدريبيتان) درجة إجمالية قدرها 0.3571، محتلاً المركز الثالث في لوحة المتصدرين الرسمية. والجدير بالذكر أنه حقق أعلى درجة حقيقة (0.1777) من أي فريق آخر.
رؤى الاستئصال (Ablation Insights):
أدى تثبيت المفاهيم إلى تحسين الحقيقة في جميع النماذج ولكنه أثر بشكل متغير على الدرجات الإجمالية اعتماداً على البنية.
وصل خط معالجة BLIP المدمج (البصري فقط + المثبت) إلى 0.3564، مقترباً من أداء نموذج 27B.
حقق MedGemma-4B صفري المعرفة درجة 0.3186، مما أثبت أن تطابق توزيع التدريب المسبق يمكن أن يعطي نتائج قوية دون ضبط دقيق.
أدى الضبط الدقيق لنموذج 4B في الواقع إلى تدهور الأداء (تحديداً درجات BLEURT) مقارنة بالوضع صفري المعرفة، مما يشير إلى أن التدريب الخاضع للإشراف الإضافي على ROCOv2 قد طمس أسلوب الطلاقة الموجود لدى النموذج.
الأهمية والادعاءات
تدعي الورقة أن مساهمتها الأساسية تكمن في معالجة التحديات الخاصة بالتصنيف الطبي متعدد الملصقات وتوليد الأوصاف من خلال استراتيجيات معمارية وتنظيمية مخصصة:
تنظيم العتبة أمر بالغ الأهمية: تُقدم استراتيجية "الضبط الصادق للعتبة" كحل ضروري لتوزيعات الذيل الطويل الطبية. ويجادل المؤلفون بأن تحسين العتبة القياسي يؤدي إلى تضخم اصطناعي في الدرجات في مجموعات التحقق يفشل في التعميم على مجموعة الاختبار؛ حيث يجسر نهجهم المنظم هذه الفجوة.
التنوع المعماري مقابل الضبط المشترك: تشير النتائج إلى أنه بالنسبة لكشف المفاهيم، فإن تجميع الدمج المتأخر لمتعدد من الدعامات (CNNs و Transformers) يتفوق على الضبط الدقيق متعدد الوسائط المعقد (مثل نماذج الانتباه المتقاطع)، ويرجع ذلك على الأرجح إلى استقرار التقارب ومساحات الخطأ المتكاملة.
الحجم وتوزيع التدريب المسبق كرافعات مهيمنة: بالنسبة لتوليد الأوصاف، تخلص الورقة إلى أن حجم النموذج الأساسي (27 مليار معلمة) وتطابق توزيع التدريب المسبق (PubMed Central) هما المحركان الرئيسيان للأداء. هذه العوامل تحل بشكل طبيعي مقايضة الحقيقة والطلاقة.
استراتيجيات متكاملة للقيود الموارد: بالنسبة للنماذج الأصغر حيث لا يمكن تحقيق التوسع، توضح الورقة أن تثبيت المفاهيم ودمج المخرجات (Vizwins) هي استراتيجيات تكميلية فعالة للاقتراب من أداء النماذج الأكبر.
جدوى الاسترجاع: يشير التقارب بين خط معالجة KNN الخالي من التدريب والتجميع المضبط بدقة في المقياس الأساسي إلى أنه بالنسبة لمهام طبية معينة، يمكن للمشفرات القوية المدربة في المجال حل المشكلة دون تكلفة الضبط الدقيق الكامل، خاصة بالنسبة للمقاييس الثانوية (المختارة).
يحافظ المؤلفون على موقف متواضع، مشيرين إلى أنه بينما حققت أساليبهم مراكز متقدمة، فإن المجال مستمر في التطور، ويجب أن يركز العمل المستقبلي على التعامل مع الذيل الطويل للمفاهيم النادرة دون تقليم واستكشاف التدريب ذي المطالبات المختلطة لتبسيط خطوط المعالجة.