Beyond Classification: Pathology Foundation Models as Detection Encoders for Mitotic Figures
تُظهر هذه الدراسة أن نماذج التأسيس المرضية، ولا سيما H-optimus-0 وVirchow، يمكنها أن تعمل بفعالية كعمود فقري للكشف الكثيف عن الأجسام الخاصة بالأشكال الانقسامية، محققةً أداءً تنافسياً وتحسناً في المتانة خارج النطاق مقارنة بالنماذج المرجعية التقليدية المدربة من البداية إلى النهاية.
المؤلفون الأصليون:Sweta Banerjee, Alireza Teimoury, Nils Porsche, Alexandra K. Stoll, Viktoria Weiss, Niklas Hargarter, Jonas Ammeling, Thomas Conrad, Christoph Stroblberger, Christopher Kaltnecker, Robert KlopfleischSweta Banerjee, Alireza Teimoury, Nils Porsche, Alexandra K. Stoll, Viktoria Weiss, Niklas Hargarter, Jonas Ammeling, Thomas Conrad, Christoph Stroblberger, Christopher Kaltnecker, Robert Klopfleisch, Christof A. Bertram, Katharina Breininger, Marc Aubreville
المؤلفون الأصليون: Sweta Banerjee, Alireza Teimoury, Nils Porsche, Alexandra K. Stoll, Viktoria Weiss, Niklas Hargarter, Jonas Ammeling, Thomas Conrad, Christoph Stroblberger, Christopher Kaltnecker, Robert Klopfleisch, Christof A. Bertram, Katharina Breininger, Marc Aubreville
تخيل أنك محقق يحاول حل جريمة في مسرح جريمة، ولكن بدلاً من شارع في مدينة، فإن مسرح جريمتك هو شريحة صغيرة من الأنسجة تحت المجهر. في عالم البيولوجيا، تنقسم الخلايا باستمرار للحفاظ على نمو أجسامنا وصحتها. ومع ذلك، في بعض الأحيان، تنقسم هذه الخلايا بشكل مفرط أو سريع للغاية، وهو ما يعد علامة رئيسية على السرطان. لتحديد مدى عدوانية الورم، يتعين على الأطباء (علماء الأمراض) عدّ هذه "الخلايا المنقسمة"، التي تبدو مثل نحلات صغيرة مشغولة تسمى الأشكال الانقسامية (mitotic figures). إنها مهمة مملة؛ إذ يتعين عليهم مسح مناطق شاسعة، وإيجان أكثر البقع نشاطاً، ثم عدّ كل نحلة على حدة. إنه عمل بطيء، وقد يختلف الأطباء في طريقة العدّ.
هنا يأتي دور الذكاء الاصطناعي (AI). لفترة من الوقت، كان الذكاء الاصطناعي بارعاً في النظر إلى صورة كاملة والقول: "هذا يبدو كسرطان" أو "هذا يبدو صحياً". يُسمى هذا التصنيف (classification). لكن عدّ أشياء صغيرة ومحددة منتشرة عبر صورة ضخمة هو أمر أصعب بكثير؛ ويُسمى كشف الأشياء (object detection). مؤخراً، بنى العلماء نماذج ذكاء اصطناعي ضخمة تسمى النماذج التأسيسية (Foundation Models). فكر في هذه النماذج كطلاب أذكياء جداً قرأوا ملايين الكتب (الصور) دون أن يتم إخبارهم بالإجابات، فتعلموا التعرف على الأنماط بأنفسهم. السؤال الكبير كان: هل يمكن لهؤلاء الطلاب الأذكياء جداً، وهم خبراء في فهم "طابع" الصورة بأكملها، أن يكونوا بارعين أيضاً في إيجاد وعدّ تلك الخلايا المنقسمة الصغيرة والمحددة دون الحاجة إلى إعادة تدريبهم من الصفر؟
هذه الورقة البحثية تشبه امتحاناً صارماً لهؤلاء الطلاب الأذكياء جداً. فقد أخذ الباحثون عدة نماذج ذكاء اصطناعي شهيرة ومُدربة مسبقاً (النماذج التأسيسية) وطلبوا منهم العمل كـ "عيون" لنظام كشف يعمل كمحقق مصمم لعدّ الأشكال الانقسمية. لم يعلّموا النماذج أي شيء جديد؛ بل قاموا فقط بتجميد عقولهم وطلبوا منهم القيام بالمهمة. وقاموا بمقارنة هؤلاء الخبراء "المجمدين" مقابل ذكاء اصطناعي قياسي تم تدريبه بالكامل من الصفر خصيصاً لمهمة العدّ هذه.
كانت النتائج مثيرة للاهتمام بشكل مفاجئ. وجدت الورقة أن النماذج المجمدة والمُدربة مسبقاً كانت جيدة جداً في أداء المهمة. في الواقع، أدى أحد النماذج المسمى H-Optimus-0 أداءً يقارب أداء المتخصص المدرب بالكامل، وعند اختباره على نوع مختلف تماماً من البيانات (مثل مدينة جديدة ذات لوحات إرشادية مختلفة)، كانت النماذج المجمدة أكثر قوة ومتانة من المتخصص. يشير هذا إلى أن "المعرفة" التي اكتسبتها هذه النماذج من مجرد النظر إلى ملايين الصور كانت غنية بما يكفي لرصد هذه الخلايا المنقسمة الصغيرة، حتى دون تدريب إضافي. ومع ذلك، تشير الورقة أيضاً إلى أن "رأس" المحقق (الجزء الذي يتخذ القرار النهائي بالفعل) كان مهماً للغاية؛ إذ كانت بعض أساليب التحقيق تعمل بشكل أفضل من غيرها. وبينما كانت النماذج المجمدة تنافسية، إلا أن المتخصص المدرب بالكامل كان لا يزال يحتفظ بتفوق طفيف في منطقته الأصلية، مما يعني أنه لا تزال هناك مساحة للتحسين إذا سمحنا للنماذج بأن تتعلم القليل من الإضافات. لكن الخلاصة الرئيسية واضحة: هذه النماذج المدربة مسبقاً قوية بما يكفي لتكون العمود الفقري لنظام كشف السرطان، مما يوفر الوقت ويساعد الأطباء في اتخاذ قرارات أكثر اتساقاً.
ملخص تقني: ما وراء التصنيف: النماذج التأسيسية لعلم الأمراض كمشفرات للكشف عن الأشكال الانقسامية
بيان المشكلة أظهرت النماذج التأسيسية لعلم الأمراض (FMs)، مثل UNI وVirchow وH-Optimus، أداءً قويًا في مهام التصنيف على مستوى الصورة والرقعة (patch-level) من خلال الاستفاتادة من التعلم الخاضع للإشراف الذاتي على مجموعات بيانات ضخمة غير مصنفة من الأنسجة المرضية. ومع ذلك، لا تزال فائدتها في مهام الكشف عن الأجسام الكثيفة غير واضحة. وتحديدًا، من غير المعروف ما إذا كانت الفضاءات الكامنة لهذه النماذج التأسيسية —التي تم تدريبها أساسًا على الإشراف الذاتي على مستوى الصورة— تحتوي على سمات تمييزية ومحلية دقيقة بما يكفي لتعمل كعمود فقري (backbone) للكشف عن الأشكال الانقسامية (mitotic figures - MFs). يعد الكشف عن الأشكال الانقسامية مهمة بالغة الأهمية في علم الأورام من أجل التصنيف التنبؤي، لكنها تتطلب تحديدًا مكانيًا دقيقًا بدلاً من التلخيص الدلالي. وقد أظهرت المحاولات السابقة لدمج النماذج التأسيسية في مسارات الخلايا (مثل ++CellViT) أن التمثيلات القوية للتصنيف لا تنتقل تلقائيًا إلى مهام الكشف، وغالبًا ما يكون أداؤها أقل من النماذج المدربة من الصفر. تبحث هذه الدراسة فيما إذا كانت الأعمدة الفقارية المجمدة للنماذج التأسيسية يمكن أن تنافس النماذج الالتفافية (convolutional) التقليدية المدربة بالكامل (end-to-end) في الكشف عن الأشكال الانقسامية.
المنهجية أجرى المؤلفون تقييمًا منهجيًا يقارن بين النماذج التأسيسية لـعلم الأمراض المجمدة مقابل نموذج مرجعي التفافي تقليدي على مجموعة بيانات MIDOG++ متعددة المجالات ومجموعة بيانات TUPAC16 خارج النطاق (OOD).
الأعمدة الفقارية (Backbones): تم تقييم ستة نماذج تأسيسية تعتمد على بنية ViT كأدوات استخراج ميزات مجمدة تمامًا: UNI، UNI2-h، Virchow، Virchow2، H-Optimus-0، وH-Optimus-1. تمت مقارنتها بنموذجين مرجعيين من نوع ResNet-50: أحدهما مدرب بالكامل (end-to-end) والآخر مجمد.
رؤوس الكشف (Detection Heads): تم إقران كل عمود فقري بثلاث بنيات كشف متميزة تمثل نماذج مختلفة:
مرحلة واحدة: RetinaNet
مرحتان: Faster R-CNN
تنبؤ المجموعة القائم على المحولات (Transformer-based set prediction): Deformable DETR
تكييف البنية (Architecture Adaptation): نظرًا لأن أعمدة ViT تُخرج خرائط ميزات بمقياس واحد بينما تتطلب أدوات الكشف تسلسلات هرمية متعددة المقاييس، فقد تم إدراج "عنق" خفيف الوزن لـ "هرم الميزات" (Feature Pyramid Neck) (بناءً على تصميم ViTDet) بين العمود الفقري المجمد ورأس الكشف. كان هذا "العنق" هو المكون الوحيد القابل للتعلم في تكوينات العمود الفقري المجمد، وكان مسؤولًا عن تكييف التمثيلات أحادية المقياس إلى تنبؤات كثيفة متعددة المقاييس.
بروتوكول التدريب: تم تدريب جميع النماذج باستخدام إطار عمل MMDetection مع توحيد عمليات تعزيز البيانات (القلب، التحويلات التقاربية، تذبذب الصبغة) وإعدادات التحسين (AdamW، وجداول معدل التعلم من نوع cosine/step). شملت مقاييس التقييم متوسط F1 الدقيق، والدقة، والاستدعاء، والمساحة تحت منحنى خصائص التشغيل الحر (FROC-AUC).
النتائج الرئيسية أسفرت الدراسة عن الخصائص الأدائية التالية على مجموعة اختبار MIDOG++ ومجموعة TUPAC16 خارج النطاق (OOD):
التنافسية للنماذج التأسيسية المجمدة: حقق أفضل تكوين للنماذج التأسيسية المجمدة (H-Optimus-0 مع RetinaNet) درجة F1 بلغت 0.7718 على MIDOG++، وهو ما يقترب بشدة من النموذج المرجعي ResNet-50 المدرب بالكامل (F1 0.7917). ومن الجدير بالذكر أن النماذج التأسيسية المجمدة تفوقت بشكل كبير على نموذج ResNet-50 المجمد (أفضل F1 بلغ 0.7498)، مما يشير إلى أن الميزة تنبع من التدريب المسبق الخاص بعلم الأمراض وليس مجرد فعل تجميد العمود الفقري.
تأثير رؤوس الكشف: تباين الأداء بشكل كبير بناءً على رأس الكشف. كان RetinaNet الرأس الأكثر موثوقية، حيث حقق أعلى درجات F1 لكل من ResNet-50، وH-Optimus-0، وVirchow. وأظهرت نماذج Faster R-CNN وDeformable DETR نتائج أكثر تباينًا اعتمادًا على العمود الفقري.
المتانة خارج النطاق (OOD Robustness): على مجموعة بيانات TUPAC16، انعكس ترتيب الأداء. فقد حقق أفضل F1 إجمالي (0.7349) بواسطة نموذج تأسيسي مجمد (H-Optimus-0 مع RetinaNet)، متفوقًا على أفضل تكوين لـ ResNet-50 (0.7193). يشير هذا إلى أن ميزات النماذج التأسيسية المجمدة قد تكون أكثر متانة تجاه تغيرات النطاق (domain shifts) مقارنة بالشبكات الالتفافية المدربة بالكامل على النطاق المصدر.
ترتيب النماذج التأسيسية: بين النماذج التأسيسية، تصدرت نماذج H-Optimus الخاصة بعلم الأمراض (0 و1) الأداء بشكل عام، تلتها عن كثب عائلة Virchow. بينما جاءت نماذج UNI وUNI2-h في المرتبة الأخيرة.
الأهمية والادعاءات خلصت الورقة إلى أن الفضاءات الكامنة المجمدة للنماذج التأسيسية الحالية غنية بما يكفي ومحددة مكانيًا لدعم الكشف الكثيف عن الأشكال الانقسامية دون أي تكييف للمهام على أوزان العمود الفقري. ويدعي المؤلفون ما يلي:
المعلومات المكانية موجودة: على الرغم من تدريب هذه النماذج حصريًا على الإشراف الذاتي على مستوى الصورة، إلا أنها تشفر المعلومات المكانية اللازمة لتحديد مواقع الأجسام الصغيرة مثل الأشكال الانقسامية، والتي يمكن استعادتها بواسطة "عنق" ورأس خفيف الوزن.
المتانة: تظهر النماذج التأسيسية المجمدة درجة من المتانة تجاه تغيرات النطاق تتجاوز الشبكات الالتفافية المدربة بالكامل في هذا الإعداد المحدد للكشف.
الآثار التصميمية: تسلط الدراسة الضوء على أن اختيار رأس الكشف و"العنق" أمر بالغ الأهمية، وغالبًا ما يفوق في أهميته الاختلافات بين نماذج تأسيسية محددة.
ويبقى المؤلفون حذرين، مشيرين إلى أن هذه النتائج تصف المعلومات الموجودة في التمثيلات المجمدة. ويقترحون أن الضبط الدقيق عالي الكفاءة للمعلمات (مثل LoRA) قد يقلص الفجوة المتبقية مع النماذج المدربة بالكامل، ومع ذلك يظل السؤال مفتوحًا حول ما إذا كان هذا التكييف سيحافظ على المتانة الملحوظة خارج النطاق. يثبت هذا العمل أن النماذج التأسيسية هي أعمدة فقارية قابلة للتطبيق لمهام الكشف الكثيف في علم الأمراض، متجاوزة دورها الراسخ في مهام التصنيف.