How reliable is deep learning segmentation of the infant brain? Variability and failure analysis of segmentation pipelines under a common protocol in 51 infants aged 1 to 9 months
تُظهر هذه الدراسة أنه في حين تحقق ثلاثة مسارات تعلم عميق ثلاثية الأبعاد مهيأة بكفاءة دقة عالية مماثلة في تقسيم أدمغة الرضع مع فروق ضئيلة ناتجة عن إعادة التدريب أو التحقق المتقاطع، فإن نهج إجماع بسيط يقضي بفعالية على حالات الفشل النادرة في التقسيم، مما يسلط الضوء على الحاجة الماسة للإبلاغ عن التباين ومعدلات الفشل بدلاً من الاعتماد فقط على متوسط درجات "دايس" (Dice scores).
المؤلفون الأصليون:Tasnia Binte Mamun, Samiul Based Shuvo
ينمو دماغ الإنسان في السنة الأولى من الحياة بسرعة أكبر من أي وقت آخر. خلال هذه الفترة، تخضع الأنسجة الرخوة داخل الجمجمة لتحول جذري حيث تتقسى وتُنظم نفسها. وللأطباء والباحثين الذين يحاولون فهم كيفية تطور الطفل، أو رصد العلامات المبكرة للمشاكل، يعد رؤية ما بداخل هذا المشهد المتغير أمراً ضرورياً. إنهم يستخدمون التصوير بالرنين المغناطيسي، وهو ماسح ضوئي قوي ينشئ صوراً تفصيلية دون استخدام الإشعاع. ومع ذلك، فإن تحويل هذه الصور إلى بيانات مفيدة أمر صعب؛ فالدماغ يتكون من أجزاء صغيرة مطوية كثيرة، وفي حالة الرضيع، غالباً ما يختفي التباين بين هذه الأجزاء لبضعة أشهر، مما يجعلها تبدو ككتلة رمادية متجانسة. ولدراسة النمو، يحتاج العلماء إلى حساب حجم مناطق معينة، لكن القيام بذلك يدوياً بطيء وعرضة للخطأ البشري. مؤخراً، تدخل الذكاء الاصطناعي للقيام بالعد تلقائياً، مستخدماً التعلم العميق للتعرف على هياكل الدماغ ورسم الخطوط المحيطة بها. والأمل هو أن توفر هذه البرامج الحاسوبية طريقة موثوقة وسريعة لقياس دماغ الرضيع، ولكن يبقى السؤال: هل يمكننا الوثوق بها عندما تكون الصور معقدة للغاية؟
وضع فريق من الباحثين هدفاً لاختبار مدى موثوقية هذه الأدوات التلقائية على مجموعة مكونة من واحد وخمسين رضيعاً، تتراوح أعمارهم بين شهر واحد وتسعة أشهر. جمعوا مجموعة من سبعة وسبعين مسحاً دماغياً، يحتوي كل منها على صور موزونة بنوعي T1 وT2، وهما طريقتان مختلفتان لالتقاط بنية الدماغ. ولضمان اختبار عادل، لم يكتفوا بالنظر إلى النتائج النهائية فحسب؛ بل فحصوا كيف تتصرف الأدوات عندما تتغير البيانات قلي تساً أو عند تشغيل الأداة نفسها عدة مرات. وقارنوا بين أربعة أنظمة مختلفة من الذكاء الاصطناعي تم تدريبها خصيصاً على بيانات الرضع. اختلفت هذه الأنظمة في تصميمها: فبعضها استخدم كتل ثلاثية الأبعاد قياسية لمعالجة الصورة، بينما دمج البعض الآخر مناهج رياضية مختلفة أو نظر إلى الدماغ عبر شرائح. كما أنشأ الباحثون نسخة "إجماع"، حيث تصوت الأنظمة الأربعة على الإجابة النهائية لكل جزء من الدماغ، آملين أن يؤدي الجمع بين آرائهم إلى تنقية الأخطاء الفردية.
أظهرت النتائج أن الأنظمة الثلاثة الأكثر تقدماً والتي تعمل بنظام ثلاثي الأبعاد قد أدت أداءً جيداً للغاية، بمتوسط درجة دقة بلغ حوالي 0.88 من 1.0. وهذا يعني أنها حددت الغالبية العظمى من أنسجة الدماغ بشكل صحيح. أما النظام الرابع، الذي نظر إلى الدماغ عبر شرائح، فقد كان أداؤه أسوأ بشكل ملحوظ، حيث سجل درجة تقارب 0.79. ومع ذلك، كانت الاختلافات بين أفضل ثلاثة أداءً ضئيلة جداً لدرجة أنها تكاد لا تُلحظ. في الواقع، وجد الباحثون أن التباين الناتج عن مجرد تغيير الأطفال الموجودين في مجموعة التدريب كان أكبر من الفرق بين أفضل نظام وثاني أفضل نظام. وهذا يشير إلى أنه بالنسبة لهذه الأدوات جيدة الإعداد، فإن الاختيار المحدد للخوارزمية يقل أهمية عن ضمان التعامل مع البيانات بشكل صحيح. أحد الأنظمة ارتكب خطأً جسيماً في مسحين محددين، حيث فشل في تحديد العديد من هياكل الدماغ العميقة تماماً، بينما تعاملت الأنظمة الأخرى مع تلك المسوحات بشكل صحيح. وقد سلط هذا الضوء على أن حتى الأدوات عالية الأداء يمكن أن تقع في إخفاقات كارثية نادرة يتم إخفاؤها عندما يتم الإبلاغ عن متوسط الدرجات فقط.
عندما جمع الباحثون تنبؤات الأنظمة الأربعة في إجماع واحد، كانت النتيجة أكثر قوة. هذا النهج المدمج قضى على جميع حالات الفشل الكلي، مما يعني أنه لم يتم تفويت أي هياكل دماغية تماماً، وحسّن الدقة الإجمالية قليلاً. كما بحثت الدراسة فيما إذا كان عمر الطفل أو جودة الصورة يؤثران على النتائج، ووجدوا أنه لا يوجد دليل على أن الأدوات تعمل بشكل أفضل أو أسوأ مع تقدم عمر الرضع، حتى خلال الفترة الصعبة التي تبدو فيها أنسجة الدماغ أكثر تجانساً. وبالمثل، لم يبدُ أن الأدوات تعاني أكثر مع أنواع معينة من تباين الصور. وخلص الباحثون إلى أنه بينما أصبحت أدوات الذكاء الاصطناعي هذه قادرة الآن على تقسيم أدمغة الرضع بدقة عالية، فإن الطريقة التي يتم بها الإبلاغ عن أدائها تحتاج إلى تغيير؛ فالاكتفاء بمتوسط رقم واحد ليس كافياً، بل يجب على الباحثين أيضاً الإبلاغ عن عدد المرات التي تفشل فيها الأدوات تماماً، ومدى تباين النتائج عندما تتغير بيانات التدريب، وما إذا كانت الأدوات تتفق مع بعضها البعض في كل حالة على حدة.
تعد هذه الدراسة بمثابة تذكير بأنه في عالم التصوير الطبي، لا يضمن متوسط الدرجات المرتفع السلامة أو الموثوقية لكل مريض على حدٍ سواء. فقد وجد الباحثون أن مسحين محددين كانا مسؤولين عن معظم الأخطاء التي ظهرت في الدراسة، وهي حقيقة كانت ستغيب لو اكتفوا بالنظر إلى متوسط المجموعة. ومن خلال التحقق من هذه الإخفاقات النادرة وفهم كيفية سلوك هذه الأدوات عبر مجموعات مختلفة من البيانات، يمكن للعلماء بناء أنظمة أكثر موثوقية. وقد أثبت منهج الإجماع، الذي يعتمد ببساة على جعل أدوات متعددة تصوت على الإجابة، أنه وسيلة بسيطة وفعالة لإزالة أسوأ الأخطاء دون الحاجة إلى تدريب نموذج جديد ومعقد. وبالنسبة لأطباء الأشعة المتخصصين في طب الأطفال والباحثين، فإن الطريق نحو المستقبل لا يقتصر فقط على إيجاد الأداة الأكثر دقة، بل يتطلب وضع معيار لكيفية اختبارها والإبلاغ عنها، لضمان أن الأدوات المستخدمة لقياس تطور الطفل هي بنفس موثوقية العلم الذي تدعمه.
ملخص تقني: موثوقية وتغير تقطيع الصور بالتعلم العميق في رنين الدماغ للرضع
بيان المشكلة يُستخدم التقطيع (segmentation) القائم على التعلم العميق بشكل متزايد لاستخراج أحجام الدماغ والبيانات المورفومترية من تصوير الرنين المغناطيسي للرضع. ومع ذلك، تمثل السنة الأولى بعد الولادة تحديًا فريدًا: وهي "فترة التماثل في الكثافة" (isointense period) (حوالي 4-8 أشهر) حيث يظهر تباين ضعيف بين المادة الرمادية والمادة البيضاء في صور الرنين المغناطني الموزونة بـ T1 وT2، مما يؤدي إلى تدهور الطرق المصممة للأدمغة الأكبر سنًا. غالبًا ما تعتمد ممارسات التقييم الحالية على متوسط درجة "دايس" (Dice score) واحدة لتصنيف المسارات البرمجية (pipelines). ويجادل المؤلفون بأن هذا النهج يحجب التباين الحرج، بما في ذلك تقلبات إعادة التدريب، وآثار تقسيم التحقق المتقاطع، والإخفاقات الكارثية النادرة لكل صورة (per-scan failures) التي يمكن أن تؤثر بشكل غير متناسب على متوسطات المجموعات. تهدف الدراسة إلى قياس مدى كون الاختلافات الملحوظة بين المسارات تعكس فجوات حقيقية في الأداء أم مجرد ضوضاء إحصائية وأنماط فشل، واشتقاق نموذج تقرير قوي للتحقق من صحة هذه الأدوات.
المنهجية أجرى البحث تقييمًا حوسبيًا استرجاعيًا باستخدام مجموعة بيانات Baby Open Brains (BOB) العامة، والتي تضم 71 زيارة لصور الرنين المغناطني الموزونة بـ T1 وT2 من 51 رضيعًا (تتراوح أعمارهم بين 1.0 إلى 9.4 أشهر) مع 31 تقطيعًا مرجعيًا تم تصحيحه من قبل خبراء.
المسارات التي تم تقييمها: تمت مقارنة أربعة مسارات مختلفة للتعلم العميق كأنظمة متكاملة:
nnU-Net: شبكة عصبية تلافيفية ثلاثية الأبعاد ذاتية التكوين.
3D TransUNet: هجين بين التلافيف والمحولات (convolution–transformer hybrid).
STSNet: شبكة عصبية تلافيفية ثنائية ونصف الأبعاد (2.5D) مكيفة للأهداف الصغيرة (باستخدام سياق الشرائح المتجاورة).
تم أيضًا إنشاء إجماع عبر التوافق (cross-fitted consensus) عبر التصويت بالأغلبية على مستوى الفوكسل (voxelwise plurality voting) من تنبؤات الأجزاء خارج المجموعة (out-of-the-fold) للمسارات الأربعة.
التصميم التجريبي:
التحقق المتقاطع المنفصل حسب الموضوع (Subject-Disjoint Cross-Validation): تم استخدام تقسيم خماسي المجلدات (five-fold split) حيث تم تخصيص جميع زيارات الرضيع الواحد لنفس المجلد لمنع تسرب البيانات.
التجميع الموزون حسب الموضوع: تم حساب المتوسطات داخل كل رضيع أولاً، ثم عبر الـ 51 رضيعًا مع وزن متساوٍ لمنع سيطرة الرضع ذوي الزيارات المتكررة على النتائج.
المقاييس: معامل تشابه دايس (Dice)، ودرجة سطح دايس المعيارية (NSD@1mm)، ومسافة هوسدورف عند المئوية 95 (HD95)، ومتوسط مسافة السطح المتماثلة (ASSD). تم التعامل مع التنبؤات الفارغة عبر سياسة محددة مسبقًا (تُخصص صفر لمقاييس التداخل؛ وتُستبعد لمقاييس السطح).
التحليل الإحصائي: استخدمت الدراسة اختبار ويلكوكسون للرتب الموقعة المقترن (paired Wilcoxon signed-rank tests) مع تصحيح هولم (Holm correction)، وأحجام تأثير كوهين (Cohen's d)، والنمذجة الخطية لتقييم مساهمة حد المسار مقابل العوامل الأخرى (الحجم، نسبة السطح إلى الحجم، العمر). تم قياس تباين إعادة التدريب من خلال عمليات تشغيل متكررة على نفس المجلدات، بينما تم تقييم تباين التقسيم من خلال مقارنة الاختلافات بين المجلدات.
النتائج الرئيسية
دقة الأداء: حقق مسار الإجماع أعلى متوسط "دايس" (0.8867)، يليه 3D TransUNet (0.8805)، ثم Swin UNETR (0.8772)، وnnU-Net (0.8722). أما STSNet (2.5D) فقد كان أداؤه أقل بشكل ملحوظ (0.7868).
تباين المسارات: بين المسارات الثلاثة ثلاثية الأبعاد، فسر حد "المسار" (pipeline term) فقط 0.134% من تباين "دايس" (p=0.177). كانت جميع فترات الثقة لفرق المتوسطات الزوجية تتضمن الصفر، وكانت أحجام التأثير المعيارية صغيرة (∣d∣≤0.22).
مصادر التباين:
تباين إعادة التدريب: ضئيل (الانحراف المعياري لمتوسطات المجلدات ≈0.0005–0.0016).
تباين التقسيم: أكبر بكثير (الانحراف المعياري عبر المجلدات ≈0.0258). انعكس اتجاه فروق الأداء بين nnU-Net وSwin UNETR اعتمادًا على المجلد.
تحليل الفشل:
الإخفاقات النادرة: تسببت صورتان محددتان في معظم حالات الفشل والشذوذ الإحصائي. تسببت إحدى الصور في جميع التنبؤات الفارغة لـ nnU-Net؛ بينما تسببت الأخرى في التنبؤ الفارغ الوحيد لـ 3D TransUNet.
عدم الاتفاق بين المتوسط والوسيط: بالنسبة للمقارنة بين nnU-Net وSwin UNETR، كان فرق المتوسط سالبًا ($-0.0050$)، مما يشير إلى أن Swin UNETR أفضل، بينما كان الوسيط موجبًا (+0.0072) وفاز nnU-Net في 42 من أصل 51 رضيعًا. نتج هذا الانعكاس بالكامل عن هاتين الصورتين المؤثرتين.
فائدة الإجماع: قضى مسار الإجماع (consensus) على جميع التنبؤات الفارغة ووفر زيادة طفيفة في متوسط "دايس" عن 3D TransUNet، رغم أن فترة الثقة لهذه الزيادة تضمنت الصفر.
التأثيرات الهندسية والعمرية: ارتبطت درجات "دايس" ارتباطًا سلبيًا قويًا بنسبة السطح إلى الحجم للهياكل (ρ=−0.836). لم يتم العثور على ارتباط معنوي بين أداء التقطيع والعمر الزمني أو تباين الصورة، رغم التغيرات المعروفة في التباين خلال فترة التماثل في الكثافة.
المساهمات الرئيسية
قياس التباين: تثبت الدراسة أنه بالنسبة للمسارات ثلاثية الأبعاد ذات التكوين الكفء، فإن الاختلافات في متوسط الأداء تتضاءل أمام تباين التقسيم من مجلد لآخر وتأثير الإخفاقات الكارثية النادرة.
تحديد نمط الفشل: تسلط الضوء على أن مسحًا واحدًا يمكن أن يقود الإحصاءات على مستوى المجموعة، مما يؤدي إلى استنتاجات متناقضة اعتمادًا على ما إذا كان يتم الإبلاغ عن المتوسط أو الوسيط أو المقاييس القائمة على الرتب.
نموذج الإبلاغ: يقترح المؤلفون نموذج تقرير مكونًا من تسعة عناصر (الجدول 6) لعمليات التقييم المستقبلية. يتضمن هذا متطلبات التقسيم المنفصل حسب الموضوع، وسياسات التنبؤ الفارغ الصريحة، والإبلاغ عن تباين إعادة التدريب/التقسيم، وفحص تركيزات الفشل.
خط الأساس للإجماع: يضع (النموذج) أساسًا بأن الإجماع القائم على التصويت البسيط يمكن أن يزيل حالات الفشل الكلي للتقطيع (الأقنعة الفارغة) دون تدريب إضافي، مما يعمل كخط أساس للمتانة.
الأهمية والادعاءات يزعم البحث أن ثلاثة مسارات ثلاثية الأبعاد متاحة ومعدة بكفاءة يمكنها تقطيع دماغ الرضيع بدقة عالية (متوسط دايس > 0.87) عبر نطاق العمر الصعب (1-9 أشهر)، دون وجود اعتماد مكتشف على العمر أو التباين.
ومع ذلك، يلتزم المؤلفون بموقف متواضع وحذر فيما يتعلق بتعميم هذه النتائج:
لا يوجد تكافؤ: إن عدم وجود فرق ذي دلالة إحصائية بين المسارات ثلاثية الأبعاد ليس دليلًا على التكافؤ، حيث لم يتم تحديد هامش تكافؤ مسبقًا.
الثقة عبر التقييم: يجادل المؤلفون بأن الثقة في أدوات تقطيع الذكاء الاصطناعي يجب أن تستند إلى كيفية تقييمها (مثل الإبلاغ عن التباين، وعدد حالات الفشل، واستقرار التقسيم) وليس فقط على درجات المتوسط الرئيسية وحدها.
القيود: تقتصر الدراسة على مجموعة واحدة من موقع واحد دون تحقق خارجي. ويذكر المؤلفون صراحةً أن غياب تأثير العمر المكتشف في هذه العينة لا يثبت عدم وجود مثل هذا التأثير في أماكن أخرى.
السلامة السريرية: هذه الدراسة هي تقييم بحثي على مجموعة بيانات عامة؛ ولا يدعي المؤلفون أي شيء فيما يتعلق بالسلامة السريرية أو الجاهزية للنشر.
في الختام، تشير الورقة إلى أنه بينما تعد مسارات التعلم العميق ثلاثية الأبعاد الحالية واعدة لأبحاث تصوير الرضع، يجب على المجال أن يتجاوز لوحات الصدارة ذات الدرجة الواحدة إلى الإبلاغ عن التباين، وأنماط الفشل، والمتانة لضمان استدلال مورفومتري موثوق.