Can Coding Agents Build Robust Baselines? A Skill-Based Approach for Automating the Medical Imaging Model-Development Pipeline
تقدم هذه الورقة سير عمل للذكاء الاصطناعي الوكيل القائم على المهارة والموجه بالأدبيات، والذي يعمل على أتمتة خط إنتاج تطوير نماذج التصوير الطبي بأكمله، حيث نجح في توليد نماذج مرجعية للتعلّم العميق تنافسية عبر معايير متنوعة للتجزئة والتصنيف والكشف، مع تقليل الجهد الهندسي بشكل كبير.
المؤلفون الأصليون:Eugenia Moris, José Ignacio Orlando
في عالم التصوير الطبي، أصبحت الحواسيب ماهرة بشكل ملحوظ في النظر داخل جسم الإنسان. فهي تستطيع مسح صور الأنسجة والخلايا والأعضاء لرصد علامات المرض التي قد تخطئها العين البشرية. ولجعل هذه الحواسيب تعمل، يبني العلماء نماذج رقمية تتعلم من آلاف الأمثلة. ومع ذلك، فإن إنشاء نموذج جيد بما يكفي ليكون موثوقاً به هو عملية بطيئة وصعبة ومكلفة؛ إذ تتطلب من الخبير البشري قراءة عدد لا يحصى من الأوراق البحثية، وكتابة أكواد حاسوبية معقدة، وإجراء آلاف الاختبارات، وتعديل الإعدادات مراراً وتكراراً. هذه الدورة من التجربة والخطأ مرهقة للغاية لدرجة أنها غالباً ما تستغرق أسابيع أو شهوراً لمجرد بناء نقطة انطلاق واحدة موثوقة لمشكلة طبية جديدة. والسؤال الذي يواجه الباحثين اليوم هو ما إذا كان بإمكان الكمبيوتر أن يتعلم القيام بهذا العمل الشاق بنفسه، ليعمل كشريك يتولى المهام المملة بينما يركز الخبير البتمسي على الصورة الكبيرة.
لقد طور فريق من الباحثين طريقة جديدة للإجابة على هذا السؤال باستخدام نظام أطلقوا عليه اسم "العالم الاصطناعي" (AI Scientist). فبدلاً من مطالبة الكمبيوتر بمجرد التخمين بشأن أفضل الإعدادات، قاموا ببناء سير عمل يحاكي طريقة تفكير الباحث البشري. تبدأ العملية بقراءة الكمبيوتر للأدبيات العلمية لفهم المشكلة الطبية المحددة، تماماً مثل طالب يدرس من أجل امتحان قبل خوض الاختبار. ثم يستخدم هذه المعرفة لكتابة الكود الحاسوبي الأولي اللازم لتدريب النموذج. لكن النظام لا يتوقف عند هذا الحد؛ بل يدخل مرحلة التجريب النشط، حيث يقترح تغييراً، ويجري اختباراً، ويحلل النتيجة بعناقة. فإذا كان التغيير مفيداً، يحتفظ به النظام، وإذا كان ضاراً، يسجل النظام هذا الفشل كمعلومة قيمة ويجرب شيئاً آخر. وتتكرر هذه الدورة، مسترشدة بسجل مستمر لما نجح وما فشل، حتى يبني الكمبيوتر نموذجاً قوياً جاهزاً للاستخدام في العالم الحقيقي.
اختبر الباحثون هذا النهج على أربعة تحديات طبية مختلفة، تتراوح بين إيجاد أنواع محددة من الخلايا واكتشاف الأورام في عينات الأنسجة. لم يعيدوا تصميم النظام لكل مهمة؛ بل استخدموا نفس المجموعة من المهارات لمعالجة مشكلات مختلفة تماماً عن بعضها البعض. وفي كل حالة، بدأ الكمبيوتر بخطة أساسية مستمدة من الأبحاث القائمة ثم طورها من خلال تجاربه الخاصة. كانت النتائج مذهلة؛ ففي تحدٍ لتحديد هياكل الأنسجة، أنتج النظام نموذجاً احتل المركز السادس من بين خمسة عشر فريقاً. وفي مهمة أخرى تتعلق بتصنيف العينات في تحدي MILK10k، جاء في المركز الحادي والثلاثين من بين مائة وخمسة وعشرين مشاركة. ولعل الأمر الأكثر إثارة للإعجاب هو أنه عند اختباره على مجموعة بيانات تتضمن أنواعاً مختلفة من الحيوانات وأنواعاً متنوعة من الماسحات الطبية، قدم النموذج أداءً جيداً باستمرار، مما أظهر أنه تعلم مبادئ عامة بدلاً من مجرد حفظ بيانات التدريب.
إن ما يجعل هذا الإنجاز مهماً ليس فقط التصنيف النهائي، بل سرعة وكفاءة العملية. فقد استغرق سير العمل بأكمله، من البيانات الخام إلى النموذج النهائي، ما بين يومين وسبعة أيام. وطوال هذا الوقت، كان هناك باحث بشري حاضراً للإشراف على العملية، حيث راجع خطط الكمبيوتر وأطلق التجارب، لكن الكمبيوتر تولى بالفعل عملية البرمجة وآلاف القرارات الصغيرة المطلوبة لتحسين النموذج. لقد أثبت النظام قدرته على التنقل في المشهد المعقد لتطوير التصوير الطبي دون أن يضل الطريق، مستخدماً الأدلة من تجاربه الخاصة لتوجيه خطواته التالية. لقد نجح في تجنب المسارات غير المجدية ومضاعفة الرهان على الاستراتيجيات التي أظهرت نتائج واعدة، مما أدى فعلياً إلى أتمتة الجهد الهندسي الذي يستهلك عادةً معظم الوقت.
تشير الدراسة إلى أن هذا النهج القائم على المهارات يمثل خطوة عملية نحو مستقبل يدعم فيه الذكاء الاصطناعي العلماء طوال دورة حياة تطوير النماذج. ومن خلال تولي المهام المتكررة الخاصة بالتنفيذ والضبط، يسمح النظام للخبراء البشريين بالتركيز على التفكير العلمي الأعمق، وتوليد فرضيات جديدة، والتفسير السريري للنتائج. وبينما لا يزال النظام غير مستقل تماماً ولا يزال يتطلب إشرافاً بشرياً لضمان السلامة والصلاحية، فإن النتائج تثبت أن سير العمل المنظم والقائم على الأدلة يمكن أن يقلل بشكل كبير من حواجز الدخول لتطوير أدوات تصوير طبي تنافسية. إن هذا العمل يظهر أن الحواسيب يمكنها بالفعل بناء نماذج أساسية قوية، محولةً عملية كانت تتطلب سابقاً شهوراً من العمل الخبير إلى مسألة أيام، كل ذلك مع الحفاظ على معيار عالٍ من الأداء عبر مهام طبية متنوعة وصعبة.
ملخص تقني: هل يمكن لوكلاء البرمجة بناء نماذج مرجعية قوية؟
بيان المشكلة
لا يزال تطوير النماذج المرجعية (baselines) التنافسية في التعلم العموي للصور الطبية عملية تكرارية للغاية وتتطلب خبرة مكثفة. فهي تتطلب تسلسلاً معقداً من القرارات المترابطة التي تشمل المعالجة المسبقة، واختيار البنية الهيكلية، والتحسين، وتعزيز البيانات، وتصميم دالة الخسارة، والتقييم. تتطلب هذه المهام معرفة في كل من المجال السريري ومجال تعلم الآلة، مما يجعل تطوير النماذج المرجعية مكلفاً، ومستهلكاً للوقت، وصعب التوسع. وبينما عالجت جهود الأتمتة السابقة مراحل معزولة — مثل تحسين المعلمات الفائقة (hyperparameter optimization)، أو البحث عن البنى العصبية (neural architecture search)، أو تعزيز البيانات المؤتمت، إلا أنها غالباً ما تفشل في دمج هذه المكونات في سير عمل موحد مصمم خصيصاً للصور الطبية. علاوة على ذلك، فإن الوكلاء القائمين على النماذج اللغوية الكبيرة (LLM) الحالية تعمل عادةً كمساعدين بحثيين عامين بدلاً من كونها خطوط إنتاج متخصصة لتوليد نماذج مرجعية شاملة (end-to-end).
المنهجية
يقترح المؤلفون سير عمل "العالم الذكي الوكيل" (agentic AI Scientist workflow) الذي يدمج التخطيط الموجه بالأدبيات، والتنفيذ المؤتمت، والتجريب القائم على الفرضيات. تم بناء الإطار على نهج "قائم على المهارات" حيث تقوم مهارات مستقلة مدفوعة بالنماذج اللغوية الكبيرة، ذات مدخلات ومخرجات صريحة، بتنسيق عملية التطوير. يتكون سير العمل من ثلاثة خطوط إنتاج متتالية:
خط إنتاج المعرفة بأحدث ما توصل إليه العلم (SOTA Knowledge Pipeline): يقوم هذا الخط بتحويل مجموعة بيانات خام إلى خطة تطوير أولية. ويجري تحليلاً مزدوجاً من منظور سريري ومن منظور تعلم الآلة لتحديد التحديات الرئيسية وخصائص مجموعة البيانات. كما يقوم بتلخيص الأدبيات ذات الصلة وتقارير التحديات لمقارنة الأدلة عبر محاور التصميم (البنية، التحسين، التعزيز، دالات الخسارة). وتُصاغ التوصيات غير المؤكدة أو المتضاربة في شكل فرضيات تجريبية. كما يفحص خط الإنتاج مستودعات الأكواد لتحديد المكونات القابلة لإعادة الاستخدام مقابل تلك التي تتطلب تنفيذاً جديداً.
خط إنتاج إعداد النموذج (Model Setup Pipeline): بناءً على خطة التطوير، يقوم هذا الخط بتهيئة بيئة التنفيذ وتنفيذ تحميل البيانات المحدد، والمعالجة المسبقة، وبنية النموذج، واستراتيجية التحسين، ودالة الخسارة، ومقاييس التقييم. ويقوم بدمج هذه المكونات في إطار عمل PyTorch Lightning مشترك. ومن الجدير بالذكر أن سياسات تعزيز البيانات (data augmentation) مستبعدة هنا، حيث يتم تحسينها خلال مرحلة التجريب اللاحقة.
خط إنتاج التجريب (Experimentation Pipeline): يعمل هذا الخط على صقل النموذج المرجعي من خلال تجارب قائمة على الأدلة. وبدلاً من البحث في فضاء غير مقيد للمعلمات الفائقة، فإنه يتبع سير عمل علمي:
التنفيذ المنظم: يختار منطق قائم على القواعد المكون التالي لتقييمه، وتحدد القوالب القابلة لإعادة الاستخدام هيكل التجربة.
تتبع الأدلة: يسجل شجر تجريبي (experiment tree) مستمر الأدلة الإيجابية والسلبية. ويتم حفظ التجارب المرفوضة كأدلة سلبية لتوجيه القرارات المستقبلية، مما يمنع الوكيل من إعادة زيارة المسارات غير المثمرة.
القيود: يقدر خط الإنتاج نطاقات المعلمات المعقولة سريرياً لتعزيز البيانات باستخدام فحص الصور وقيود الأدبيات لضمان وجود تنوعات واقعية.
يتم تنسيق العملية بأكملها باستخدام Claude Code (تحديداً نموذج Claude Sonnet 4)، مع تنفيذ المهارات كقوالب مهام محددة تتبادل وسائط منظمة بصيغ Markdown وYAML وCSV. ويتم الحفاظ على الإشراف البشري من خلال نقاط مراجعة خفيفة حيث يتحقق الباحث من الوسائط ويطلق التجارب المقترحة، رغم أن التعديلات اليدوية على الكود لم تكن مطلوبة في التجارب المسجلة.
المساهمات الرئيسية
سير عمل وكيل موحد: يقدم البحث إطار عمل مبتكر يجمع بين مراجعة الأدبيات، وتوليد الكود، والتجريب القائم على الفرضيات في خط إنتاج واحد متماسك للصور الطبية، متجاوزاً مهام الأتمتة المعزولة.
بنية قائمة على المهارات: يقوم النظام بتفكيك عملية التطوير إلى مهارات متخصصة وقابلة لإعادة الاستخدام (وصف البيانات، إعداد البيانات، معرفة SOTA، إعداد النموذج، التجريب) تعمل على وسائط منظمة، مما يضمن الشفافية والقابلية للتكرار.
شجرة تجريب مستمرة: على عكس أدوات تتبع التجارب القياسية (مثل MLflow أو Weights & Biases) التي تسجل البيانات الوصفية بشكل أساسي، يحافظ سير العمل هذا على شجرة مهيكلة من الأدلة التجريبية المقبولة والمرفوضة لتوجيه اتخاذ القرار المستقبلي بفعلية.
التعميم عبر المهام: تم تصميم سير العمل للتكيف مع المهام غير المتجانسة (التجزئة، التصنيف، الكشف) دون الحاجة إلى إعادة تصميم منطق الوكيل الأساسي لكل مهمة.
النتائج
تم تقييم الإطار على أربع مجموعات بيانات مرجعية عامة للصور الطبية: PUMA (تجزئة الأنسجة وكشف النوى)، وMILK10k (التصنيف)، وMIDOG25 (كشف الميتوزيس غير النمطي).
مكاسب الأداء: عبر جميع المهام، نجح خط إنتاج التجريب باستمرار في تحسين أداء التحقق. ولوحظت أكبر المكاسب خلال مرحلة "استكشاف التجارب"، لا سيما من خلال استكشاف البنية الهيكلية.
تصنيفات لوحة الصدارة:
PUMA: حقق المركز السادس من أصل 15 فريقاً في كل من مساري تجزئة الأنسجة وكشف النوى.
MILK10k: حقق المركز 31 من أصل 125 مشاركة (بين الطرق التي لا تستخدم مجموعات بيانات خارجية).
MIDOG25: أظهر النموذج الناتج قدرة قوية على التعميم في مجالات مختلفة من الماسحات الضوئية، وأنواع الأورام، والأنواع، محققاً F1 للتحقق قدره 0.855 وF1 للاختبار المستبعد قدره 0.847.
الكفاءة: أنتج سير العمل نماذج مرجعية تنافسية خلال 2 إلى 7 أيام (مقاسة من أول عملية تدريب إلى الاختيار النهائي)، مما قلل بشكل كبير من الجهد الهندسي.
عملية الصقل: نجحت الشجرة التجريبية في توجيه الوكيل لمراجعة القرارات الأولية المستندة إلى الأدبيات (مثل تغيير بنى النماذج) مع التحقق من قرارات أخرى (مثل استراتيجيات التحسين). على سبيل المثال، في MIDOG25، تحسن F1 للتحقق من 0.757 إلى 0.855 من خلال 30 تجربة، منها 17 مقبولة و13 مرفوضة.
الأهمية والادعاءات
يدعي المؤلفون أن سير العمل الوكيل القائم على المهارات والموجه بالأدبيات يمكن أن يقلل بشكل كبير من الجهد الهندسي المطلوب لتطوير نماذج مرجعية تنافسية في مجال الصور الطبية مع الحفاظ على أداء عالٍ. وتوضح الدراسة أن مثل هذه سير العمل يمكنها:
أتمتة معظم دورة حياة تطوير تعلم الآلة، مما ينقل دور الباحث من التنفيذ إلى الإشراف والاستدلال العلمي.
إنتاج نماذج مرجعية قوية وقابلة للتكرار تتعمم عبر مجالات متنوعة من الصور الطبية دون الحاجة إلى استراتيجيات مخصصة للتكيف مع النطاق.
توفير مسار عملي نحو بحث قابل للتوسع في الصور الطبية، مما يسمح للخبراء بالتركيز على توليد الفرضيات والتفسير السريري.
يشير البحث بتواضع إلى أنه يقيم سير العمل المتكامل بدلاً من عزل المكونات الفردية عبر دراسات الاستئصال (ablation studies). كما يقر بوجود قيود مثل استخدام بذرة عشوائية واحدة، وعدم المقارنة مع النماذج التي طورها البشر تحت ميزانيات متطابقة، وعدم قدرة الوكيل حالياً على إعادة تصميم سير العمل ذاتياً أو مراجعة الأدبيات استجابةً للنتائج غير المتوقعة. ومع ذلك، تشير النتائج إلى أن سير العمل للعلماء المعتمد على الوكلاء هو نهج قابل للتطبيق لأتمتة العمليات العلمية المعقدة والمتكررة في مجال الصور الطبية.