Right Diagnoses, Decorative Reasoning:A Perturbation Audit of Medical Chain-of-Thought
تقدم هذه الورقة إطار عمل لتدقيق الاضطرابات الطبية يكشف عن "معدل فك ارتباط السلسلة" مرتفع عبر 14 نموذجاً من النماذج اللغوية الكبيرة، مما يثبت أن مسوغات سلسلة أفكارها غالباً ما تعمل كتوثيق تجميلي بدلاً من كونها دليلاً أميناً على الاستدلال الفعلي الذي يقود التشخيصات الطبية.
المؤلفون الأصليون:Mengzhu Xu, Jifan Gao, Xia Jiang, Yaoxin Wu, Xi Long
في عالم الرعاية الطبية عالي المخاطر، يعتمد الأطباء على نوع محدد من عمليات التفكير للوصول إلى التشخيص؛ فهم يجمعون الأعراض، ويزنون الأدلة، ويسلكون مساراً منطقياً للوصول إلى استنتاج. وعندما بدأت أنظمة الذكاء الاصطناعي في الإجابة على الأسئلة الطبية، تبنت طريقة مماثلة تسمى "سلسلة الأفكار" (chain-of-thought). فبدلاً من القفز مباشرة إلى الإجابة، تقوم هذه البرامج الحاسوبية بإنشاء شرح خطوة بخطوة أولاً، محاكيةً الطريقة التي قد يفكر بها الطبيب البشري. وتعد هذه الميزة حيوية لأنها تسمح للمتخصصين الطبيين بفحص المنطق الكامن وراء اقتراح الآلة، لضمان أن الإجابة الواثقة لا تخفي وراءها خطأً جسيماً. وكان الأمل هو أنه إذا كتب الكمبيوتر منطقه الخاص، فإن ذلك النص سيكون سجلاً حقيقياً لكيفية وصوله إلى القرار، ليعمل كنافذة شفافة تطل على عقله.
ومع ذلك، فإن دراسة جديدة من باحثين في جامعة آيندهوفن للتكنولوجيا ومعهد دانا فاربر للسرطان تتحدى هذا الافتراض. فقد طرحوا سؤالاً جوهرياً: هل الشرح المكتوب هو الذي يقود الإجابة بالفعل، أم أنه مجرد قصة ترويها الآلة لنفسها بعد فوات الأوان؟ وللتحقق من ذلك، تعامل الفريق مع عملية الاستدلال كأنها تجربة علمية. فقد أخذوا أربعة عشر نموذجاً مختلفاً من نماذج الذكاء الاصطناعي الطبي وأخضعوها لتدقيق صارم. قام الباحثون بتغيير الأسئلة المطروحة على النماذج بشكل منهجي — عبر تغيير حالة من "حادة" إلى "مزمنة"، أو تبديل عمر المريض، أو قلب عبارة سلبية إلى إيجابية. كانت هذه التغييرات مصممة لتكون ذات أهمية سريرية، وهي النوع من التفاصيل التي يلاحظها الطبيب الحقيقي فوراً. وإذا كان استدلال الذكاء الاصطناعي صادقاً حقاً، فينبغي أن يتغير الشرح المكتوب ليعكس المعلومات الجديدة، كما يجب أن يتغير الجواب النهائي إذا اقتضت الحقائق الطبية ذلك.
ما اكتشفه الباحثون كان انفصالاً مذهلاً. فعلى نطاق واسع، تصرفت النماذج كما لو كانت تتجاهل التغييرات التي طُلبت منها. فعندما تم تعديل السؤال بطريقة ينبغي أن تغير التشخيص، ظل الاستدلال المكتوب غالباً كما هو تماماً، مكرراً الحقائق الأصلية كما لو لم يحدث شيء. وفي ما يقرب من 73 بالمائة من هذه الحالات، لم يسجل الشرح التعديل، ولم يتغير الجواب النهائي، رغم أن المدخلات قد تغيرت جوهرياً. كان الأمر كما لو أن الآلة قد قررت الإجابة مسبقاً وكانت ببساطة تكتب نصاً يتناسب معها، بغض النظر عن الأدلة المقدمة فعلياً. وقد اختبرت الدراسة ذلك عبر إفساد نص الاستدلال نفسه — من خلال حذف خطوات أو إعادة ترتيب الجمل — ووجدت أن دقة النماذج لم تتأثر إلا بقدر ضئيل جداً. ظل الجواب النهائي صحيحاً ليس لأن الاستدلال كان سليماً، بل لأن الاستدلال لم يكن هو من يقوم بالعمل في الأصل.
وقد أكد الباحثون أن هذا لم يكن مجرد خطأ بسيط في القراءة؛ حيث استعانوا باثنين من الأطباء المعتمدين لمراجعة الأسئلة المعدلة واستجابات النماذج. واتفق الأطباء على أنه في 98.5 بالمائة من الحالات، كانت التغييرات التي أُجريت على الأسئلة واضحة وهامة بما يكفي بحيث كان ينبغي لعملية استدلال صادقة أن تتفاعل معها. ومع ذلك، فشلت النماذج في القيام بذلك إلى حد كبير. وفي بعض الحالات، قامت النماذج حتى بتغيير إجاباتها إلى خيارات غير صحيحة عند تغيير السؤال، لكن الشرح المكتับ لم يعكس هذا التحول، مما يشير إلى أن الاستدلال لم يكن هو السبب في اتخاذ القرار. كما بحثت الدراسة في النماذج التي تم تدريبها خصيصاً لتكون أفضل في الاستدلال، بما في ذلك تلك التابعة لشركات تقنية كبرى، ووجدت النمط نفسه: كانت سلسلة الأفكال المرئية مجرد زينة في الغالب. لقد كانت بمثابة سطح للتوثيق، سجلاً لما أراد النموذج قوله، بدلاً من أن تكون سجلاً سببياً لكيفية حله للمشكلة.
تشير هذه النتيجة إلى أن الاعتماد الحالي على هذه التفسيرات كدليل على الاستدلال المنطقي والآمن قد يكون في غير محله. لا تدعي الدراسة أن النماذج غير قادرة على إعطاء الإجابة الصحيحة، ولا تقول إن التفسيرات خاطئة دائماً، بل تكشف أن التفسير غالباً لا يكون هو المحرك الذي يقود السيارة. وبالنسب بالنسبة للمهنيين الطبيين الذين يستخدمون هذه الأدوات لدعم قراراتهم، فهذا يعني أنهم لا يستطيعون افتراض أن شرحاً واضحاً ومنطقياً يضمن أن الآلة قد استخدمت بالفعل الأدلة المقدمة. وتشير الأبحاث إلى أنه ما لم ترتبط عملية الاستدلال حقاً بالقرار النهائي، ستظل أنظمة الذكاء الاصطناعي هذه "صندوقاً أسود" حيث يكون النص المرئي مجرد سرد، وليس خريطة. ويتطلب المسار المستقبلي بناء أنظمة لا يكون فيها التفسير مجرد قصة، بل الآلية الفعلية للإجابة.
ملخص تقني: تشخيصات صحيحة، استنتاج تزييني
بيان المشكلة
يعتمد الأطباء بشكل متزايد على النماذج اللغوية الكبيرة (LLMs) لدعم القرار الطبي، حيث يُتوقع من مسارات الاستدلال عبر "سلسلة الأفكاء" (Chain-of-Thought - CoT) أن تعمل كدليل شفاف على عملية الاستنتاج. ومع ذلك، لم يتم اختبار ما إذا كانت هذه السلاسل المرئية تدفع بالفعل نحو الإجابة النهائية أم أنها مجرد سرد لقرار تم اتخاذه مسبقاً. غالباً ما تتجاهل اختبارات الموثوقية الحالية في المجالات العامة التكاليف السريرية (على سبيل المثال، معاملة قلب التشخيص من حالة حميدة إلى حالة عالية الخطورة بنفس طريقة معاملة قلب تشخيص آخر)، بينما تتعامل التقييمات الطبية مع سلسلة الاستدلال كصندوق أسود، مركزة فقط على دقة الإجابة. نتيجة لذلك، لا توجد طريقة صارمة للتمييز بين النموذج "الموثوق والقوي" (حيث تؤثر السلسلة سببيّاً على الإجابة) والنموذج "المنفصل والمجرد من السرد" (حيث تكون السلسلة تزيينية فقط).
المنهجية
يقدم المؤلفون إطار عمل "تدقيق الاضطراب الطبي" (Medical Perturbation Audit) المصمم لاختبار طبيعة الحمل السببي لسلسلة الأفكار (CoT) في السياقات الطبية. تتكون المنهجية من ثلاثة مكونات أساسية:
1. مجموعة مشغلات الاضطراب (Perturbation Operator Battery)
تتضمن هذه المجموعة 30 مشغلاً يقوم بتعديل سلاسل الاستدلال والأسئلة المدخلة باستخدام تحويلات ذات دوافع سريرية. يتم تصنيف المشغلات حسب القصد (تدميري مقابل محافظ) والموضع (هيكلي مقابل سطحي):
تعديلات مستوى السلسلة (كتلة F، 17 نوعاً): تشمل الحذف، حذف الخطوات، استبدال الرموز (tokens)، وإعادة الترتيب لاختبار ما إذا كانت السلسلة ضرورية حسابياً.
تعديلات مستوى السؤال (كتلة M، 13 نوعاً): تشمل استئصال الأدلة، تبديل الخصائص الديموغرافية (العمر/الجنس)، قلب النفي، عكس الشدة (مثل: حاد ← مزمن)، والتحولات الزمنية. صُممت التعديلات التدميرية لتغيير الأدلة السريرية التي يجب أن تستجيب لها السلسلة الموثوقة، حتى لو ظل الإجابة الذهبية (gold answer) منطقية.
2. التحليل المشترك والمقاييس
يقترن إطار العمل بين تحديثات السلسلة وقلب الإجابات لتصنيف سلوك النموذج إلى أربعة خلايا:
المقياس الأساسي: معدل انفصال السلسلة (cdr): احتمال أن لا تقوم السلسلة لا بتحديث نصها ليعكس تعديلاً ذا معنى سريري ولا تقلب الإجابة. يشير معدل (cdr) المرتفع إلى أن السلسلة لا تعالج التغيير السريري.
المقاييس الثانوية:
معدل قلب الإجابة (afr): الحساسية للاضطرابات.
معدل الالتزام المبكر (ecr): ما إذا كان قطع السلسلة يحافظ على الإجابة الأساسية.
مركب الموثوقية (fcs): مقياس عام للمجال (متوسط مرجح لمعدلات القلب التدميرية والمحافظة).
إشارة الخطر السريري (chs): يزن قلب الإجابات بناءً على الخطورة السبية (على سبيل المثال، يتم معاقبة قلب الحالة من حميدة ← عالية الخطورة).
فجوة العدالة الديموغرافية (dfg): يقيس تباين الدقة عبر التبديلات الديموغرافية.
3. التحقق السريري
قام طبيبان معتمدان بإعادة ترميز N=197 من الأسئلة المضطربة للتحقق من أن التعديلات التدميرية لم تغير الإجابة الذهبية دون قصد (لضمان أن عدم قلب الإجابة ليس بسبب عدم صلة التعديل) ولتحديد معدل الانقلابات الضارة سريرياً.
الإعداد التجريبي
النماذج: 14 نموذجاً لغوياً كبيراً تشمل النماذج مفتوحة الأوزان (مثل Llama-3.1, Qwen2.5, Mistral)، والنماذج الضبطت طبياً (مثل Meditron, BioMistral)، والنماذج الضبطت للاستنتاج (مثل DeepSeek-R1-D, HuatuoGPT-o1)، والأنواع مغلقة المصدر (GPT-4o, Claude).
المعايير المرجعية: أربعة مجموعات بيانات للأسئلة الطبية (MedQA, MedMCQA, PubMedQA, MMLU-medical).
النطاق: حوالي 364,000 توليد مضطرب.
النتائج الرئيسية
عبر 14 نموذجاً وأربعة معايير مرجعية، تتضافر ثلاثة خطوط مستقلة من الأدلة لتظهر أن سلسلة الأفكار المرئية منفصلة إلى حد كبير عن الإجابة النهائية:
معدل انفصال السلسلة المرتفع (cdr): بلغ معدل (cdr) للوحة التقييم 72.9%. في الغالبية العظمى من التعديلات التدميرية ذات المعنى السريري، تفشل السلسلة في تسجيل التغيير في نصها، وتظل الإجابة دون تغيير. أظهرت 2.9% فقط من الحالات تحديث السلسلة وقلب الإجابة معاً (الإشارة "الموثوقة").
فساد السلسلة لا يؤثر على الدقة: أدى إفساد السلسلة (عبر القطع، أو الحذف، أو الاستبدال) إلى تغيير في متوسط الدقة (ΔAcc) قدره ~0 نقطة مئوية. بالنسبة لـ 11 نموذجاً من أصل 14، كان التغيير ضمن نطاق ±1.6 نقطة مئوية. يشير هذا إلى أن السلسلة لا تقود الإجابة سببياً؛ فالنموذج يحل السؤال بشكل مستقل عن النص المُولد.
توجيه (Prompting) سلسلة الأفكار لا يقدم ميزة: لم يؤدِ استخدام توجيه (CoT) إلى تحسين الدقة مقارنة بالخط المرجعي للإجابة المباشرة. وفي كثير من الحالات، أدى توجيه (CoT) إلى خفض الأداء قليلاً.
ملاحظات محددة:
النماذج الضبطت للاستنتاج: تولد نماذج مثل DeepSeek-R1-D وHuatuoGPT-o1 سلاسل أطول ولكنها تظهر أنماط انفصال مماثلة (معدل cdr مرتفع، ومعدل ecr مرتفع)، مما يشير إلى أن الضبط الدقيق للاستنتاج ينتج سرديات أطول بدلاً من استنتاجات أكثر موثوقية.
النماذج مغلقة المصدر: رغم عدم توفر نص السلسلة لحساب (cdr) مباشرة، إلا أن إشارات حساسية جانب الإجابة (fcs, afr) كانت متسقة مع نمط الانفصال الملاحظ في النماذج مفتوحة المصدر.
التحقق السريري: 98.5% من التعديلات التدميرية تركت الإجابة الذهبية قابلة للدفاع عنها، مما يؤكد أن عدم قلب الإجابة ليس ناتجاً عن عدم صلة التعديلات سريرياً. ومع ذلك، تم الحكم من قبل الأطباء بالإجماع على أن 13.3% من انقلابات الإجابات كانت ضارة سريرياً (مثل قلب تشخيص تسمم الدم إلى حالة غير عاجلة).
الأهمية والادعاءات
يدعي البحث تقديم أول تدقيق موثوقية قائم على السياق الطبي يفصل بين الاستنتاج "القوي والموثوق" وبين التوثيق "المنفصل والسردي".
الاستنتاج التزييني: تعمل سلسلة الأفكار (CoT) المرئية في النماذج الطبية الحالية كسطح للتوثيق في المقام الأول بدلاً من كونها سجلاً سببياً للحساب. فهي لا تتبع التغييرات في الأدلة السريرية بشكل موثوق.
قصور المقاييس الحالية: مقاييس مثل (fcs) غير كافية للسياقات الطبية لأنها تخلط بين الاستجابة الموثوقة وبين الانقلابات المدفوعة خارجياً وتتجاهل التكلفة السريرية. ويُقترح (cdr) كمعيار أساسي أكثر ملاءمة لأسئلة الاختيار من متعدد الطبية.
تداعيات النشر: لا يمكن لخطوط العمل (Pipelines) التي توجه القرارات بناءً على محتوى السلسلة أن تفترض أن السلسلة هي مسبب سببي لما قبل الإجابة. يجادل المؤلفون بأن طول السلسلة وحده ليس مؤشراً على الموثوقية، وأن التحقق المستقل المرتبط بالسؤال ضروري للنشر الطبي الآمن.
تخلص الدراسة إلى أنه على الرغم من قدرة النماذج اللغوية الكبيرة على تحقيق دقة تقارب دقة الخبراء، إلا أن عمليات الاستدلال المرئية الخاصة بها غير موثوقة حالياً كدليل على الاستنتاج الطبي الموثوق.