Failure of Cross-Procedure Transportability of Preoperative Prolonged Length-of-Stay Prediction From VATS to Esophagectomy: A Locked Model Evaluation Study
تُظهر هذه الدراسة أن نماذج التنبؤ قبل الجراحة لطول مدة الإقامة التي تم تطويرها لمرضى جراحة الصدر بمساعدة الفيديو (VATS) تفشل في الانتقال بشكل موثوق إلى مرضى استئصال المريء دون تعديل، حيث تُظهر قدرة تمييز ضعيفة وأخطاء معايرة كبيرة عند تطبيقها كمسارات عمل مغلقة.
تعتمد المستشفيات على التنبؤات الدقيقة لإدارة مواردها ورعاية المرضى بفعالية. ويعد أحد أهم المقاييس في هذا التخطيط هو مدة الإقامة، أو عدد الأيام التي يقضيها المريض في المستشفى بعد الجراحة. وبينما يكون التعافي السريع هو المثالي، إلا أن عوامل عديدة تؤثر على المدة التي يقضيها المريض فعلياً، بما في ذلك المضاعفات، والممارسات الخاصة للجراح، والحالة البدنية العامة للمريض. غالباً ما يستخدم الأطباء نماذج حاسوبية للتنبؤ بهذه المدد حتى قبل بدء العملية الجراحية. وتعمل هذه النماذج على تحليل عمر المريض، ووظائف الرئة، وغيرها من البيانات الصحية لتقدير خطر طول فترة الاستشفاء. والأمل يكمن في أنه من خلال معرفة من قد يبقى لفترة أطول، يمكن للفرق الطبية أن تستعد بشكل أفضل، وتخصص الأسرة بكفاءة أكبر، وتدعم المرضى الذين يحتاجون إلى رعاية إضافية. ومع ذلك، يظل هناك سؤال رئيسي: هل النموذج الذي بُني للتنبؤ بالتعافي لنوع معين من الجراحات يعمل بنفس الكفاءة لنوع آخر من الجراحات، حتى لو أُجري كلاهما في نفس المستشفى؟
وضع باحثون في مستشفى رينمين التابع لجامعة ووهان هدفهم للإجابة على هذا السؤال من خلال اختبار نظام تنبؤ عبر إجراءين جراحيين مختلفين تماماً. بدأوا بنموذج مصمم للمرضى الذين يخضعون لجراحة الصدر بمساعدة الفيديو، وهي عملية طفيفة التوغل للرئتين. بُني هذا النموذج باستخدام بيانات من 301 مريض وتضمن معلومات سريرية قياسية مثل العمر وتاريخ التدخين، بالإضافة إلى قياسات مأخوذة من فحوصات الأشعة المقطعية الروتينية للصدر، وتحديداً مراقبة سمك العضلات والدهون في المنطقة الصدرية. ثم أخذ الباحثون هذا النموذج نفسه بالضبط، دون تغيير رقم واحد أو قاعدة واحدة، وطبقوه على مجموعة مختلفة تماماً مكونة من 299 مريضاً كانوا يخضعون لاستئصال المريء، وهي جراحة أكثر تعقيداً لإزالة جزء من المريء. كان الهدف هو معرفة ما إذا كانت التنبؤات ستصمد عندما ينتقل السياق من إجراء متعلق بالرئة إلى إجراء متعلق بالمريء.
كانت نتائج هذا الاختبار واضحة وحاسمة: فشل النموذج في العمل مع مجموعة المرضى الثانية. فعندما طبق الباحثون نموذج جراحة الرئة على مرضى جراحة المريء، فقد القدرة تقريباً على التمييز بين أولئك الذين سيعانون من تعافٍ طويل وأولئك الذين سيتعافون بسرعة. ومن الناحية الإحصائية، انخفض أداء النموذج إلى مستوى لا يتعدى التخمين العشوائي. علاوة على ذلك، بالغ النموذج باستمرار في تقدير المخاطر؛ حيث توقع أن ما يقرب من نصف مرضى جراحة المريء سيواجهون إقامة طويلة، بينما في الواقع، كان الربع فقط منهم كذلك. ولم يساعد إدراج قياسات الأشعة المقطعية، التي كان الهدف منها إضافة دقة إضافية من خلال مراقبة تكوين الجسم، في تحسين النتائج. بل في الواقع، بالنسبة لمرضى المريء، أصبح النموذج المزود ببيانات الأشعة المقطعية جامداً للغاية لدرجة أنه أنتج تقريباً نفس التنبؤ لكل شخص، مما جعله عديم الفائدة للتقييم الفردي.
كما استكشفت الدراسة ما إذا كان يمكن إصلاح النموذج ببساطة عن طريق تعديل أرقامه الأساسية لتتناسب مع المجموعة الجديدة من المرضى. وبينما صحح هذا التعديل متوسط التنبؤ، مما جعل تقدير المخاطر الإجمالي يتوافق مع واقع مجموعة جراحة المريء، إلا أنه لم يستعد قدرة النموذج على التمييز بين المرضى. ظل النموذج غير قادر على تحديد الأفراد الذين هم في خطر أعلى بشكل محدد. ووجد الباحثون أن مجموعتي المرضى مختلفتان جوهرياً بطرق لم يأخذها النموذج في الاعتبار. فمرضى جراحة المريء كانوا أكبر سناً، وأكثر عرضة لكونهم من الذكور، ولديهم وظائف رئوية وقياسات دهون جسم مختلفة بشكل كبير مقارنة بمرضى جراحة الرئة. ولأن النموذج بُني على الخصائص المحددة للمجموعة الأولى، لم يستطع ترجمة منطقه إلى المجموعة الثانية.
يوضح هذا البحث حداً فاصلاً حاسماً لأدوات التنبؤ الطبي. فهو يظهر أن النموذج الذي تم تطويره لإجراء جراحي معين لا يمكن افتراض عمله لإجراء آخر، حتى داخل نفس المستشفى وباستخدام نفس مصادر البيانات. لم يكن الفشل بسبب نقص في البيانات أو خلل في الكود البرمجي، بل لأن الحقائق البيولوجية والسريرية للجراحتين متباينة للغاية. وتخلص الدراسة إلى أنه قبل استخدام أي نموذج تنبؤ لتوجيه رعاية المرضى، يجب اختباره بصرامة خصيصاً للفئة والإجراء الدقيقين اللذين يُراد لهما العمل. إن مجرد أخذ أداة تعمل لوظيفة واحدة ومحاولة استخدامها لوظيفة أخرى، حتى لو كانت مرتبطة بها، من المرجح أن يؤدي إلى نتائج غير دقيقة وقد تكون مضللة.
ملخص تقني: فشل قابلية النقل عبر الإجراءات الجراحية للتنبؤ بطول مدة الإقامة الممتدة قبل العمليات من جراحة الصدر بالمناظير (VATS) إلى استئصال المريء
بيان المشكلة غالبًا ما تفشل نماذج التنبؤ التي تم تطويرها لمجتمع جراحي معين في الحفاظ على أدائها عند تطبيقها على إجراء جراحي مختلف، حتى ضمن نفس المؤسسة الطبية. تتناول هذه الدراسة التحدي المحدد المتمثل في "قابلية النقل عبر الإجراءات": وهي تحديد ما إذا كانت النماذج المسبقة للعمليات للتنبؤ بطول مدة الإقامة في المستشفى (LOS) الممتدة بعد الجراحة، والتي تم تطويرها لمرضى خضعوا لجراحة الصدر بالمناظير (VATS)، يمكن تطبيقها دون تعديل على المرضى الذين يخضعون لاستئصال المريء. تبحث الدراسة فيما إذا كانت هذه النماذج تحافظ على القدرة التمييزية والمعايرة عند نقلها عبر سياقات إجرائية متميزة ذات أعباء فسيولوجية، ومسارات تعافي، ومعايير خروج مختلفة.
المنهجية أُجريت هذه الدراسة المنهجية الاستعادية في مستشفى رنمين بجامعة ووهان باستخدام مجموعتين متميزتين:
مجموعة المصدر (التطوير): 301 مريضًا بالغًا خضعوا لجراحة الصدر بالمناظير (VATS) الاختيارية (يناير 2021 – يوليو 2025).
المجموعة المستهدفة (التقييم): 299 مريضًا بالغًا خضعوا لاستئصال المريء بسبب سرطان المريء (ديسمبر 2020 – يونيو 2025).
تعريف النتيجة: تم تعريف طول مدة الإقامة (LOS) الممتدة بناءً على نوع الإجراء: أكثر من 7 أيام لجراحة (VATS) وأكثر من 15 يومًا لاستئصال المريء. كانت هذه العتبات محددة مسبقًا لتمثيل التعافي المتأخر ضمن كل سياق، مع الإقرار بأنها ليست نقاط نهاية سريرية متطابقة.
المتنبئات والنماذج: تم تطوير نموذجين من نماذج الانحدار اللوجستي ذي التراجع (ridge-logistic regression) في مجموعة (VATS):
النموذج السريري: ثمانية متنبئات (العمر، الجنس، مؤشر كتلة الجسم، تاريخ التدخين، ارتفاع ضغط الدم، ألبومين المصل، FEV₁%، DLCO%).
النموذج السريري بالإضافة إلى الأشعة المقطعية (CT): المتنبئات السريرية الثمانية بالإضافة إلى مركبين مشتقين من الأشعة المقطعية (متوسط سمك عضلات الصدر ومتوسط سمك دهون الصدر المقاس عند مستويات T5 وT8 وT10).
التصميم التجريبي:
خط المعالجة المجمد (Frozen Pipeline): تم تطوير خطوط معالجة التنبؤ الكاملة لـ (VATS) (بما في ذلك معايير المعالجة المسبقة، وقيم الجزاء، والمعاملات، وقواعد التنبؤ)، وتم التحقق من صحتها داخليًا عبر 1,000 تكرار لأسلوب "bootstrap"، ثم تم "تجميدها".
التقييم المغلق (Locked Evaluation): طُبقت النماذج المجمدة مباشرة على مجموعة استئصال المريء دون أي ضبط للمجموعة المستهدفة، أو اختيار للمتنبئات، أو إعادة تقدير للمعاملات.
المقاييس: تم تقييم الأداء عبر التمييز (AUROC, AUPROC)، والمعايرة (التقاطع، الميل، نسبة الملاحظ إلى المتوقع O/E)، وخطأ التنبؤ الإجمالي (Brier score, log loss)، وتوزيعات التنبؤ.
التحليلات الاستكشافية: شملت تحليلات ما بعد التقييم إعادة المعايرة بالتقاطع فقط، وإعادة المعايرة بالتقاطع والميل، ومراجعة معامل التراجع باستخدام منحنيات التعلم لتقييم جدوى التكيف المحتمل.
النتائج الرئيسية
التمييز: في مجموعة تطوير (VATS)، بلغت قيم AUROC المصححة من التفاؤل 0.591 (للنموذج السريري) و0.597 (للنموذج السريري بالإضافة إلى الأشعة المقطعية). وفي تقييم استئصال المريء المغلق، انخفض الأداء إلى مستويات قريبة من مستوى الصدفة: 0.530 (95% CI, 0.457–0.608) للنموذج السريري، و0.534 (95% CI, 0.456–0.613) للنموذج السريري بالإضافة إلى الأشعة المقطعية. كان الفرق في AUROC المزدوج 0.004، مما لا يقدم أي دليل على أن مركبات الأشعة المقطعية حسنت عملية التصنيف.
المعايرة: بالغت كلا النموذجين بشكل منهجي في تقدير المخاطر في مجموعة استئصال المريء. كانت تقاطعات المعايرة -0.919 و-0.871، وكانت نسب الملاحظ إلى المتوقع (O/E) حوالي 0.54–0.55، مما يشير إلى أن الاحتمالات المتوقعة كانت ضعف معدل الأحداث الملاحظ تقريبًا.
توزيع التنبؤ: أنتج النموذج السريري بالإضافة إلى الأشعة المقطعية تنبؤات ثابتة تقريبًا لمجموعة استئصال المريء (الانحراف المعياري 0.00036)، مما جعل ميل المعايرة غير قابل للتقدير. أظهر النموذج السريري انحرافًا معياريًا قدره 0.0150، مع تداخل واسع بين توزيعات الحالات التي حدث فيها الحد وتلك التي لم يحدث فيها.
تحول تركيبة الحالات (Case-Mix Shift): وجدت فروق جوهرية بين المجموعتين. أظهر ثمانية من أصل عشرة متنبئات فروقًا معيارية متوسطة إلى كبيرة في المتوسط (SMDs). ومن الملاحظ أن متوسط سمك دهون الصدر، وFEV₁، وDLCO أظهرت تحولات كبيرة (SMDs >1.0) وتداخلًا محدودًا في التوزيع.
إعادة المعايرة والتكيف: نجحت إعادة المعايرة بالتقاطع فقط في تصحيح انزياح المخاطر المتوسط، لكنها فشلت في استعادة التمييز على مستوى الفرد. أدت مراجعة معامل التراجع عند أحجام تكيف أكبر (235 مريضًا) إلى تحسينات طفيفة في AUROC (تصل إلى 0.575 للنموذج 2) ولكنها ظلت غير مؤكدة للغاية ولم تشكل تحققًا مستقلًا.
المساهمات الرئيسية
دليل تجريبي على فشل قابلية النقل: تقدم الدراسة عرضًا "مغلقًا" يثبت أن خط معالجة التنبؤ المطور لـ (VATS) لا ينتقل بشكل موثوق إلى استئصال المريء، حتى داخل نفس المؤسسة الطبية من الدرجة الثالثة.
الدقة المنهجية: تلتزم الدراسة ببروتوكولات "النموذج المجمد" الصارمة، مما يمنع تسرب البيانات وضبط المجموعة المستهدفة، وبالتالي تعزل قابلية النقل الحقيقية للخوارزمية.
التقييم التفصيلي للأداء: بعيدًا عن AUROC، تقيم الدراسة التمييز، والمعايرة، وتوزيعات التنبؤ، وتحولات تركيبة الحالات، مما يسلط الض الضوء على أن النموذج يمكن أن يفشل في كل من التمييز والمعايرة عند الانتقال عبر الإجراءات.
تقييم قيمة الأشعة المقطعية: تختبر الدراسة صراحة القيمة الإضافية لتركيب الجسم المشتق من الأشعة المقطعية في هذا السياق المحدد عبر الإجراءات، ووجدت عدم وجود تحسن مقنع في أداء التصنيف.
الأهمية والادعاءات تدعي الورقة أن مساهمتها الأساسية هي تحديد حدود التطبيق للنماذج التي تم تقييمها. وهي توضح أن أداء النموذج مشروط بالتوزيع المشترك للمتنبئات، والنتائج، والسياق السريري، وليس خاصية جوهرية للخوارزمية نفسها.
يؤكد المؤلفون أن هذه النتائج تدعم مبدأ التحقق المستهدف: يجب تقييم النماذج في المجتمع والسياق السريري المحدد الذي يُراد استخدامها فيه. وتخلص الدراسة إلى أن خطوط معالجة التنبؤ المجمدة غير كافية للاستخدام السريري في مرضى استئصال المريء دون تعديل. وتجادل بأنه قبل التنفيذ السريري، تتطلب خطوط معالجة التنبؤ تقييمًا خاصًا بكل إجراء لتركيبة الحالات، والتمييز، والمعايرة، وتوزيعات التنبؤ. ويصرح المؤلفون صراحةً بأنه لا ينبغي لا للنماذج المجمدة ولا لتعديلاتها الاستكشافية أن توجه حاليًا الاستشارات الفردية أو تخصيص الموارد، وأن العمل المستقبلي يجب أن يركز على تطوير نماذج ضمن مجموعات أكبر ومتوافقة مع الإجراء الجراحي.