When the record makes the result: exposure-linked recording of a continuous outcome can manufacture a spurious treatment effect in real- world evidence

الفخ الخفي في البيانات: عندما يخلق "التخمين" علماً زائفاً

تخيل أنك محقق تحاول حل لغز باستخدام كومة ضخمة من تقارير الشرطة. تريد أن تعرف ما إذا كان نوع جديد من الأقفال يمنع عمليات السطو بشكل أفضل من النوع القديم. في عالم العلوم الحديثة، يفعل الباحثون شيئاً مشابهاً جداً. فبدلاً من تقارير الشرطة، يستخدمون "الأدلة من العالم الحقيقي" — وهي سجلات رقمية هائلة من المستشفيات، مثل السجلات الطبية الإلكترونية، لمعرفة ما إذا كانت العلاجات الجديدة فعالة حقاً. هذه أداة قوية لأنها تنظر إلى مرضى حقيقيين في حياتهم الواقعية، وليس فقط أشخاصاً في مختبر خاضع للرقابة.

لكن هناك عقبة. أحياناً، لا يستخدم الأشخاص الذين يكتبون التقارير مسطرة؛ بل يستخدمون أعينهم للتخمين. إذا اضطر الطبيب لتخمين كمية الدم التي فقدها المريض، أو حجم الجرح، فقد يكتب رقماً يبدو "صحيحاً" بالنسبة له، بدلاً من الحقيقة الدقيقة. يسمي العلماء هذا "التقدير". عادة، نعتقد أن هذه التخمينات تزيد فقط من قدر ضئيل من الضجيج، مثل التشويش في الراديو. ولكن ماذا لو لم يكن هذا التشويش عشوائياً؟ ماذا لو تغيرت طريقة تخمين الطبيب بناءً على الدواء الذي تناوله المريض؟ هذا هو السؤال المرعب الذي يطرحه هذا البحث. إنه يستكشف فخاً خفياً حيث يمكن لطريقة تدويننا للنتائج أن تخترع بالخطأ علاجاً معجزاً لا وجود له في الواقع.

حالة الدواء "السحري" الذي لم يكن موجوداً

في هذه الدراسة، فحص الباحثون مجموعة ضخمة من السجلات المستشفيات لمدة of 8 سنوات من مستشفى واحد في تايوان. كانوا يحققون في دواء يسمى "كاربيتوسين" (carbetocin)، يُستخدم للمساعدة في وقف النزيف بعد ولادة الطفل. وهنا تكمن المفاجأة: لم يكن الدواء مغطى بالتأمين، لذا كان على المرضى دفع ثمنه بأنفسهم. وهذا يعني أن الأطباء عرفوا بالضبط من تلقى الدواء ومن لم يتلقه، مما خلق "تجربة طبيعية" مثالية لمعرفة ما إذا كان الدواء يعمل.

ركز الباحثون على نتيجة محددة واحدة: كمية الدم التي فقدتها الأم أثناء الولادة الطبيعية. في العديد من المستشفيات، لا يتم قياس هذا الرقم بميزان؛ بل يتم تقديره بصرياً من قبل الطبيب أو الممرض. ينظرون إلى الدم ويكتبون رقماً، مثل "150 مل" أو "200 مل".

عندما قام الباحثون بتشغيل الأرقام بالطريقة "القياسية"، بدت النتائج مذهلة. أشارت البيانات إلى أن الدواء قلل فقدان الدم بنسبة هائلة بلغت 62%. كانت الثقة في هذا الرقم عالية جداً لدرجة أنه بدا وكأنه اكتشاف علمي حاسم. بدت المجموعة التي تلقت العلاج وكأنها فقدت القليل جداً من الدم، بينما فقدت مجموعة الضبط الكثير.

لكن مؤلفي هذا البحث لم يتوقفوا عند هذا الحد. بدأوا يلعبون دور المحقق، بحثاً عن أدلة تشير إلى وجود خطب ما.

دليل "الأرقام المستديرة"

أول ما لاحظوه كان نمطاً غريباً في الأرقام، يشبه بصمة أصبع تركت في مسرح جريمة. في المجموعة التي تناولت الدواء، كانت حوالي 60% من قيم فقدان الدم المسجلة هي بالضبط 30 مل أو 50 مل. في المقابل، كان 2.4% فقط من مجموعة الضبط لديهم هذه الأرقام المنخفضة بالضبط.

يتضح أن الأطباء غالباً ما يكون لديهم عادة تقريب تخميناتهم إلى أرقام مستديرة وجيدة (مثل 50 أو 100). لكن هنا، بدا أن الأطباء لديهم قاعدة سرية: إذا أخذ المريض الدواء، فإنهم يكتبون دائماً "50 مل"، حتى لو كان الفقد الفعلي أعلى من ذلك. كان الأمر كما لو أن لدى الأطباء نموذجاً يقول: "إذا أخذ المريض الحبة السحرية، اكتب 50". هذا ما يسمى "تفضيل الأرقام" أو "تكدس القيم". لم تكن المجموعة المعالجة تفقد دماً أقل فحسب؛ بل كان يتم تسجيلها على أنها تفقد دماً أقل بسبب عادة في التسجيل.

اختبار "السفر عبر الزمن"

للتأكد من أن هذا لم يكن مجرد صدفة، تحقق الباحثون مما إذا كان النمط قد تغير بمرور الوقت. إذا كان الدواء يعمل حقاً، فيجب أن يكون التأثير ثابتاً عاماً بعد عام. وقد كان كذلك! من عام 2019 إلى 2025، ظل متوسط فقدان الدم لمجموعة الدواء مثبتاً بالضبط عند 50 مل في كل عام. وفي الوقت نفسه، تراوحت مجموعة الضبط بين 150 مل و200 مل.

هذا مؤشر خطر كبير. التأثيرات البيولوجية الحقيقية لا تتجمد عادة عند نفس الرقم بالضبط لسبع سنوات متتالية. هذا النوع من الجمود يوحي بوجود قاعدة تسجيل، وليس معجزة بيولوجية. حاول الباحثون أيضاً إصلاح البيانات باستخدام حيل إحصائية قياسية (مثل التعديل حسب السنة أو صحة المريض)، لكن "الخفض بنسبة 62%" ظل كما هو تماماً. أثبت هذا أن المشكلة لم تكن في اختلاف المجموعات، بل في أن طريقة كتابة النتائج كانت مختلفة.

اختبار الواقع عبر "العتبة"

جاء الدليل الأكثر إدانة عندما نظروا إلى الأرقام من منظور مختلف. سألوا: "كم عدد النساء اللواتي عانين بالفعل من نزيف خطير (نزيف ما بعد الولادة)، والذي يُعرف بفقدان 500 مل أو أكثر؟"

عندما نظروا إلى هذا السؤال الثنائي (نعم أو لا)، اختفى السحر.

• مجموعة الدواء: 3.2% عانين من نزيف حاد.
• مجموعة الضبط: 4.2% عانين من نزيف حاد.
• النتيجة: لم يكن هناك أي فرق جوهري.

لقد وُجدت نسبة الـ "62% انخفاض" فقط في الأرقام التقديرية غير الدقيقة. عندما نظروا إلى العتبة الفعلية للخطر، لم يبدُ أن الدواء يساعد على الإطلاق. في الواقع، عند الحد الأقصى (فقدان 1,000 مل أو أكثر)، كان لدى مجموعة الدواء حالات أكثر قليلاً من مجموعة الضبط، وهو عكس ما يجب أن يفعله دواء معجزة.

المحاكاة: إثبات الوهم

لإثبات أن عادة التسجيل هذه وحدها يمكن أن تخلق مثل هذه النتيجة الزائفة، قام الباحثون ببناء محاكاة حاسوبية. لقد صنعوا عالماً زائفاً حيث لا يفعل الدواء أي شيء على الإطلاق (التأثير الحقيقي كان صفراً). برمجوا الكمبيوتر لتسجيل فقدان الدم لمجموعة "المعالجة" بنفس التحيز: تثبيت القيم المنخفضة عند 30 أو 50 مل، مع ترك مجموعة الضبط أكثر طبيعية.

النتيجة؟ أنتج الكمبيوتر "خفضاً بنسبة 62%" زائفاً بدا مثيراً للإعجاب وذا دلالة إحصائية تماماً مثل البيانات الحقيقية. أكد هذا أن التحيز في التسجيل وحده كان كافياً لتصنيع تأثير علاجي ضخم ومقنع من العدم.

الخلاصة: ثق بالمسطرة، لا بالتخمين

لا يقول هذا البحث إن الدواء لا يعمل بالتأكيد؛ بل يقول إن "الخفض بنسبة 62%" الذي وُجد في أرقام فقدان الدم التقديرية هو على الأرجح كذبة نتجت عن كيفية تدوين الأطباء للبيانات.

خلص المؤلفون إلى أنه عندما نستخدم بيانات من العالم الحقيقي، يجب أن نكون حذرين بشأن النتائج التي تعتمد فقط على "التخمين" أو "التقدير". إذا تغيرت طريقة تسجيلنا للبيانات بناءً على من تلقى العلاج، فيمكننا اختراع علاج بالخطأ.

الدرس للمستقبل:

1. تحقق من "التقريب": قبل تصديق نتيجة كبيرة من بيانات تقديرية، تحقق مما إذا كانت إحدى المجموعات تقرب أرقامها إلى 50 أو 100 بينما لا تفعل المجموعة الأخرى ذلك.
2. انظر إلى "العتبات الحقيقية": لا تثق فقط في المتوسط الرقمي. تحقق مما إذا كان العلاج يساعد الناس حقاً على تجاوز خط الخطر (مثل عتبة الـ 500 مل من النزيف).
3. استخدم المقاييس الموضوعية: كلما أمكن ذلك، استخدم القياسات التي تجريها الآلات (مثل اختبار الهيموجلوبين للدم) بدلاً من تخمينات البشر.

باختصار، قد يكون التأثير الكبير والواضح في دراسة تعتمد على التخمينات البشرية مجرد انعكاس لقلم الطبيب، وليس لجسم المريض. "السحر" كان في دفتر الملاحظات، وليس في الدواء.