From First Principles to Latent-Space Alignment: A Process-Validity Theory of Delphi and the Foundations of Consensus under Uncertainty

في كثير من مجالات الطب والسياسة العامة، يتعين على الخبراء اتخاذ قرارات دون ترف وجود إثبات قاطع. فعندما يظهر مرض جديد، أو عندما تكون الآثار طويلة المدى لعلاج ما مجهولة، لا توجد تجربة واحدة يمكنها كشف الحقيقة. بدلاً من ذلك، يعتمد المجتمع على مجموعات منظمة من المتخصصين لبناء فهم مشترك. وهنا يأتي دور "طريقة دلفي" (Delphi method). لعقود من الزمن، كانت هذه التقنية هي المعيار لتحويل آراء الخبراء المتفرقة إلى دليل واحد متفق عليه. لقد صُممت العملية لتكون حذرة: يجيب الخبراء على الأسئلة دون الكشف عن هويتهم، ويطلعون على ملخص لإجابات المجموعة، ثم يعيدون مراجعة آرائهم في سلسلة من الجولات. والهدف هو تجريد العملية من الضغط الاجتماعي والتحيز الشخصي، مما يسمح للمجموعة بالتقارب نحو الإجابة الأكثر موثوقية ممكنة. لسنوات، كان نجاح هذه الدراسات يُقاس بمدى اتفاق الخبراء في النهاية. فإذا كانت الأرقام النهائية متقاربة وكان الإجماع قوياً، اعتُبرت الدراسة ناجحة. لكن هذه الطريقة في النظر للأمور تنطوي على ثغرة؛ فهي تفترض أن الاتفاق يعني الحقيقة، وأن الجبهة الموحدة والمنسجمة هي دائماً علامة على عملية صحية.

تتحدى دراسة جديدة هذا الافتراض من خلال النظر فيما وراء سطح الاتفاق. فقد طرح الباحثون، العاملون في مركز للأبحاث الطبية، سؤالاً جوهرياً: ماذا لو توصلت مجموعة من الخبراء إلى إجماع مثالي، ولكن لأسباب خاطئة؟ لقد بنوا محاكاة حاسوبية لاختبار العمليات الداخلية لطريقة دلفي، حيث تعاملوا مع الخبراء ليس كبشر، بل كنقاط بيانات تتحرك عبر نظام معقد. كان هدفهم هو معرفة ما إذا كان المعيار القياسي للحكم على هذه الدراسات يمكنه التمييز بين الاكتشاف الحقيقي للحقيقة وبين وهم الاتفاق الخطير. وكانت النتائج مذهلة؛ فقد أظهرت المحاكاة أن أكثر الإخفاقات خطورة في هذه العملية غالباً ما تبدو كأفضل النتائج. فعندما يتأثر الخبراء بشخصية سلطوية واحدة، أو عندما يكونون جميعاً منحازين في نفس الاتجاه، يمكن للمجموعة أن تصل إلى إجماع دقيق ومحكم للغاية، ومع ذلك يكون خاطئاً تماماً. في هذه الحالات، ستصنف المقاييس القياسية المستخدمة من قبل العلماء هذه الدراسة بأنها ممتازة، بينما تكون النتيجة بعيدة كل البعد عن الحقيقة.

ولفهم كيفية حدوث ذلك، قام الباحثون بتفكيك عملية دلفي إلى أجزائها الأساسية. لقد تخيلوا المعرفة الحقيقية للخبراء كحالة ذهنية خفية ومعقدة لا يمكن رؤيتها مباشرة. وما نراه فعلياً هو إجاباتهم المكتوبة، والتي ليست سوى ظل لتلك الحالة الداخلية. صُممت العملية لتوجيه هذه الحالات الخفية نحو حقيقة مشتركة من خلال سلسلة من الخطوات: الحفاظ على سرية الهويات، ومشاركة ملخصات المجموعة، والسماح للخبراء بتحديث آرائهم بمرور الوقت. أنشأ الباحثون نموذجاً رياضياً لهذا التدفق، وعاملوه كآلة ذات تروس محددة. وإذا كان أي من هذه التروس مكسوراً أو مفقوداً، فإن الآلة تنتج نتيجة تبدو جيدة من الخارج ولكنها معيبة من الداخل. وقد اختبروا ذلك عبر تشغيل آلاف عمليات المحاكاة، مع تعمد كسر أجزاء مختلفة من العملية لمعرفة ما سيحدث.

تضمنت إحدى الاختبارات الأكثر كشفاً ما يسمى بـ "الاقتران بالسلطة" (authority coupling). في دراسة دلفي العادية، يجب أن يحمل رأي الخبير وزناً بناءً على جودة منطقه، وليس مسمى وظيفته. في المحاكاة، سمح البماحثون للخبراء بمعرفة من يتحدث، وتركوا رأي المجموعة ينزاح نحو الشخص الأعلى رتبة. وكانت النتيجة هي وصول المجموعة إلى اتفاق سريع جداً وبتباين ضئيل للغاية. وبالنسبة للمقاييس القياسية المستخدمة في الدراسات الواقعية، بدا هذا وكأنه إجماع مثالي؛ فقد تقاربت آراء الخبماء، وكانت الأرقام محكمة. ومع ذلك، ولأن المجموعة كانت تتبع قائداً بدلاً من التفكير لأنفسهم، فقد كانت الإجابة النهائية خاطئة بشكل منهجي. وأظهرت المحاكاة أن سلوك "القطيع" هذا جعل المجموعة تبدو أكثر دقة بمقدار 2.9 مرة من المجموعة السليمة، بينما جعل إجابتها أكثر عرضة للخطأ بست مرات في الوقت نفسه. إن الشيء ذاته الذي جعل الدراسة تبدو ناجحة — وهو الاتفاق الوثيق — كان في الواقع علامة على فشلها.

وهناك نوع آخر من الفشل الخطير حدده الفريق وهو "الانهيار القسري" (forced collapse). يحدث هذا عندما تدفع العملية الخبراء للاتفاق بقوة شديدة لدرجة أنهم يفقدون القدرة على التعبير عن الاختلاف المشروع. في المحاكاة، حدث هذا عندما أُجبرت المجموعة على متوسط آرائهم بصرامة شديدة. كانت النتيجة إجماعاً دقيقاً للغاية، مع انعدام شبه تام في تباين الإجابات. بدا وكأن الخبراء قد وجدوا الإجابة الصحيحة الوحيدة، ولكن في الواقع، كانت العملية قد دمرت المعلومات المتعلقة بمدى عدم يقين المجموعة. كان الأمر يشبه أخذ مشهد طبيعي متنوع وتسطيحه ليصبح تلاً واحداً ناعماً؛ قد تكون النقطة المركزية صحيحة، لكن الخريطة لم تعد تظهر الوديان والقمم حيث تكمن التعقيدات الحقيقية. وجد الباحثون أن هذا النوع من الإجماع، الذي يبدو كأنه انتصار للاتفاق، يدمر في الواقع قدرة المجموعة على تمثيل الحالة الحقيقية لعدم اليقين.

كما بحثت الدراسة في مدى أهمية جودة الخبéticos أنفسهم مقارنة بعدد الأشخاص الموجودين في الغرفة. اختبر الباحثون ما يحدث عندما يتشارك الخبراء خلفيات أو تحيزات متشابهة، ووجدوا أنه إذا كانت المجموعة منحازة في نفس الاتجاه، فلا يمكن للعملية إصلاح ذلك. فمهما بلغت عدد جولات النقاش، ستكتفي المجموعة بتعزيز خطئها. وأظهرت المحاكاة أن مستوى التحيز بين الخبراء كان له تأثير هائل على النتيجة النهائية، حيث غير جودة الإجماع بمعامل قدره 24.5. وهذا يشير إلى أن أهم خطوة في تصميم دراسة دلفي ليست عدد الجولات أو الأسئلة المطروحة، بل الاختيار الدقيق لمجموعة متنوعة من الخبراء الذين لا يتشاركون نفس نقاط العمى.

ولعل أهم ما توصلت إليه الورقة البحثية هو أن الأدوات التي نستخدمها حالياً للحكم على هذه الدراسات عمياء عن هذه الإخفاقات. فقد قارن الباحثون بين الطريقة القياسية لتقييم دراسة دلفي، والتي تنظر إلى الاتفاق النهائي، وبين نهج جديد يتحقق من العملية نفسها. ووجدوا أن الطريقة القياسية غالباً ما تمنح درجات عالية للمحاكات المعيبة لأن الأرقام النهائية تبدو جيدة جداً. أما النهج الجديد، الذي أطلقوا عليه اسم "فحص صلاحية العملية" (process-validity check)، فقد نظر في ما إذا كانت قواعد اللعبة قد اتبعت بشكل صحيح. تساءل النهج: هل كانت المجموعة مستقلة حقاً؟ هل كانت التغذية الراجعة غير منحازة؟ هل أتيحت للخبراء فرصة لتغيير آرائهم؟ وعندما طبقوا هذا الفحص الجديد، استطاع تحديد الدراسات المعيبة بشكل صحيح، حتى عندما كانت الأرقام النهائية تبدو مثالية. وفي الواقع، كان النهج الجديد قادراً على التنبؤ بجودة النتيجة بشكل أفضل بكثير من النهج القديم، مما يثبت أن هيكل العملية هو السبيل الوحيد الموثوق للثقة في النتيجة.

كما عقد الباحثون مقارنة بين هذه العملية البشرية وكيفية تعلم أنظمة الذكاء الاصطناعي. فتماماً كما يمكن لمجموعة من الخبراء الوقوع في فخ الاتفاق بسرعة كبيرة، يمكن لأنظمة الذكاء الاصطناعي أيضاً أن "تنهار" أحياناً في إجابة واحدة متكررة، مما يفقدها تنوع الأفكط اللازم للتفكير المعقد. إن نفس المبادئ التي تحافظ على نزاهة المجموعة البشرية — مثل الحفاظ على استقلالية الهويات، وتشجيع الآراء المتنوعة، وفحص العملية بدلاً من مجرد النتيجة — تنطبق على الآلات أيضاً. وهذا يشير إلى أن قواعد بناء المعرفة الموثوقة هي قواعد عالمية، سواء كان المصدر خبيراً بشرياً أو برنامج كمبيوتر.

تخلص الدراسة إلى أننا بحاجة لتغيير كيفية تقييمنا للإجماع الخبير. لا يمكننا ببساطة النظر إلى الاتفاق النهائي وافتراض أنه حقيقي، بل يجب أن ننظر إلى كيفية الوصول إلى ذلك الاتفاق. يقترح الباحثون طريقة جديدة لتقييم هذه الدراسات تركز على نزاهة العملية. فإذا كانت العملية معيبة، فإن النتيجة معيبة، بغض النظر عن مدى دقة الأرقام. وهذه ليست مجرد نقطة نظر نظرية؛ فلها عواقب حقيقية على كيفية وضع المبادئ التوجيهية الطبية والسياسات العامة. فإذا اعتمدنا على دراسات تبدو جيدة ولكنها مبنية على عمليات معيبة، فإننا نخاطر باتخاذ قرارات خاطئة بكل ثقة. تقدم الورقة وسيلة لإصلاح ذلك، وتوفر مجموعة واضحة من القواعد لضمان أنه عندما يجتمع الخبراء، فإنهم يبنون المعرفة حقاً، وليس مجرد وهم بها.

في النهاية، يعمل هذا العمل كتذكير بأنه في عالم يسوده عدم اليقين، فإن الطريق إلى الحقيقة أهم من الوجهة نفسها. يمكن لمجموعة من الخبراء أن تصل إلى إجماع، لكن هذا الإجماع لا يكون ذا قيمة إلا إذا تم الوصول إليه من خلال عملية احترمت تعقيد المشكلة واستقلالية المفكرين. وتظهر الدراسة أنه من خلال الاهتمام بآليات العملية، يمكننا حماية أنفسنا من أكثر أنواع الأخطاء إغواءً: الخطأ الذي يبدو كإجابة مثالية.