Why are language models less surprised than humans? Testing the Parse Multiplicity Mismatch Hypothesis
تختبر هذه الورقة الفرضية القائلة بأن تقليل النماذج اللغوية لتقدير صعوبة المعالجة البشرية في حالات الغموض التركيبي ينبع من قدرتها على الحفاظ على عدد أكبر من التحليلات الجملية المتزامنة مقارنة بالبشر، لكنها تجد أنه بينما يؤدي تقليل تعدد التحليلات إلى زيادة تأثيرات "طريق الحديقة" المتوقعة، إلا أنه يفشل في تفسير حجم الاختلافات في زمن القراءة البشري بشكل كامل.
البحث الأصلي مرخَّص بموجب CC BY 4.0 (http://creativecommons.org/licenses/by/4.0/). هذا شرح مولَّده بالذكاء الاصطناعي للبحث أدناه. لم يكتبه المؤلفون ولم يصادقوا عليه. وللتحقق من الدقة التقنية، يرجى الرجوع إلى البحث الأصلي. اقرأ إخلاء المسؤولية الكامل
تخيل أنك تقرأ قصة، وفجأة تصطدم بجملة تخدع عقلك. هذا ما يسمى بـ "جملة المسار الخادع" (Garden Path Sentence).
إليك مثال: "The girl fed the lamb was upset because she asked for beef" (الفتاة التي أُطعمت الحمل كانت غاضبة لأنها طلبت لحم البقر).
عندما تقرأ في البداية "The girl fed the lamb"، يفترض عقلك تلقائياً أن الفتاة هي من تقوم بالإطعام؛ فهذا هو التفسير الأكثر شيوعاً. ولكن عندما تصل إلى كلمة "was"، يدرك عقلك فجأة أنه كان مخطئاً! الجملة تعني في الواقع أن الفتاة "أُطعمت" (شخص ما أطعمها)، وهي كانت غاضبة بسبب لحم البقر. لحظة الارتباك هذه وإعادة القراءة تستغرق وقتاً. ويسمي علماء النفس هذا بـ "تأثير المسار الخادع".
السؤال الكبير
بنى العلماء برامج حاسوبية قوية تسمى "النماذج اللغوية" (مثل تلك التي تكتب هذا النص)، وهي بارعة جداً في تخمين الكلمة التالية في الجملة. وتقترح نظرية تسمى "نظرية المفاجأة" (Surprisal Theory) أنه كلما كان من الصعب التنبؤ بكلمة ما، استغرق البشر وقتاً أطول في قراءتها.
المشكلة؟ عندما اختبر العلماء هذه الحواسيب على جمل المسار الخادع، كانت الحواسيب "هادئة جداً". لم تبدُ متفاجئة بما يكفي بالخدعة. توقعت الحواسيب أن يكون الارتباك ضئيلاً، لكن البشر يمرون فعلياً بـ "تعثر" ذهني هائل.
الفرضية: نظرية "المصباح اليدوي"
تساءل مؤلفو هذه الورقة البحثية: لماذا الحواسيب هادئة جداً؟
خمنوا أن السبب قد يكون أن الحواسيب ذكية للغاية. فعندما يقرأ الحاسوب "The girl fed the lamb"، قد يحتفظ في رأسه بـ عشرات التفسيرات المختلفة في آن واحد. هو يفكر: "ربما هي تطعم الحمل. ربما الحمل يطعمها. ربما هو نوع آخر من الحمل". ولأن الحاسوب ينظر إلى كل هذه الاحتمالات في وقت واحد، فإن كلمة "was" لا تشكل صدمة له؛ بل تبدو مجرد خيار من بين الخيارات العديدة التي كان يضعها في اعتباره بالفعل.
أما البشر، من ناحية أخرى، فقد يكونون مثل المصباح اليدوي في غرفة مظلمة. يمكننا تسليط ضوئنا على مسار أو مسارين فقط في المرة الواحدة. نحن نلتزم بفكرة "الفتاة تطعم"، وعندما نصطدم بكلمة "was"، يكون مصباحنا موجهاً في الاتجاه الخاطئ، وعلينا أن ندور لنبحث عن المسار الجديد. هذا الدوران يستغرق وقتاً وجهداً.
أطلق المؤلفون على هذا اسم "فرضية عدم تطابق تعدد المسارات" (Parse Multiplicity Mismatch Hypothesis). وببساطة: الحواسيب أقل مفاجأة لأنها تنظر إلى احتمالات كثيرة في وقت واحد، بينما يُجبر البشر على اختيار مسار واحد فقط.
التجربة: خفض شدة المصباح
لاختبار ذلك، استخدم الباحثون نوعاً خاصاً من النماذج الحاسوبية يمكن إخباره بالضبط بعدد "المسارات" التي يجب أن ينظر إليها. مرروا النماذج عبر جمل المسار الخادع مع إعدادات مختلفة:
- تعدد عالٍ (High Multiplicity): ينظر الحاسوب إلى 1,000 تفسير مختلف في آن واحد (مثل مصباح يدوي ساطع وواسع الانتشار).
- تعدد منخفض (Low Multiplicity): يُجبر الحاسوب على النظر إلى تفسير أو اثنين فقط (مثل مصباح يدوي خافت وضيق النطاق).
النتائج
- كانوا محقين جزئياً: عندما أجبروا الحاسوب على النظر إلى مسارات أقل (مصباح أضيق)، أصبح أكثر مفاجأة. "التعثر" في توقعات الحاسوب أصبح أكبر.
- لكنهم كانوا مخطئين في الغالب: حتى عندما أجبروا الحاسوب على النظر إلى مسار واحد فقط (المسار الخاطئ، تماماً مثل الإنسان)، كانت مفاجأة الحاسوب لا تزال ضئيلة مقارلة برد فعل الإنسان.
كان "تعثر" الحاسوب لا يزال أصغر بنحو 40 مرة من تعثر الإنسان.
الاستنتاج
تخلص الورقة البحثية إلى أن جعل الحواسيب "أقل ذكاءً" أو إجبارها على النظر إلى خيارات أقل لا يحل المشكلة. الفجوة بين كيفية معالجة الحواسيب واللغة ومعالجة البشر لها أكبر من أن تُفسر فقط بكيفية عدد الأفكار التي يمكنهم استيعابها في وقت واحد.
يشير المؤلفون إلى أن عقول البشر قد تمتلك خطوة إضافية لا تملكها الحواسيب: وهي آلية "إعادة التحليل" (re-analysis). عندما نتعثر، نحن لا نشعر بمجرد مفاجأة بسيطة؛ بل نقوم فعلياً بهدم فهمنا القديم وإعادة بناء فهم جديد. النماذج الحاسوبية الحالية، حتى وإن كانت محدودة، لا يبدو أنها تمتلك زر "الهدم وإعادة البناء" هذا. هي فقط تستمر في التخمين، وتخمن بسهولة مفرطة.
باختأصار
حاول الباحثون معرفة ما إذا كانت الحواسيب أقل مفاجأة بالجمل الماكرة لأنها "تفكر كثيراً" (تحتفظ بأفكار كثيرة). ووجدوا أنه حتى عندما أجبروا الحواسيب على "التفكير بشكل أقل"، ظلت الحواسيب هادئة جداً مقارنة بالبشر. وهذا يعني أن الفرق بين قراءة الحاسوب وقراءة الإنسان ليس مجرد مسألة عدد الأفكار التي يمكنهم الموازنة بينها؛ بل يتعلق بشيء أعمق في كيفية تعاملنا مع الخطأ.
غارق في أبحاث مجالك؟
تصلك نشرة يومية بأحدث الأبحاث المطابقة لكلماتك البحثية المفتاحية — مع ملخصات تقنية، بلغتك.