The Illusion of Insight in Reasoning Models
تتحدى هذه الورقة مفهوم لحظات "وجدتها!" (Aha!) الجوهرية في نماذج الاستنتاج من خلال إثبات أن التحولات في منتصف عملية الاستدلال نادرة، وغير مرتبطة بالتقدم في التدريب، وغير فعالة عادةً، كاشفةً عنها بدلاً من ذلك كأعراض لاستقرار الاستدلال غير المستقر التي لا يمكن استغلالها لتحقيق مكاسب في الأداء إلا عند تحفيزها اصطناعياً في ظل حالة عالية من عدم اليقين.
البحث الأصلي مرخَّص بموجب CC BY 4.0 (http://creativecommons.org/licenses/by/4.0/). هذا شرح مولَّده بالذكاء الاصطناعي للبحث أدناه. لم يكتبه المؤلفون ولم يصادقوا عليه. وللتحقق من الدقة التقنية، يرجى الرجوع إلى البحث الأصلي. اقرأ إخلاء المسؤولية الكامل
إليك شرح لورقة بحثية بعنوان "وهم الاستبصار في نماذج الاستدلال"، باستخدام لغة بسيطة وتشبيهات إبداعية.
الفكرة الكبرى: أسطورة لحظة "آها!" (الوجد)
تخيل أنك تشاهد طالباً يؤدي اختبار رياضيات صعباً. فجأة، يتوقف، ويقطب جبينه، ويقول: "مهلاً... دعني أعيد التفكير في هذا،" ثم يمسح إجابته الخاطئة ليكتب إجابة جديدة وصحيحة. يبدو هذا وكأنه لحظة عبقرية مفاجئة، ومضة من الذكاء. نحن نسمي هذا "لحظة آها!" (Aha! moment).
لفترة من الوقت، اعتقد الباحثون أن نماذج الذكاء الاصطني المتقدمة (مثل DeepSeek-R1) بدأت تطور هذه القدرة البشرية المشابهة على إدراك أخطائها وتصحيحها بمفردها فجأة. اعتقدوا أن الذكاء الاصطناعي "يفكر" ليخرج من المآزق.
هذه الورقة البحثية تقول: هذا مجرد وهم على الأرجح.
تعمق المؤلفون، وهم باحثون من جامعة برينستون، في أكثر من مليون مسار استدلال (الأفكار خطوة بخطوة لنماذج الذكاء الاصطناعي) ووجدوا أن لحظات "آها!" هذه نادرة جداً، وعندما تحدث، فإنها عادة ما تجعل الذكاء الاصطناعي أسوأ حالاً، وليس أفضل.
التحقيق: قصة بوليسية
للوصول إلى الحقيقة، أقام الباحثون تجربة ضخمة. فكر في الأمر كأنه برنامج واقع علمي للذكاء الاصطناعي.
المتسابقون: استخدموا نماذج ذكاء اصطناعي مختلفة (مثل Qwen و Llama) ودربوها على ثلاثة أنواع مختلفة تماماً من الألغاز:
- الكلمات المتقاطعة الغامضة: مثل حل لغز تكون إجابته مخفية في تلاعب بالألفاظ.
- مسائل الرياضيات: الجبر والمنطق القياسي.
- أحجية "ساعة الذروة" (Rush Hour): تحريك السيارات على شبكة لتحرير سيارة حمراء.
الكاميرات: لم ينظروا فقط إلى الإجابة النهائية. بل سجلوا كل خطوة اتخذها الذكاء الاصطناعي، وراقبوا اللحظة المحددة التي يقول فيها: "مهلاً، هذا خطأ،" أو "دعنا نجرب نهجاً مختلفاً."
لوحة النتائج: تحققوا مما إذا كان الذكاء الاصطناعي قد حصل على الإجابة الصحيحة قبل كلمة "مهلاً" وما إذا كان قد حصل عليها بعد كلمة "مهلاً".
النتائج: "مهلاً" هي غالباً زر ذعر
إليك ما اكتشفوه، مترجماً إلى مصطلحات يومية:
1. "مهلاً" نادرة وغالباً ما تكون خطأً
عندما يقول الذكاء الاصطناعي: "مهلاً، دعني أعيد التقييم،" فغالباً ليس لأن لديه فكرة جديدة عبقرية. بل غالباً لأنه ارتبك أو بدأ في "الهلوسة" (اختلاق أشياء من العدم).
- التشبيه: تخيل سائقاً يقود في الطريق الخطأ. بدلاً من إدراك الخطأ مبكراً، يستمر في القيادة حتى يصل إلى طريق مسدود. ثم يقول: "مهلاً، هناك شيء خاطئ!" ثم يستدير. لكن في كثير من الأحيان، بحلول الوقت الذي يستدير فيه، يكون قد تاه بالفعل في حي آخر.
- البيانات: في دراستهم، عندما غير الذكاء الاصطناعي رأيه في منتصف الجملة، كان أقل احتمالاً للحصول على الإجابة الصحيحة مما لو كان قد استمر فقط في خطته الأصلية.
2. التدريب لا يصلح الأمر
قد تعتقد: "ربمـا يصبح الذكاء الاصطناعي أفضل في هذا مع تعلمه المزيد؟"
- النتيجة: لا. حتى بعد تدريب الذكاء الاصطناعي لآلاف الخطوات، لم تصبح لحظات "آها!" هذه أكثر شيوعاً أو أكثر فائدة. لم يتعلم الذكاء الاصطناعي "التصحيح الذاتي" بطريقة ذكية؛ بل استمر فقط في القيام بنفس النوع من التحولات المرتبكة.
3. دليل "عدم اليقين"
لاحظ الباحثون شيئاً مثيراً للاهتمام حول متى يغير الذكاء الاصطناعي رأيه. فقد كان يحدث ذلك عندما يكون الذكاء الاصطناعي غير متيقن (عندما يكون في حالة "تخمين" عشوائي).
- التشبيه: فكر في شخص يؤدي اختباراً وهو غير متأكد من الإجابة. قد يضع دائرة حول إجابة، ثم يمسحها، ثم يضع دائرة حول أخرى، ثم يمسحها أيضاً. هو لا يمر بلحظة استبصار عبقرية؛ هو فقط يشعر بالذعر. كان الذكنا الاصطناعي يفعل الشيء نفسه.
المفاجأة: يمكننا تزييف لحظة "آها!"
إليك الجزء الأكثر إثارة في الورقة البحثية. على الرغم من أن الذكاء الاصطناعي لا يملك "استبصاراً" طبيعياً، فقد وجد الباحثون طريقة لإجباره على امتلاك لحظة "آها!" مفيدة.
لقد أدركوا أنه عندما يكون الذكاء الاصطناعي غير متيقن (ارتفاع "الإنتروبيا"، أو ارتفاع الارتباك)، فإنه يحتاج إلى دفعة. لذا، برمجوا قاعدة بسيطة:
- إذا بدا الذكاء الاصطناعي مرتبكاً، أدخل أمراً (Prompt) يقول: "مهلاً، هناك شيء غير صحيح. دعنا نفكر في هذا الأمر خطوة بخطوة مرة أخرى."
النتيجة؟
عندما فعلوا ذلك بشكل اصطناعي، ارتفع أداء الذكاء الاصطناعي بشكل هائل.
- في مسائل الرياضيات، قفزت الدقة بنسبة 8.4%.
- لقد نجح الأمر لأن الذكاء الاصطناعي لم يكن "مستبصراً" من تلقاء نفسه. هو فقط احتاج إلى تذكير خارجي للتمهل ومراجعة عمله عندما شعر بعدم اليقين.
الخلاصة: إنها آلية، وليست سحراً
تخلص الورقة البحثية إلى أن لحظات "آها!" التي نراها في الذكاء الاصطناعي ليست علامة على نمو وعي أو روح تشبه البشر. إنها مجرد أعراض عدم الاستقرار.
- الرؤية القديمة: الذكاء الاصطناعي يشبه طالباً لديه فجأة ومضة من العبقرية.
- الرؤية الجديدة: الذكاء الاصطناعي يشبه سيارة بمحرك حساس. عندما يبدأ المحرك في التلعثم (الارتباك)، يصدر صوتاً غريباً (يقول "مهلاً"). إذا تجاهلنا الصوت، ستتوقف السيارة. ولكن إذا تدخل ميكانيكي (محفز خارجي) وقال: "افحص الزيت"، ستعمل السيارة بسلاسة مرة أخرى.
باخت-القول: الذكاء الاصطناعي لا يملك "الاستبصار" بعد. ولكن إذا عرفنا متى يكون مرتبكاً، يمكننا خداعه ليفكر بشكل أفضل، وهذا يعد فوزاً كبيراً لجعل الذكاء الاصطناعي أكثر موثوقية وأماناً.
غارق في أبحاث مجالك؟
تصلك نشرة يومية بأحدث الأبحاث المطابقة لكلماتك البحثية المفتاحية — مع ملخصات تقنية، بلغتك.