Single-Agent LLMs Outperform Multi-Agent Systems on Multi-Hop Reasoning Under Equal Thinking Token Budgets
تجادل هذه الورقة بأن نماذج اللغات الكبيرة أحادية الوكيل أكثر كفاءة في المعلومات من الأنظمة متعددة الوكلاء في الاستدلال متعدد الخطوات تحت ميزانية متساوية من الرموز (tokens)، حيث تثبت من خلال دراسة تجريبية وتحليل معلوماتي نظري أن المزايا المزعومة للأنظمة متعددة الوكلاء تنبع غالباً من الحوسبة غير المنضبطة والآثار السياقية بدلاً من الفوائد الهيكلية المتأصلة.
البحث الأصلي مرخَّص بموجب CC BY 4.0 (http://creativecommons.org/licenses/by/4.0/). هذا شرح مولَّده بالذكاء الاصطناعي للبحث أدناه. لم يكتبه المؤلفون ولم يصادقوا عليه. وللتحقق من الدقة التقنية، يرجى الرجوع إلى البحث الأصلي. اقرأ إخلاء المسؤولية الكامل
تخيل أنك تحاول حل لغز صعب للغاية، مثل أحجية معقدة تتطلب ربط ثلاثة أدلة مختلفة للوصول إلى الإجابة. لديك طريقتان للتعامل مع الأمر:
- العبقري المنفرد (الوكيل الفردي): شخص ذكي واحد يجلس خلف مكتبه، يفكر بجدية، ويدون عملية تفكيره بالكامل، ويحل اللغز بمفرده.
- اللجنة (متعدد الوكلاء): مجموعة من الأشخاص يجلسون حول طاولة. يتبادلون الملاحظات فيما بينهم، ويتناقشون، ويقسمون العمل، ويحاولون حل اللغز معاً.
لفترة طويلة، افترض الجميع أن اللجنة كانت أفضل لأن لديها المزيد من "القدرة الذهنية" وكان بإمكانهم مناقشة الأفكار. لكن هذه الورقة البحثية الجديدة تطرح سؤالاً حاسماً: هل هم في الواقع أذكى، أم أنهم يستخدمون فقط المزيد من الورق والحبر؟
الاكتشاف الكبير: الأمر يتعلق بالميزانية
أدرك الباحثون أنه في الدراسات السابقة، كان يُسمح للجنة دائماً باستخدام الكثير من الورق (الرموز/Tokens) مقارنة بالعبقري المنفرد. كان بإمكان اللجنة كتابة 10 صفحات من الملاحظات بينما كان يُسمح للعبقري بكتابة صفحة واحدة فقط. وبالطبع، بدت اللجنة أفضل! فقد كان لديهم مساحة أكبر للتفكير.
لقد أجبرتهم هذه الورقة على استخدام نفس مقدار الورق تماماً (ميزانية تفكير ثابتة). وعندما فعلوا ذلك، كانت النتائج مفاجئة:
العبقري المنفرد فاز تقريباً في كل مرة أو تعادل مع اللجنة.
لماذا؟ تشبيه "لعبة الهاتف"
يستخدم المؤلفون مفهوماً من نظرية المعلومات لشرح ذلك. تخيل أنك تلعب لعبة الهاتف (حيث يتم نقل رسالة من شخص لآخر عبر الهمس).
- العبقري المنفرد يسمع القصة كاملة مرة واحدة، يفكر فيها، ثم يكتب الإجابة. تظل المعلومات طازجة وكاملة في رأسه.
- اللجنة تضطر لتهْميس القصة من الشخص (أ) إلى الشخص (ب)، ثم إلى الشخص (ج). في كل مرة يمررون فيها ملاحظة، يضيع جزء صغير من الرسالة، أو يتشوه، أو يُنسى. حتى لو كانوا جميعاً أذكياء جداً، فإن عملية تمرير الرسالة حولهم تُدخل "الضجيج".
تجادل الورقة بأنه ما لم تكن لدى اللجنة ميزة هائلة (مثل امتلاك ميزانية أكبر بكثير للتحدث)، فإن العبقري المنفرد أكثر كفاءة لأنه لا يفقد المعلومات في منتصف المحادثة.
متى تفوز اللجنة؟
وجدت الورقة موقفاً واحداً تبرز فيه اللجنة بوضوح: عندما يكون اللغز "فوضوياً".
تخيل أن العبقري المنفرد يحاول قراءة كتاب، لكن شخصاً ما سكب القهوة على الصفحات، أو مزق نصف النص، أو كتب كلمات عشوائية فوق الأدلة. يصاب العبقري بالارتباك ولا يستطيع إيجاد الإجابة.
في هذه الحالة، يمكن للجنة أن تساعد. لأنهم يقسمون العمل، يمكن لشخص واحد التركيز على تنظيف بقع القهوة، وآخر يمكنه تجاهل الكلمات العشوائية، وثالث يمكنه التحقق من الحقائق. يمكنهم "تصفية الفوضى" بشكل أفضل من شخص واحد يحاول القيام بكل ذلك دفعة واحدة.
الدرس المستفاد: إذا كانت المعلومات واضحة، فإن عقلاً ذكياً واحداً هو الأفضل. وإذا كانت المعلومات فوضوية أو مكسورة، فإن الفريق يمكنه أحياناً إصلاحها.
"الخدعة الخفية" في النتائج
وجد الباحثون أيضاً خللاً مضحكاً في كيفية إبلاغ بعض أنظمة الذكاء الاصطنيعي (تحديداً Google Gemini) عن عملها.
- عندما يُطلب منها "التفكير لمدة 10,000 خطوة"، كان العبقري المنفرد غالباً ما يتوقف عن الكتابة بعد 300 خطوة، رغم أن الكمبيوتر يقول إنه استخدم 10,000.
- أما اللجنة، فقد كانت تكتب بالفعل الـ 10,000 خطوة لأنهم كانوا يتبادلون الملاحظات بين "أشخاص" مختلفين.
هذا جعل اللجنة تبدو وكأنها تبذل مجهوداً أكبر بكثير مما كانت تفعله في الواقع. تشير الورقة إلى أن العديد من الدراسات السابقة التي زعمت أن "الفرق أفضل" كانت في الواقع تقيس فقط "الفرق التي سُمح لها باستخدام المزيد من الورق".
الخلاصة
إذا كنت تريد حل مشكلة استنتاجية بكفاءة:
- لا تفترض أن المزيد من الأشخاص = نتائج أفضل. غالباً ما يكون العقل الواحد المركز أكثر كفاءة إذا مُنح نفس الموارد.
- احذر من "المجهود الزائف". مجرد قول الذكاء الاصطناعي إنه "فكر" كثيراً لا يعني أنه عالج معلومات أكثر بالفعل.
- استخدم فريقاً فقط عندما تكون الأمور فوضوية. إذا كانت البيانات مشوشة أو مربكة، فإن هيكل الفريق يمكن أن يساعد في تصفية المعلومات السيئة.
باختصار: من أجل التفكير الواضح، يكون العقل الذكي الواحد عادةً أفضل من لجنة من العقول التي تمرر الملاحظات لبعضها البعض، ما لم تكن تلك الملاحظات هي الشيء الوحيد الذي يمنع الفريق من الضياع.
غارق في أبحاث مجالك؟
تصلك نشرة يومية بأحدث الأبحاث المطابقة لكلماتك البحثية المفتاحية — مع ملخصات تقنية، بلغتك.