Efficient LLM Collaboration via Planning
تقترح الورقة البحثية إطار عمل COPE، وهو إطار تعاون في وقت الاختبار حيث تعمل النماذج اللغوية الصغيرة والكبيرة بالتناوب كمخططين ومنفذين في تسلسل متعدد المراحل، مما يحقق أداءً يضاهي النماذج الضخمة المملوكة مع تقليل تكاليف الاستدلال بشكل جذري.
البحث الأصلي مرخَّص بموجب CC BY 4.0 (http://creativecommons.org/licenses/by/4.0/). هذا شرح مولَّده بالذكاء الاصطناعي للبحث أدناه. لم يكتبه المؤلفون ولم يصادقوا عليه. وللتحقق من الدقة التقنية، يرجى الرجوع إلى البحث الأصلي. اقرأ إخلاء المسؤولية الكامل
تخيل أن لديك مهمة معقدة لحلها، مثل إصلاح محرك معطل أو حل لغز رياضي صعب. لديك مساعدان متاحان:
- الحرفي المحلي: عامل صغير، مجاني، وسريع يعيش في مرآبك مباشرة. إنه بارع في المهام البسيطة، لكنه قد يتعثر أحياناً في المشكلات المعقدة.
- المهندس المعماري الماستر: خبير ضخم ومكلف يعيش في برج تقني متطور بعيد. يمكنه حل أي شيء تقريباً، لكن استئجاره يكلف ثروة في كل مرة تطلب فيها المساعدة.
المشكلة هي: إذا استأجرت المهندس المعماري الماستر لكل مهمة، فستفلس. وإذا استخدمت الحرفي المحلي فقط، فقد يفشل في المهام الصعبة.
تقدم هذه الورقة طريقة جديدة للعمل تسمى COPE (التخطيط والتنفيذ التعاوني). إنها تشبه نظام فريق ذكي يسمح لهذين العاملين بالتعاون بكفاءة دون إضاعة المال.
كيف يعمل COCE: استراتيجية "التخطيط أولاً"
بدلاً من مجرد طلب "إصلاح المحرك" من الحرفي وتمني الأفضل، يستخدم COPE خطوة التخطيط. فكر في "الخطة" كخريطة سريعة عالية المستوى أو مجموعة من التعليمات تُكتب قبل بدء العمل الفعلي.
إليك العملية خطوة بخميل لكيفية تعاونهما:
المرحلة 1: الحرفي يحاول القيادة
يحاول الحرفي المحلي القيام بالمهمة بأكملها بمفرده. أولاً، يكتب "خطة" سريعة (هدف بسيط أو توجيه) لنفسه، ثم يحاول حل المشكلة بناءً على تلك الخطة.
- الفحص: إذا كان الحرفي واثقاً جداً من أنه أصاب (مثل أنه جرب الأمر ثلاث مرات وحصل على نفس الإجابة)، فإنه ينهي المهمة. هذا مجاني وسريع!
- الفشل: إذا كان غير متأكد أو بدت الإجابة مهتزة، فهو لا يستسلم، بل ينتقل إلى المرحلة 2.
المرحلة 2: المهندس يرسم الخريطة، والحرفي يبني
الآن، يتدخل المهندس المعماري الماستر المكلف، ولكن للحظة فقط. المهندس لا يقوم بالعمل الشاق بعد؛ بدلاً من ذلك، يكتب "خطة" جديدة وأفضل (خريطة أكثر وضوحاً) بناءً على المشكلة.
ثم يسلم هذه الخطة الجديدة للحرفي المحلي. يحاول الحرفي حل المشكلة مرة أخرى، ولكن هذه المرة يتبع خريطة المهندس الخبيرة.
- الفحص: إذا شعر الحرفي، بتوجيه من خريطة المهندس، بالثقة، فإنه ينهي المهمة. لقد دفعت فقط مقابل وقت ضئيل من وقت المهندس لرسم الخريطة، مما وفر الكثير من المال.
- الفشل: إذا ظل الحرفي عالقاً حتى مع وجود الخريطة، فإنه يصعد إلى المرحلة 3.
المرحلة 3: المهندس يتولى زمام الأمور
إذا لم تنجح الخطوتان الأولى والثانية، يقوم المهندس المعماري الماستر أخيراً بالمهمة بأكملها بنفسه — التخطيط والتنفيذ معاً. هذه هي الخطوة الأكثر تكلفة، لكنها لا تحدث إلا عند الضرورة القصوى.
لماذا يعد هذا أمراً هاماً
وجدت الورقة بعض الأشياء المفاجئة حول كيفية عمل هذا التعاون:
- العقول الكبيرة تساعد العقول الصغيرة: عندما يكتب المهندس المعماري الماستر الخطة للحرفي، يصبح الحرفي أكثر ذكاءً. الأمر يشبه طالباً يفهم فجأة مسألة رياضية بعد أن يشرح الأستاذ الاستراتيجية (الخطة)، حتى لو قام الطالب بالحسابات الفعلية.
- العقول الصغيرة قد تربك العقول الكبيرة: ومن المثير للاهتمام، إذا حاول الحرفي كتابة الخطة للمهندس المعماري الماستر، فإن ذلك يجعل أداء المهندس أسوأ. المهندس ذكي جداً لدرجة أن خطة بسيطة ومنخفضة الجودة من الحرفي يمكن أن تشتت انتباهه. لهذا السبب تم تصميم النظام بحيث يخطط المهندس للحرفي فقط، وليس العكس.
- إنه يوفر المال دون فقدان الجودة: في الاختبارات التي شملت الرياضيات والبرمجة وحتى مهام الوكيل المعقدة (مثل روبوت يتنقل في منزل)، حقق COPE نتائج كانت مساوية لـ، أو حتى أفضل من، استخدام المهندس المعماري الماستر وحده. ومع ذلك، فقد كلف 45% إلى 75% أقل لأن المهندس المكلف لم يُستدعَ إلا للأجزاء الأصعب أو لمجرد رسم الخريطة.
الخلاصة
COPE يشبه مديراً ذكياً يعرف متى يترك العامل المحلي يقوم بالمهمة، ومتى يطلب من الخبير نصيحة سريعة (الخطة)، ومتى يستدعي الخبير للقيام بالمهمة بأكملها. من خلال استخدام "التخطيط" كجسر خفيف الوزن بين نموذج صغير ونموذج كبير، فإنه يسمح لهما بالعمل معاً بكفاءة، وحل المشكلات الصعبة دون كسر الميزانية.
غارق في أبحاث مجالك؟
تصلك نشرة يومية بأحدث الأبحاث المطابقة لكلماتك البحثية المفتاحية — مع ملخصات تقنية، بلغتك.