Psychological Steering of Large Language Models
تقدم هذه الورقة إطار عمل للتوجيه النفسي باستخدام حقن في تيار المتبقي (residual-stream) معيرة دلالياً ومقيدة بالطلاقة، والتي تتفوق على نماذج التلقين الأساسية الموجودة في التحكم في سمات الشخصية للنماذج اللغوية الكبيرة، بينما تكشف عن كل من القدرة الخطية على التحكم في هذه التمثيلات وتباعدها عن النماذج النفسية البشرية.
البحث الأصلي مرخَّص بموجب CC BY 4.0 (http://creativecommons.org/licenses/by/4.0/). هذا شرح مولَّده بالذكاء الاصطناعي للبحث أدناه. لم يكتبه المؤلفون ولم يصادقوا عليه. وللتحقق من الدقة التقنية، يرجى الرجوع إلى البحث الأصلي. اقرأ إخلاء المسؤولية الكامل
تخيل نموذج لغة ضخم (LLM) كأنه ممثل موهوب للغاية، يمتلك قدرات هائلة، وقد حفظ كل كتاب وفيلم ومحادثة كُتبت على الإطلاق. يمكن لهذا الممثل أن يلعب أي دور، لكنه عادة ما يلتزم بشخصية "محايدة". أحياناً، تريد منه أن يلعب دوراً محدداً — مثل محقق غاضب، أو شخص متفائل للغاية، أو شرير يعشق الفوضى.
هذه الورقة البحثية تدور حول إيجاد الطريقة المثالية لتوجيه هذا الممثل ليلعب تلك الأدوار دون أن يخرج عن النص أو يبدو كآلة روبوتية.
المشكلة: الطريقة القديمة كانت غير دقيقة
في السابق، حاول الباحثون تغيير شخصية الممثل بطريقتين رئيسيتين:
- طريقة "التلقين" (الطلب بلطف): تخبر الممثل: "تظاهر بأنك سمكة سادية".
- العيب: الأمر يشبه إعطاء ملاحظة للمخرج. أحياناً يستمع الممثل، وأحياناً يتجاهلك. إنه أمر غير متسق.
- طريقة "الحقن" (تعديل الدماغ): تحاول دفع أفكار الممثل الداخلية (من الناحية الرياضية، "التنشيطات العصبية") قسراً لفرض سلوك معين.
- العيب: الطريقة القديمة في فعل ذلك كانت تشبه محاولة ضبط تردد راديو عبر التخمين. كنت تدير القرص قليلاً، تستمع، ثم تديره أكثر، وتخمن. إذا كان الإعداد المثالي بعيداً جداً على القرص (مثل 10,000 وحدة)، فلن تجده أبداً لأنك كنت تبحث فقط في الأرقام الأولى. كما أنك كنت تستخدم مسطرة غير معايرة، لذا فإن "وحدة واحدة" كانت تعني شيئاً مختلفاً لكل راديو.
الحل: نظام تحديد المواقع النفسي (GPS)
ابتكر المؤلفون إطار عمل جديداً يسمى التوجيه النفسي (Psychological Steering). فكر في الأمر كترقية من جهاز ضبط راديو يعتمد على التخمين إلى نظام تحديد مواقع (GPS) عالي التقنية يعرف بالضبط أين يقع محطة "الانفتاح" أو "السادية".
إليك كيف فعلوا ذلك، باستخدام تشبيهات بسيطة:
1. معايرة المسطرة (وحدة المركز - Centroid Unit)
تخيل أنك تحاول تحريك صندوق ثقيل. إذا دفعته بوصة واحدة، سيتحرك قليلاً. إذا دفعته 10,000 بوصة، سيطير عبر الغرفة.
- الطريقة القديمة: كانوا يدفعون الصندوق باستخدام "وحدات" لا معنى لها. أحياناً كانت الوحدة الواحدة بمثابة لمسة ريشة؛ وفي أحيان أخرى كانت بمثابة ضربة مطرقة ثقيلة.
- الطريقة الجديدة: قاسوا المسافة بين "الصندوق السعيد" و"الصندوق الحزين" داخل دماغ النموذج. حددوا "دفعتهم" بناءً على المسافة الفعلية بين هاتين الحالتين. الآن، هم يعرفون بالضبط مقدار القوة التي يجب توجيهها للوصول إلى النتيجة المثالية، بغض النظر عن مدى بعد الهدف.
2. حقن "فرق المتوسط" (MDS Injection)
اختبرت الورقة ست طرق مختلفة لدفع دماغ الممثل. ووجدوا أن الطريقة الأفضل تسمى MDS (فرق المتوسط).
- التشبيه: تخيل أن لديك حشداً من الناس. نصفهم يرتدون قمصاناً حمراء (تمثل "اللطف") والنصف الآخر يرتدون قمصاناً زرقاء (تمثل "القسوة").
- طريقة MDS تجد المركز الدقيق للحشد الأحمر والمركز الدقيق للحشد الأزرق. ثم ترسم خطاً مستقيماً بينهما.
- لجعل الممثل "لطيفاً"، تقوم بدفعه برفق عبر ذلك الخط نحو المركز الأحمر. ولجعله "قاسياً"، تدفعه نحو المركز الأزرق.
- النتيجة: كانت هذه الطريقة فعالة بشكل مدهش. في 11 نموذجاً من أصل 14 نموذج ذكاء اصطناعي، نجحت هذه "الدفعة" بشكل أفضل من مجرد طلب "كن لطيفاً" من الذكاء الاصطناعي (التلقين).
3. الطريقة الهجينة الفائقة (PM)
أدرك المؤلفون أن النهج الأفضل ليس مجرد طريقة واحدة منهما. لقد دمجوا بين طريقة "الطلب بلطف" (التلقين) وطريقة "دفع الدماغ" (MDS).
- التشبيه: الأمر يشبه إخبار الممثل: "أنت شخص لطيف"، بالتزامن مع دفعه برفق كيميائياً ليشعر باللطف فعلياً.
- النتيجة: هذا المزيج (المسمى PM) كان البطل بلا منازع. فقد تفوق على كلتا الطريقتين بمفردهما في 13 نموذجاً من أصل 14. جعل هذا المزيج تحولات شخصية الذكاء الاصطناعي أقوى وأكثر موثوقية.
مثال "البحث عن نيمو"
تتضمن الورقة مثالاً مضحكاً حيث قاموا بتوجيه ذكاء اصطناعي لكتابة قصة عن فيلم البحث عن نيمو.
- الذكاء الاصطناعي الطبيعي: يكتب قصة لطيفة عن سمكة.
- الذكاء الاصطناعي الموجّه: فجأة، تتحول القصة إلى مظلمة. يصبح الأب السمكة، مارلين، "سيد التلاعب" الذي يستمتع بمعاناة الآخرين.
- لماذا يهم هذا: لم يكتفِ الذكاء الاصطناعي بـ قول إنه مظلم؛ بل تغيرت نبرة القصة بالكامل، واختيار الكلمات، وتدفق القصة لتناسب تلك الشخصية المظلمة، وكل ذلك مع الحفاظ على لغة إنجليزية طليقة وطبيعية. وهذا شيء لم تستطع طريقة "الطلب" القديمة القيام به بهذه السلاسة.
الاكتشاف الكبير: التحكم الخطي
أكثر النتائج إثارة هي أن هذا التوجيه يعمل خطياً.
- التشبيه: فكر في مقبض التحكم في الصوت. إذا أدرته قليلاً، يصبح الصوت أعلى قليلاً. إذا أدرته تماماً، يصبح عالياً.
- وجد المؤلفون أن "مقبض الشخصية" الخاص بهم يعمل بنفس الطريقة. إذا دفعوا الذكاء الاصطناعي بنسبة 10% نحو "الانفتاح"، فسيصبح أكثر انفتاحاً بنسبة 10%. وإذا دفعوه بنسبة 50%، فسيصبح أكثر انفتاحاً بنسبة 50%. إنه أمر قابل للتنبؤ به وموثوق.
العقبة: فجوة "الاثنين الكبيرين"
بينما يمكن توجيه الذكاء الاصطناعي ليكون "منفتحاً" أو "عصبياً"، وجدت الورقة شيئاً غريباً. في علم النفس البشري، عادة ما تسير بعض السمات معاً في أنماط محددة (مثل كيفية ارتباط "الاستقرار" و"اللدونة").
- لم يتبع "دماغ" الذكاء الاصطناعي هذه الأنماط البشرية تماماً. فعندما جعلوا الذكاء الاصطناعي أكثر "انفتاحاً"، لم يقم تلقائياً بتعديل السمات الأخرى بالطريقة التي يفعلها البشر.
- ما يعنيه هذا: لقد تعلم الذكاء الاصطناعي محاكاة الكلمات والسلوكيات البشرية، لكن "نفسيته" الداخلية لا تزال غريبة نوعاً ما. إنه محاكٍ بارع، لكنه ليس روحاً بشرية كاملة.
الملخص
هذه الورقة هي طفرة في التحكم في الذكاء الاصطناعي. إنها تنقلنا من "الأمل في أن يستمع الذكاء الاصطناعي لتعليماتنا" إلى "التوليف العلمي لدماغ الذكاء الاصطناعي" ليكون بالضبط من نريده أن يكون.
- الطريقة القديمة: "من فضلك كن لطيفاً". (تعمل أحياناً، ولا تعمل أحياناً أخرى).
- الطريقة الجديدة: "هذه هي المسافة الرياضية الدقيقة نحو 'اللطف'، وهذه هي القوة المثالية لتطبيقها". (تعمل في كل مرة تقريباً).
يفتح هذا الباب أمام إنشاء رفقاء ذكاء اصطناعي، أو معالجين نفسيين، أو شخصيات لعب أدوار يشعرون باتساق حقيقي ويتماشون بعمق مع شخصيات بشرية محددة.
غارق في أبحاث مجالك؟
تصلك نشرة يومية بأحدث الأبحاث المطابقة لكلماتك البحثية المفتاحية — مع ملخصات تقنية، بلغتك.