ملخص تقني: فكر ثلاث مرات قبل أن تتحدث (TTBYS)

1. تعريف المشكلة

تتطلب أنظمة الحوار الإقناعي القدرة على استنتاج والاستدلال حول الحالات الذهنية الكامنة للمستخدم، وهي قدرة تُعرف باسم "نظرية العقل" (Theory of Mind - ToM). وبينما حققت النماذج اللغوية الكبيرة (LLMs) تقدماً في هذا المجال، فإن النهج الحالية تعتمد غالباً على استراتيجيات توجيه (prompting) بسيطة وتفتقر إلى معرفة كافية بنظرية العقل. ونتيجة لذلك، فإنها غالباً ما تفشل في التقاط التبعيات الجوهرية بين الحالات الذهنية (المعتقدات، الرغبات، والنوايا)، مما يؤدي إلى تمثيلات مجزأة واستدلال غير مستقر في التفاعلات متعددة الأدوار.

تشير الاختبارات المرجعية الحالية (مثل NegotiationToM و ToMATO و PersuasiveToM) إلى أن النماذج اللغوية الكبيرة تعاني من صعوبة في الاستدلال الموثوق للحالة الذهنية بسبب نقص المعرفة المسبقة. علاوة على ذلك، فإن معظم الطرق الحالية تعامل الحالات الذهنية كمتغيرات مستقلة بدلاً من نمذجة تطورها المتسلسل، مما يحد من القابلية للتفسير والفعالية طويلة الأمد في سيناريوهات الإقناع المعقدة.

2. المنهجية

2.1 مهمة ToM-PD وإطار عمل BDI

صاغ المؤلفون مهمة الحوار الإقناعي القائم على نظرية العقل (ToM-PD)، المستندة إلى إطار عمل المعتقد-الرغبة-النية (BDI). وخلافاً للتطور الأمامي لحالات الذات (معتقد $\leftarrow$ رغبة $\leftarrow$ نية $\leftarrow$ فعل)، يتم نمذجة مهمة ToM-PD كعملية استدلال عكسية متدرجة. يقوم الوكيل بمراقبة التعبيرات الخارجية للشخص المُقنع ويجب عليه استنتاج ما يلي بشكل تكراري:

1. النية ($i_t$): الهدف المباشر من التعبير.
2. الرغبة ($d_t$): موقف المستخدم تجاه هدف الإقناع (يتم نمذجتها كـ -1: غير راغب، 0: متردد، 1: راغب).
3. المعتقد ($b_t$): الآراء أو المخاوف الكامنة التي تدفع الرغبة.
4. الاستراتيجية ($s_t$): الاستجابة الإقناعية المثلى بناءً على الحالات المستنتجة.

2.2 إطار عمل TTBYS

لمعالجة تحديات عدم الاستقرار ونقص المعرفة، يقترح البحث إطار عمل "فكر ثلاث مرات قبل أن تتحدث" (TTBYS)، وهو إطار استدلال معزز بالمعرفة وخطواتي. يستفيد TTBYS من الخبرات السابقة الصريحة والضمنية لتوجيه النماذج اللغوية الكبيرة عبر ثلاث مراحل استدلال متميزة:

• التفكير الأول (استنتاج الرغبة):

  • يتم تلخيص الحوار الحالي في نية عالية المستوى ($i$).
  • يُستخدم هذا الملخص لاسترجاع أفضل $N$ من التجارب التاريخية المتشابهة دلالياً من قاعدة معرفية.
  • يتم بناء توزيع احتمالي للرغبات من التجارب المسترجعة ($P_{ex}$).
  • يتم دمج هذا التوزيع خطياً مع التوزيع الاحتمالي الحدسي للنموذج اللغوي الكبير ($P_{ag}$) لتحديد تنبؤ الرغبة النهائي: $d^*_t = \arg \max (\alpha \cdot P_{ag} + (1-\alpha) \cdot P_{ex})$.

• التفكير الثاني (استنتاج المعتقد):

  • باستخدام الرغبة المستنتجة ($d^*$) وملخص الحوار، يقوم النظام باسترجاع التجارب ذات الصلة التي تحتوي على معلومات المعتقد.
  • يتم حقن هذه التجارب المسترجعة مباشرة في سياق النموذج اللغوي كـ معرفة صريحة.
  • يقوم النموذج اللغوي بتوليد وصف المعتقد ($b^*$) مشروطاً بالحوار، والرغبة المستنتجة، والأمثلة المسترجعة.

• التفكير الثالث (توقع الاستراتيجية):

  • يقوم النظام بعملية استرجاع مشتركة باستخدام ملخص الحوار والمعتقد المستنتج.
  • على غرار "التفكير الأول"، يتم دمج توزيع الاستراتيجية المدفوع بالخبرة مع توزيع النموذج اللغوي باستخدام معامل $\beta$ لاختيار الاستراتيجية المثلى.

2.3 مجموعة بيانات ToM-BPD

لتسهيل البحث، أنشأ المؤلفون مجموعة بيانات الحوارات الإقناعية الواسعة القائمة على نظرية العقل (ToM-BPD)، وهي مجموعة بيانات ضخمة موسومة مستمدة من معيار PersuasiveToM.

• التوسيم (Annotations): يتضمن تسميات دقيقة لرغبة الشخص المُقنع (قيم منفصلة -1، 0، 1) والمعتقد (جمل لغوية طبيعية)، بالإضافة إلى استراتيجية الشخص المُقنع.
• التصنيف (Taxonomy): تُصنف الاستراتيجيات إلى ثلاث مجموعات (اجتماعية-عاطفية، معرفية، تفاعلية) وتسع تقنيات دقيقة بناءً على نموذج الإدراك التفصيلي (ELM) والمقابلة التحفيزية.
• ضبط الجودة: خضعت مجموعة البيانات لعملية توسيم صارمة باستخدام التوسيم شبه الآلي، والتحقق البشري متعدد الجولات، واختبارات التأهيل للموسمين.

3. المساهمات الرئيسية

1. صياغة المهمة: تقديم مهمة ToM-PD، التي تنمذج صراحةً التبعيات المتسلسلة بين الحالات الذهنية (النية، الرغبة، المعتقد) لتعزيز القابلية للتفسير.
2. اقتراح إطار العمل: تطوير TTBYS، وهو إطار عمل معزز بالمعرفة يدمج تجارب نظرية العقل المهيكلة لتحسين قوة واتساق استدلال النماذج اللغوية الكبيرة في الحوارات الإقناعية.
3. بناء مجموعة البيانات: إصدار ToM-BPD، وهي مجموعة بيانات متعددة المجالات ذات توسيمات دقيقة للحالة الذهنية، تم التحقق منها من خلال تجارب ودراسات حالة مكثفة.

4. النتائج التجريبية

قيم المؤلفون TTBYS عبر ستة نماذج لغوية كبيرة رائدة (بما في ذلك LLaMA-3.1-8B، و Qwen-3-8B، و Mixtral-7B، ونماذج مغلقة المصدر مثل GPT-5 و Gemini-3-Pro).

• التقييم الساكن (Static Evaluation):

  • الأداء: تفوق نموذج Qwen-3-8B المجهز بـ TTBYS على GPT-5 بنسبة 1.20% في التنبؤ بالرغبة، و 22.80% في التنبؤ بالمعتقد، و 16.97% في التنبؤ بالاستراتيجية.
  • المقارنة: تفوق TTBYS باستمرار على التوجيه الصفري التقليدي (vanilla zero-shot)، وسلسلة الأفكار (CoT)، وغيرها من النماذج المرجعية المعززة بنظرية العقل (Hypothetical Minds, Metamind) عبر جميع النماذج مفتوحة المصدر.
  • دراسة الاستئصال (Ablation): أكدت الدراسة أن الدمج المتوازن بين الإشارات القائمة على الخبرة وإشارات النموذج اللغوي (عبر المعاملات $\alpha$ و $\beta$) يحقق أفضل النتائج. كما أدى زيادة كمية التجارب المسترجعة عموماً إلى تحسين الأداء، خاصة في مرحلتي التفكير الأول والثالث.

• التقييم التفاعلي (Interactive Evaluation):

  • أظهرت التفاعلات المحاكية في سيناريوهات شراء المنتجات، والأنشطة المجتمعية، والحوار التعاطفي أن TTBYS (باستخدام Qwen-3-8B) تفوق بشكل كبير على نماذج GPT-5 المرجعية في التحديد (كشف الحالات الذهنية) وفعالية الإقناع.
  • بينما أظهر GPT-5+CoT اتساقاً أعلى قليلاً، أظهر TTBYS قدرة فائقة على تكييف الاستراتيجيات بناءً على الاستدلال الدقيق للحالة الذهنية.

• دراسات الحالة (Case Studies):

  • أظهر التحليل النوعي أن TTBYS يمكنه التقاط معتقدات دقيقة (مثل الشك في صلة الخصوصية عبر الإنترنت بالتنمية الريفية) التي فاتت النماذج المرجعية، مما أدى إلى تنبؤات أكثر دقة للرغبة واختيار استراتيجيات أكثر ملاءمة.

5. الأهمية والادعاءات

يزعم البحث أن TTBYS يطور بشكل كبير أحدث ما توصل إليه العلم في الحوار الإقناعي القائم على نظرية العقل من خلال:

• تعزيز القابلية للتفسير: عبر تفكيك عملية الإقناع إلى خطوات صريحة (رغبة $\leftarrow$ معتقد $\leftarrow$ استراتيجية) واستخدام استدلال مهيكل، يصبح اتخاذ القرار في النظام أكثر شفافية وقابلية للتتبع.
• تحسين المتانة (Robustness): يعمل دمج الخبرات السابقة على تخفيف عدم استقرار النماذج اللغوية الكبيرة في استنتاج الحالات الذهنية الكامنة، مما يسمح للنماذج مفتوحة المصدر الأصغر بمضاهاة أو تجاوز النماذج الكبيرة مغلقة المصدر.
• توفير الأساس: توفر مهمة ToM-PD ومجموعة بيانات ToM-BPD معياراً موحداً للأبح futuras في نمذجة الحالات الذهنية الديناميكية في التفاعلات الاجتماعية.

يقر المؤلفون بوجود قيود، مشيرين إلى أن حجم مجموعة البيانات صغير نسبياً، وأن النهج لم يتم التحقق منه بعد في نظام إقناع منتشر بالكامل في العالم الحقيقي. ويؤكدون أنه بينما تم تصميم إطار العمل للتطبيقات الاجتماعية الإيجابية، فإن الضمانات ضرورية لمنع سوء الاستخدام المحتمل في السياقات التلاعبية.