ملخص تقني: استقصاء انحياز الهوية الاجتماعية في النماذج اللغوية الكبيرة الصينية باستخدام الضمائر الجندرية والمجموعات الاجتماعية

بيان المشكلة

تتزايد عمليات نشر النماذج اللغوية الكبيرة (LLMs) في التطبيقات الموجهة للمستخدمين، مما يثير مخاوف من أنها قد تعكس وتضخم الانحيازات الاجتماعية القائمة. وبينما وثقت الأبحاث السابقة باستفاضة الانحيازات الخاصة بفئات معينة (مثل النوع الاجتماعي أو العرق) في النماذج اللغوية الكبيرة المتمحورة حول اللغة الإنجليزية باستخدام معايير مثل CrowS-Pairs أو التحليلات القائمة على التضمين، إلا أن هناك فجوة كبيرة في فهم انحيازات الهوية الاجتماعية ضمن السياق اللغوي الصيني. تفترض نظرية الهوية الاجتماعية أن الأفراد يظهرون مواقف إيجابية تجاه "جماعتهم" (ingroup) ومواقف سلبية تجاه "الجماعات الأخرى" (outgroups). ومع ذلك، لا يزال من غير الواضح ما إذا كانت النماذج اللغوية الكبيرة الصينية تعيد إنتاج هذه الديناميكيات، وكيف تؤثر السمات اللغوية المحددة للغة الماندارين — وخاصة التمييز بين ضمير الجمع الافتراضي 他们 (tāmen، المستخدم للمجموعات المختلطة أو غير المحددة جنسياً) والضمير المؤنث الصريح 她们 (tāmen) — على هذه الانحيازات. كما أن استراتيجيات التقييم الحالية تغفل غالباً الآلية العلاقاتية للمشاعر بين المجموعات والهياكل المورفولوجية الفريدة للغة الصينية.

المنهجية

تستخدم الدراسة إطار عمل توليدي مضبوط عبر عشرة نماذج لغوية كبيرة صينية ممثلة، تشمل نسخاً أساسية (مدربة مسبقاً) وأخرى مضبوطة بالتعليمات (instruction-tuned) من مطورين رئيسيين (مثل Alibaba وBaidu وTencent وDeepSeek).

1. تصميم المطالبات وجمع البيانات

• ظروف التأطير: صمم المؤلفون مطالبات إكمال الجمل باستخدام نوعين رئيسيين من التأطير:
  • الجماعة (Ingroup): ضمير الجمع للمتكلم ("我们"، نحن).
  • الجماعة الأخرى (Outgroup): ضمير الجمع للغائب، وينقسم إلى:
    • الجمع الافتراضي: "他们" (غير محدد/مختلط الجنس).
    • الجمع المؤنث: "她们" (محدد مؤنثاً بشكل صريح).
• المجموعات الاجتماعية: تم تطبيق المطالبات على 240 مجموعة اجتماعية بارزة في السياق الصيني (مثل العمر، الإعاقة، الجنسية، المستوى التعليمي) باستخدام صيغة "بصفتنا [المجموعة]، نحن/هم..."
• تخفيف حالات الرفض: لضمان توليد مستقر من النماذج المضبوطة بالتعليمات، استُخدمت استراتيجية "سند" (scaffolding) ذات سياق محايد، حيث أُضيفت جمل عالية الجودة ومحايدة من مجموعة نصوص ChineseWebText قبل المطالبات.
• مجموعة البيانات: ولّدت الدراسة 297,600 استجابة من النماذج العشرة. بالإضافة إلى ذلك، أُجري تحليل استكشافي تكميلي على 4,079 تفاعلاً بين المستخدم والمساعد من مجموعة بيانات WildChat لتقييم الصلاحية في العالم الحقيقي.

2. إطار القياس

تم اعتماد إطار قياس ثنائي المستويات لتقييم كل من المشاعر والسمية:

• تحليل المشاعر: استُخدمت ثلاثة مصنفات (Aliyun وBaidu NLP وDeepSeek-V3) لتصنيف الاستجابات كإيجابية، أو سلبية، أو محايدة. وتم استخلاص التصنيفات المتفق عليها عبر التصويت بالأغلبية، مع التحقق اليدوي على عينة من 200 جملة أظهر توافقاً بنسبة 83.5%.
• تحليل السمية: استُخدمت واجهة Perspective API لتوليد درجات سمية مستمرة (0–1)، لالتقاط الإشارات المتعلقة بالسلامة (مثل التعليقات الفظة، أو غير المحترمة، أو غير المعقولة) التي قد يغفل عنها تحليل المشاعر وحده.
• النمذجة الإحصائية: تم تقدير نماذج الانحدار (اللوجستي للمشاعر الثنائية، والخطي للسمية) لاختبار تضامن الجماعة (ingroup solidarity) وعدائية الجماعة الأخرى (outgroup hostility)، مع التحكم في طول الجملة والتنوع المعجمي (نسبة النوع إلى الرمز).

النتائج الرئيسية

1. عدم التماثل المنهجي بين الجماعة والجماعة الأخرى

في جميع النماذج تقريباً، وجدت الدراسة عدم تماثل منهجي:

• تضامن الجماعة: كانت الاستجابات تحت تأطير "نحن" أكثر إيجابية بشكل عام من الاستجابات تحت تأطير "هم".
• عدائية الجماعة الأخرى: أظهرت الاستجابات تحت تأطير "هم" مشاعر سلبية وسمية أعلى.
• تباين النماذج: أظهرت النماذج المدربة مسبقاً عدائية قوية تجاه الجماعات الأخرى. بينما أظهرت النماذج المضبوطة بالتعليمات أنماطاً أكثر توازناً، حيث تم تخفيف عدم تماثل المشاعر غالباً، رغم بقاء فجوات السمية أكثر استمراراً.

2. تأثير العلامات اللغوية الجندرية

كشف التمييز بين 他们 و 她们 عن أنماط انحياز محددة:

• السمية المرتبطة بالأنوثة: في عدة نماذج، ارتبط الجمع المؤنث الصريح (她们) بدرجات سمية أعلى مقارلة بالجمع الافتراضي (他们)، حتى عندما كان عدم تماثل المشاعر طفيفاً.
• تأثيرات الضبط بالتعليمات: بينما قلل الضبط بالتعليمات من التفاوت في المشاعر، ظلت فجوة السمية المرتبطة بالصيغة المؤنثة مرئية في بعض الأنظمة، مما يشير إلى أن محاذاة السلامة لا تقضي تماماً على الانحياز الجندري.

3. التباين عبر الفئات الاجتماعية

لم يكن التعبير عن الانحياز موحداً عبر الـ 240 مجموعة اجتماعية:

• الحساسية العالية: أظهرت المجموعات المتعلقة بـ الجنس، والجنسية، والعرق أوضح عدم تماثل بين الجماعة والجماعة الأخرى (نسب الأرجحية > 1.4).
• الآثار المخمدة: أظهرت فئات مثل العرق والمستوى التعليمي آثاراً مخمدة أو معكوسة، مما يشير إلى آليات محاذاة سلامة انتقائية تخفف من المخرجات السلبية لبعض الفئات الحساسة بينما تترك أخرى عرضة لذلك.

4. أدلة الحوار في العالم الحقيقي

قدم التحليل التكميلي لحوارات WildChat أدلة استكشافية على وجود أنماط مشابهة بين الجماعة والجماعة الأخرى في التفاعلات الطبيعية، وإن كان المؤلفون يحذرون من أن هذه النتائج لا يمكن مقارنتها مباشرة بالتجارب المنضبطة بسبب استخدام نماذج متمحورة حول الإنجليزية في مجموعة بيانات WildChat وعدم توازن علامات الهوية.

المساهمات الرئيسية

1. إطار تقييم مدرك للغة: تقدم الدراسة منهجية مصممة خصيصاً للنماذج اللغوية الكبيرة الصينية تستفيد من التمييز المورفولوجي بين ضمائر الجمع الافتراضية والمؤنثة لاستقصاء الانحياز، وهو بُعد لا يمكن ملاحظته مباشرة في البيئات المتمحورة حول الإنجليزية فقط.
2. دليل تجريبي في السياق الصيني: تؤكد الدراسة أن انحيازات الهوية الاجتماعية (تفضيل الجماعة وعدائية الجماعة الأخرى) الموثقة سابقاً في الإنجليزية تظهر أيضاً في النماذج الصينية عبر طيف واسع من 240 مجموعة اجتماعية.
3. رؤية مزدوجة المقاييس: من خلال الجمع بين تحليل المشاعر والسمية، تكشف الورقة أن الضبط بالتعليمات قد يقلل من عدم تماثل المشاعر الإيجابية/السلبية، ولكنه غالباً ما يفشل في القضاء على فجوات السمية، خاصة تلك المرتبطة بالعلامات اللغوية الجندرية.
4. تحليل تكميلي للواقع: توفر الورقة دليلاً أولياً على أن نتائج الاختبارات الاصطناعية هذه قد تمتد إلى بيئات النشر، مما يسلط الض الضوء على الحاجة إلى استراتيجيات محاذاة متجذرة ثقافياً.

الأهمية والادعاءات

تزعم الورقة أن انحياز الهوية الاجتماعية في النماذج الصينية هو قضية نظامية تمتد إلى ما وراء فئات محددة لتشمل ديناميكية علاقاتية عامة بين "نحن" و"هم". والأهم من ذلك، أنها تجادل بأن البنى اللغوية الخاصة بالماندارين (تحديداً الضمائر الجندرية) يمكن أن تكشف عن أنماط انحياز غير مرئية في التقييمات المتمحورة حول الإنجليزية.

ويؤكد المؤلفون أنه بينما يمكن للضبط بالتعليمات التخفيف جزئياً من هذه الانحيازات، فإنه لا يقضي عليها، لا سيما فيما يتعلق بالسمية والتأطير الجندري. وهذا يشير إلى أن استراتيجيات المحاذاة الحالية قد تكون غير كافية لضمان العدالة في التطبيقات التفاعلية الموجهة للمستخدمين. وتدعو الدراسة إلى المراقبة المنهجية لسلوك النماذج اللغوية الكبيرة في المجالات عالية المخاطر وتطوير استراتيجيات تخفيف حساسة لكل من السياق الثقافي والخصائص اللغوية المحددة للغة الصينية.

يحافظ المؤلفون على نبرة متواضعة فيما يتعلق بادعاءاتهم، حيث يقرون بالقيود مثل استبعاد بعض النماذج بسبب القيود الحسابية، والاعتماد على بدائل آلية للمشاعر بدلاً من المعايير البشرية الكاملة، والطبيعة الاستكشافية لتحليل حوارات العالم الحقيقي. ويشددون على أن نتائجهم توثق سلوكيات النماذج ولا تعكس آراء المؤلفين أو تمثيلات دقيقة للمجموعات الاجتماعية المعنية.