LLM Safety Alignment in Low-Resource Languages: A Systematic Literature Review
تحلل هذه المراجعة المنهجية للأدبيات 50 دراسة حول محاذاة سلامة النماذج اللغوية الكبيرة في اللغات ذات الموارد المنخفضة، حيث تحدد فجوة سلامة متعددة اللغات مستمرة مدفوعة بعوامل مثل عدم التوازن في مرحلة ما قبل التدريب والمعايير المتبصرة ثقافياً، بينما تقترح تصنيفاً جديداً وتدعو إلى حلول قائمة على الثقافة لمعالجة نقاط الضعف مثل عمليات الاختراق عبر اللغات وتدهور السلامة.
المؤلفون الأصليون:Valdini Douglace Lemofouet, Blessing Ngozi Uzor, Paula Chikaodinaka Anyanwu, Danielle Blanche Kapsa, Sukairaj Hafiz Imam, P Sam Sahil, Abigail Oppong, Tassallah Abdullahi, Clemencia Siro, Idris AbdulmValdini Douglace Lemofouet, Blessing Ngozi Uzor, Paula Chikaodinaka Anyanwu, Danielle Blanche Kapsa, Sukairaj Hafiz Imam, P Sam Sahil, Abigail Oppong, Tassallah Abdullahi, Clemencia Siro, Idris Abdulmumin, Seid Muhie Yimam, Shamsuddeen Hassan Muhammad
تخيل عالماً تصبح فيه أكثر أنظمة الذكاء الاصطناعي تقدماً، القادرة على كتابة الشعر، وتشخيص الأمراض، والإجابة على الأسئلة المعقدة، غير موثوقة أو حتى خطيرة بمجرد تغيير اللغة من الإنجليزية إلى لغة أخرى. هذا ليس سيناريو افتراضي، بل هو واقع متنامٍ في مجال الذكاء الاصطناعي. نماذج اللغات الكبيرة هي برامج حاسوبية مدربة على كميات هائلة من النصوص لفهم وتوليد اللغة البشرية. ولجعل هذه الأدوات آمنة للاستخدام العام، يعلمها الباحثون رفض الطلبات الضارة، مثل تعليمات لبناء أسلحة أو نشر خطاب الكراهية. تُعرف عملية التعليم هذه باسم "المواءمة الأمنية". لسنوات، حدث هذا التدريب حصرياً تقريباً باستخدام البيانات الإنجليزية. ونتيكنتيجة لذلك، تعلمت هذه العقول الرقمية أن تكون مهذبة وحذرة باللغة الإنجليزية، لكنها غالباً ما تفشل في التعرف على المخاطر نفسها عندما يتحدث المستخدم لغة ذات موارد رقمية أقل، مثل العديد من اللغات الأفريقية أو لغات الشعوب الأصلية. إن الفجوة بين مدى أمان هذه النماذج باللغة الإنجليزية مقابل أمانها في لغات أخرى تتسع، مما يخلق وضعاً يواجه فيه المتحدثون باللغات غير الممثلة كفاية مخاطر أعلى في تلقي نصائح سامة أو منحازة أو مضللة من الأدوات المصممة لمساعدتهم.
لقد شرع فريق من الباحثين في رسم خريطة لهذا المشهد غير المتكافئ من خلال إجراء مراجعة منهجية لخمسين دراسة حديثة ركزت على السلامة في اللغات ذات الموارد المنخفضة. جمعوا نتائجهم من آلاف الأوراق الأكاديمية، وقاموا بتصفيتها للوصول إلى العمل الأكثر صلة لفهم أين تخفق هذه التكنولوجيا ولماذا. كشف تحقيقهم عن حقيقة صارخة: الأساليب المستخدمة للحفاظ على أمان الذكاء الاصطناعي باللغة الإنجليزية لا تترجم ببساطة إلى لغات أخرى. فعندما حاول الباحثون استخدام قواعد السلامة الإنجليزية للغات مثل الهوسا أو السواحيلية أو اليوروبا، تعطلت الأنظمة غالباً. وجدت الدراسة أن مجرد ترجمة مطالبة إنجليزية ضارة إلى لغة ذات موارد منخفضة يمكن أن يخدع الذكاء الاصطناعي ويجعله يتجاهل حواجز الحماية الخاصة به في حوالي ثمانين بالمائة من الحالات، بينما تفشل نفس الخدعة في اللغة الإنجليزية في معظم الأوقات. يشير هذا إلى أن دروس السلامة المتعلمة في الإنجليزية ليست متجذرة بعمق في فهم النموذج للعالم، بل هي مرتبطة ارتباطاً وثيقاً باللغة الإنجليزية نفسها.
حدد الباحثون ثلاث طرق رئيسية يحاول العلماء من خلالها حل هذه المشكلة. يتضمن النهج الأول إنشاء بيانات تدريب جديدة متجذرة في الثقافات المحلية بدلاً من مجرد ترجمة الأمثلة الإنجليزية. أظهرت إحدى الدراسات أنه عندما بنوا مجموعة بيانات سلامة مخصصة للغات المحلية، باستخدام أمثلة للأذى الموجود فعلياً في تلك المجتمعات، أصبح الذكاء الاصطناعي أفضل بكثير في رفض الطلبات الخطيرة. في المقابل، غالباً ما كانت النماذج المدربة على بيانات إنجليزية مترجمة تغفل الفروق الدقيقة للأضرار الثقافية المحلية. أما النهج الثاني فيحاول تعليم النموذج أن يكون آمناً في لغة واحدة ثم يأمل في أن تنتشر هذه المعرفة إلى لغات أخرى. ومع ذلك، تشير المراجعة إلى أن هذه استراتيجية هشة؛ فعندما يتم ضبط النماذج بدقة على لغات جديدة، حتى مع وجود بيانات غير ضارة، فإنها أحياناً تنسى قواعد السلامة التي تعلمتها في الإنجليزية. أما النهج الثالث فينظر داخل بنية النموذج نفسه، محاولاً تعديل إعدادات داخلية محددة لجعله أكثر أماناً دون الحاجة إلى كميات هائلة من البيانات الجديدة. وبينما تبدو هذه الأساليب واعدة، إلا أنها لا تزال في مراحلها الأولى ولم تثبت فعاليتها بشكل موثوق عبر جميع اللغات.
يكمن جزء كبير من المشكلة في كيفية اختبار هذه الأنظمة. معظم اختبارات السلامة مبنية عن طريق ترجمة الأسئلة الإنجليزية إلى لغات أخرى. وجد الباحثون أن هذه الطريقة معيبة لأنها تفشل في التقاط الطرق المحددة التي يتجلى بها الأذى في الثقافات المختلفة. على سبيل المثال، قد يرفض النموذج طلباً لتوليد خطاب كراهية باللغة الإنجليزية، ولكنه قد يقدم بكل سرور توصيات منتجات سامة باللغة الهوساوية لأن مفهوم ذلك الضرر المحدد لم يكن جزءاً من تدريبه. سلطت المراجعة الضوء على وجود عدد قليل جداً من معايير الاختبار المصممة خصيصاً للغات الأفريقية، مما يترك فجوة كبيرة في فهمنا لكيفية سلوك هذه النماذج. وبدون اختبارات تعكس السياقات الثقافية الواقعية، لا يمكن للمطورين معرفة ما إذا كانت تدابير السلامة الخاصة بهم تعمل بالفعل.
كشفت الدراسة أيضاً عن ثغرة مفاجئة: إن عملية تعليم نموذج لغة جديدة يمكن أن تجعله أحياناً أقل أماناً بشكل عام. فعندما أضاف الباحثون لغات جديدة إلى نموذج كان آمناً بالفعل، تدهورت قدرة النموذج على رفض الطلبات الضارة في لغاته الأصلية. يشير هذا إلى أن عملية تعلم أنماط لغوية جديدة يمكن أن تتعارض مع قيود السلامة القائمة بالفعل. علاوة على ذلك، أشارت المراجعة إلى أنه عندما يخلط الناس بين اللغات في جملة واحدة، وهو ممارسة شائعة في أجزاء كثيرة من العالم، يصبح من السهل جداً خداع الذكاء الاصطناعي. يمكن لهذه المطالبات المختلطة اللغات أن تتجاوز فلاتر السلامة التي قد توقف هجوماً بلغة نقية واحدة.
في النهاية، تخلص المراجعة إلى أن المسار الحالي المتمثل في مجرد ترجمة بيانات السلامة الإنجليزية غير كافٍ. ويجادل الباحثون بأن السلامة الحقيقية تتطلب تحولاً نحو بناء مجموعات بيانات وأدوات تقييم من الصفر في اللغات المحلية، مع إشراك المتحدثين الأصليين لتحديد ما يشكل ضرراً في سياقاتهم الثقافية الخاصة. ويقترحون أن التقدم المستقبلي يعتمد على موازنة بيانات التدريب بحيث لا تهيمن لغة واحدة على فهم النموذج للسلامة. وإلى أن تُتخذ هذه الخطوات، سيظل وعد الذكاء الاصطناعي الآمن بعيد المنال عن مليارات الأشخاص الذين يتحدثون لغات غير الإنجليزية، مما يتركهم عرضة للمخاطر التي لا يواجهها نظراؤهم المتحدثون بالإنجليزية.
ملخص تقني: محاذاة سلامة النماذج اللغوية الكبيرة (LLM) في اللغات منخفضة الموارد
بيان المشكلة
بينما حققت النماذج اللغوية الكبيرة (LLMs) تقدماً ملحوظاً في محاذاة السلامة للغات عالية الموارد (لا سيما الإنجليزية)، إلا أن ضمانات السلامة الخاصة بها تتدهور بشكل كبير في السياقات متعددة اللغات واللغات منخفضة الموارد. تعتمد تقنيات المحاذاة الحالية، مثل التعلم التعزيزي من التغذية الراجعة البشرية (RLHF) والضبط الدقيق للسلامة، بشكل كبير على مجموعات بيانات موسومة واسعة النطاق ومسارات تغذية راجعة بشرية تفتقر إليها اللغات غير الممثلة أو تنعدم فيها تماماً. وبناءً على ذلك، فإن سلوكيات السلامة المتعلمة في اللغة الإنجليزية لا تنتقل بشكل موثوق؛ حيث غالباً ما تستجيب النماذج للتعليمات الضارة عند توجيهها بلغات منخفضة الموارد، أو تفشل في التعرف على الأضرار ذات الخصوصية الثقافية. وهذا يخلق "فجوة سلامة متعددة اللغات" حيث يواجه المتحدثون باللغات غير الممثلة حماية أضعف ضد المحتوى السام أو المتحيز أو الخطير.
المنهجية
تقدم هذه الورقة مراجعة منهجية للأدبيات (SLR) أُجريت وفقاً لإرشادات PRISMA 2020 لتوليف الأبحاث الحالية حول محاذاة سلامة النماذج اللغوية الكبيرة في اللغات منخفضة الموارد.
جمع البيانات: استعلم المؤلفون في Semantic Scholar وarXiv وOpenAlex باستخدام ثلاث مجموعات من الكلمات المفتاحية: التكنولوجيا (مثل LLM، ضبط التعليمات)، السلامة (مثل المحاذاة، كسر الحماية/Jailbreak، RLHF)، والنطاق اللغوي (مثل منخفضة الموارد، اللغات الأفريقية، لغات محددة مثل الهوسا والسواهيلي).
عملية الاختيار: من مجموعة أولية تضم حوالي 1,500 ورقة بحثية، تمت إزالة المكررات، مما ترك 1,300 ورقة. قامت عملية تصفية قائمة على لغة بايثون وعملية فحص تعتمد على نموذج لغوي كبير (باستخدام Claude Sonnet) بتضييق النطاق إلى 70 مرشحاً. وبعد التحقق اليدوي، تم اختيار 50 دراسة ذات صلة للتحليل النهائي.
النطاق: تركز المراجعة على محاذاة السلامة في السياقات متعددة اللغات ومنخفضة الموارد، مع استبعاد الأعمال التي تركز حصرياً على الإنجليزية أو الأعمال غير التجريبية.
أسئلة البحث (RQs): هيكلت المراجعة حول أربعة أسئلة:
كيف يتم تكييف أساليب السلامة للغات منخفضة الموارد؟
ما هي مخاطر السلامة والأضرار الثقافية التي تظهر في البيئات متعددة اللغات؟
ما هي مجموعات البيانات والمعايير المرجعية الموجودة لسلامة اللغات منخفضة الموارد؟
ما هي العوامل التي تؤثر على انتقال محاذاة السلامة عبر اللغات؟
المساهمات الرئيسية والنتائج
1. تصنيف نهج محاذاة السلامة (RQ1)
يقترح المؤلفون تصنيفاً لأسالهم محاذاة السلامة بناءً على ثلاث آليات تكييف رئيسية:
تكييف البيانات: يعطي هذا النهج الأولوية لإنشاء بيانات متجذرة ثقافياً.
النتائج: يتفوق بناء البيانات باللغة الأصلية على البيانات المترجمة من الإنجليزية. وتشمل الأساليب توليد مجموعات بيانات ذات خصوصية ثقافية (مثل CultureGuard، SEALGuard)، واستخدام مسارات ترجمة عالية الجودة تحافظ على القصد (مثل LionGuard 2)، وتوظيف أطر ترجمة تحافظ على السمية.
القصور: غالباً ما تؤدي الترجمة المباشرة لبيانات التدريب إلى خفض الأداء وتفشل في التقاط تعريفات الضرر المحلية.
تحسين الأهداف (Objective Optimization): تعمل هذه الاستراتيجية على تعديل أهداف التدريب لنقل سلوكيات السلامة دون الحاجة لمجموعات بيانات جديدة ضخمة.
النتائج: تشمل التقنيات "تحسين فجوة المكافأة متعدد اللغات" (MPO) لتقليل فجوات المكافأة عبر اللغات، و"تقطير المعرفة" (رغم أن التقطير غير المفلتر قد يزيد من نجاح عمليات كسر الحماية). كما تُظهر الأساليب القائمة على الاستدلال (مثل MrGuard، ConsistentGuard) التي تولد سلاسل استدلال صريحة تحسناً في التعميم والمتانة ضد هجمات تبديل اللغات (Code-switching).
المحاذاة الآلية (Mechanistic Alignment): يتضمن ذلك تعديلاً مباشراً للمكونات الداخلية للنموذج.
النتائج: تحدد أساليب مثل "تعديل الأوزان المتفرقة" (SWE) وتحليل التنشيط على مستوى الطبقة أن قدرات السلامة تتركز في مجموعات فرعية متفرقة من المعاملات (Parameters). ويمكن لزراعة هذه الطبقات أو الأوزان المحددة من النماذج عالية الموارد في النماذج منخفضة الموارد أن يحسن السلامة دون الحاجة لإعادة تدريب كاملة.
2. مخاطر السلامة والسلوكيات العدائية (RQ2)
تحدد المراجعة ثغرات محددة في النماذج اللغوية الكبيرة متعددة اللغات:
كسر الحماية عبر اللغات (Cross-Lingual Jailbreaks): تفشل محاذاة السلامة في التعميم؛ حيث يمكن أن تؤدي ترجمة المطالبات الضارة من الإنجليزية إلى لغات منخفضة الموارد إلى معدلات نجاح في كسر الحماية تصل إلى 79% (مقارنة بأقل من 15% في اللغات عالية الموارد).
هجمات تبديل اللغات (Code-Switching Attacks): يؤدي خلط اللغات داخل مطالبة واحدة إلى تقليل متانة السلامة بشكل كبير، حيث وصلت معدلات التجاوز إلى حوالي 67% في نموذج GPT-3.5. وهذا أمر بالغ الأهمية خاصة في المناطق التي يعد فيها تبديل اللغات أسلوباً معيارياً للتواصل.
الضبط الدقيق كمتجه للهجوم: يمكن أن يؤدي تكييف النماذج المحاذية مع لغات جديدة، حتى باستخدام بيانات حميدة، إلى تدهور قيود السلامة التي تم إرساؤها سابقاً.
الأضرار ذات الخصوصية الثقافية: غالباً ما تفشل النماذج في التعرف على الأضرار المتجذرة ثقافياً (مثل توصيات المنتجات السامة في لغة الهوسا) أو تسيء تفسير الأضراء المركبة أثناء الترجمة، مما يؤدي إلى نشر الصور النمطية التي تغفلها المعايير المرجعية المتمحورة حول الإنجليزية.
3. المعايير المرجعية للتقييم (RQ3)
يتجه مشهد المعايير المرجعية للسلامة من الترجمة المباشرة إلى التقييم الأصلي والمتجذر ثقافياً، رغم وجود فجوات كبيرة:
المعايير العالمية: تتوسع موارد مثل XSafety وLinguaSafe لتشمل لغات متعددة ولكنها غالباً ما تعتمد على الترجمة أو إعادة الصياغة (Trans-creation).
المعايير الإقليمية: شهدت مناطق جنوب شرق آسيا وجنوب آسيا تطوير معايير محلية (مثل SEALSBench، IndicSafe).
فجوة اللغات الأفريقية: تعاني المعايير المرجعية للغات الأفريقية من نقص شديد في التمثيل. الموارد الموجودة مثل LSR وUbuntu-Guard بدأت تظهر ولكنها غير كافية مقارنة بالأنظمة البيئية متعددة اللغات الأخرى. تشير المراجعة إلى نقص مستمر في معايير السلامة باللغات الأصلية للغات الأفريقية.
4. العوامل المؤثرة على انتقال السلامة عبر اللغات (RQ4)
تحدد المراجعة عدة محركات لتدهور السلامة في اللغات منخفضة الموارد:
التغطية غير المتوازنة للتدريب المسبق: تتركز الميزات ذات الصلة بالسلامة في المناطق عالية الموارد في الفضاء الكامن (Latent Space). وتؤدي النماذج إلى أداء ضعيف في اللغات التي تعاني من ندرة في بيانات التدريب المسبق.
الاختلافات اللغوية والهيكلية: تعاني اللغات الغنية صرفياً (Morphologically rich) والخطوط غير الممثلة من تجزئة (Tokenization) مجزأة، مما يضعف التمثيلات الدلالية والاستدلال الخاص بالسلامة.
عدم استقرار الانتقال: يمكن أن يؤدي إدخال لغات جديدة أثناء الضبط الدقيق إلى تعطيل محاذاة السلامة.
قيود التمثيل: تعوق محدودية التمثيل عملية انتقال السلامة، وذلك بسبب نقص الخلايا العصبية متعددة اللغات المشتركة لصالح السلامة وصعوبة محاذاة عمليات الاستدلال عبر البنى اللغوية المتنوعة.
الأهمية والقصور
الأهمية: تقدم هذه الورقة أول مراجعة منهجية للأدبيات مخصدة لمحاذاة سلامة النماذج اللغوية الكبيرة في اللغات الأفريقية ومنخفضة الموارد. وهي تقوم بتوليف الأبحان المجزأة في تصنيف متماسك وتسلط الضوء على "فجوة سلامة متعددة اللغات" مستمرة. ويجادل المؤلفون بأن التقدم المستقبلي يتطلب التحول بعيداً عن الافتراضات المتمحورة حول الإنجليزية نحو معايير مرجعية متجذرة ثقافياً، وجمع بيانات تشاركي، وتدريب مسبق متعدد اللغات متوازن، وأساليب محاذاة قابلة للتوسع تأخذ في الاعتبار السياقات اللغوية والثقافية المحددة للمجتمعات منخفضة الموارد.
القصور: يقر المؤلفون بأن المراجعة تقتصر على الدراسات المكتوبة باللغة الإنجليزية من قواعد البيانات الأكاديمية الرئيسية، مما قد يؤدي إلى فقدان الأبحاث المنشورة محلياً أو الأبحاث الحديثة باللغات الأصلية. علاوة على ذلك، فإن تجميع اللغات في فئات إقليمية واسعة قد يحجب الفروق اللغوية الدقيقة المهمة. لا تقترح الورقة طرقاً تجريبية جديدة بل تقوم بتوليف النتائج الحالية لتوجيه اتجاهات البحث المستقبلية.