SomaliBench Eval: Measuring English-to-Somali Refusal Gaps in Open-Weight Language Models
تُقيّم هذه الورقة أربعة نماذج لغوية مفتوحة الأوزان باستخدام معيار SomaliBench v0 الذي تم التحقق منه من قبل مؤلفين أصليين، وتكشف عن فجوات كبيرة في رفض السلامة بين الإنجليزية والصومالية، حيث تفشل النماذج بشكل متكرر في رفض المطالبات الضارة باللغة الصومالية بسبب مخرجات غير مترابطة أو بلغة خاطئة بدلاً من الامتثال الضار بطلاقة.