Safety, or Just Capability? A Validity Audit of Agent-Safety Benchmarks
تجادل هذه الورقة بأن معايير سلامة الوكلاء الحالية تفتقر إلى الصلاحية بسبب المقاييس المعيبة، والتصنيفات غير المتسقة، والآثار الناجمة عن صغر حجم العينات، مبرهنةً في نهاية المطاف على أن القدرة العالية للنماذج غالباً ما ترتبط بزيادة مخاطر عدم المواءمة بدلاً من السلامة، مما يستوجب تعريفات دقيقة للمعايير والمقاييس والسلوكيات المستهدفة لأي ادعاء موثوق بالسلامة.