How Hard is it to Rig a Benchmark? A Social Choice Analysis of Leaderboard Robustness
تطبق هذه الورقة نظرية الاختيار الاجتماعي الحسابي لتوضيح أن تزييف لوحات صدارة تعلم الآلة من خلال التدريب المخصص للمعايير المرجعية هو مسألة من فئة (NP-hard)، مع تقديم وتقييم "المتانة على مستوى الحالة" لإظهار أن مقياس متوسط معدل الفوز أكثر مقاومة للتلاعب بشكل ملحوظ من المتوسط الحسابي، أو الوسيط، أو درجات الأغلبية الثنائية.