Measuring What Matters -- or What's Convenient?: Robustness of LLM-Based Scoring Systems to Construct-Irrelevant Factors
تُظهر هذه الدراسة أن نظام تسجيل يعتمد على نماذج لغوية كبيرة ذي بنية مزدوجة لاختبارات الحكم الموقفي يتميز عمومًا بالمتانة تجاه العوامل غير ذات الصلة بالبناء، مثل النصوص التي لا معنى لها، والأخطاء الإملائية، ورقي الكتابة، رغم أنه يعاقب بشكل مناسب الاستجابات الخارجة عن الموضوع وتكرار النصوص.