Life After Benchmark Saturation: A Case Study of CORE-Bench
यह शोध पत्र तर्क देता है कि जब बेंचमार्क सटीकता संतृप्त हो जाती है, तो शोधकर्ताओं को केवल सटीकता से ध्यान हटाकर छह अन्य महत्वपूर्ण आयामों—जैसे कि कंस्ट्रक्ट वैधता, दक्षता और मानव-एजेंट सहयोग—का मूल्यांकन करने पर ध्यान केंद्रित करना चाहिए, जो CORE-Bench केस स्टडी के माध्यम से यह प्रदर्शित करता है कि यह बहुआयामी दृष्टिकोण प्रमुख सटीकता-केंद्रित प्रतिमान की तुलना में एजेंट के प्रदर्शन में अधिक गहरी अंतर्दृष्टि प्रदान करता है।