CAREBench: Evaluating LLMs' Emotion Understanding by Assessing Cognitive Appraisal Reasoning
यह शोधपत्र CAREBench को प्रस्तुत करता है, जो मूल्यांकन सिद्धांत (appraisal theory) पर आधारित एक नवीन बेंचमार्क है, जो केवल लेबल भविष्यवाणी के बजाय संज्ञानात्मक तर्क श्रृंखलाओं (cognitive reasoning chains) के माध्यम से LLMs की भावना समझ का मूल्यांकन करता है, जिससे यह पता चलता है कि वर्तमान मॉडल कुछ कार्यों पर मानव प्रदर्शन के स्तर तक पहुँचने के बावजूद, मूल्यांकन तर्क (appraisal reasoning) और सकारात्मक भावनाओं की पहचान करने में संघर्ष करते हैं।