MIRROR: A Hierarchical Benchmark for Metacognitive Calibration in Large Language Models
MIRROR बेंचमार्क यह प्रकट करता है कि बड़े भाषा मॉडल बहु-डोमेन कार्यों पर अपने स्वयं के प्रदर्शन की भविष्यवाणी करने में सार्वभौमिक रूप से विफल रहते हैं और आंशिक आत्म-ज्ञान को बेहतर निर्णय लेने में प्रभावी ढंग से अनुवादित नहीं कर सकते हैं, जो यह सुझाव देता है कि सुरक्षित स्वायत्त एआई प्रणालियों के लिए बेहतर आत्म-जागरूकता के बजाय बाहरी मेटाकॉग्निटिव स्कैफोल्डिंग (metacognitive scaffolding) आवश्यक है।