When to Call an Apple Red: Humans Follow Introspective Rules, VLMs Don't
यह शोध पत्र ग्रेडेड कलर एट्रिब्यूशन (GCA) डेटासेट प्रस्तुत करता है ताकि यह प्रदर्शित किया जा सके कि जहाँ मनुष्य रंग एट्रिब्यूशन के अपने अंतर्मुखी नियमों के प्रति वफादार रहते हैं, वहीं विजन-लैंग्वेज मॉडल व्यवस्थित रूप से अपने स्वयं के घोषित तर्क का उल्लंघन करते हैं, विशेष रूप से विश्व-ज्ञान संबंधी पूर्वग्रहों (world-knowledge priors) से प्रभावित होने पर, जो उनके आत्म-ज्ञान में एक मौलिक मिसकैलिब्रेशन को प्रकट करता है जो उच्च-जोखिम वाले परिनियोजन (high-stakes deployment) के लिए उनकी विश्वसनीयता को चुनौती देता है।