HyperLens: Quantifying Cognitive Effort in LLMs with Fine-grained Confidence Trajectory
यह शोध पत्र HyperLens प्रस्तुत करता है, जो एक उच्च-रिज़ॉल्यूशन प्रोब है जो सूक्ष्म-स्तरीय कॉन्फिडेंस ट्रैजेक्टरीज़ (confidence trajectories) को ट्रेस करने के लिए ट्रांसफॉर्मर लेयर्स में अंतर्निहित आवर्धन तंत्र (magnification mechanism) का लाभ उठाता है, जिससे कार्य की जटिलता को अलग करने के लिए संज्ञानात्मक प्रयास (cognitive effort) को मापा जा सके और मानक सुपरवाइज्ड फाइन-ट्यूनिंग (Supervised Fine-Tuning) के कारण होने वाले प्रदर्शन ह्रास का निदान किया जा सके।