From Benchmarks to Skills: Low-Rank Factors for LLM Evaluation
यह शोध पत्र बड़े भाषा मॉडलों (लार्ज लैंग्वेज मॉडल्स) के लिए एक नए मूल्यांकन प्रतिमान का प्रस्ताव करता है जो बेंचमार्क प्रदर्शन में अंतर्निहित निम्न-रैंक संरचना (लो-रैंक स्ट्रक्चर) को प्रकट करने के लिए फैक्टर एनालिसिस लागू करता है, जो यह प्रदर्शित करता है कि व्याख्या योग्य गुप्त कौशल कारकों की एक छोटी संख्या अधिकांश क्षमताओं को समाहित करती है और अनावश्यक कार्यों की पहचान करने, नए मॉडलों की कुशलतापूर्वक प्रोफाइलिंग करने और विशिष्ट कौशल प्रोफाइल के आधार पर मॉडलों का चयन करने के लिए व्यावहारिक उपकरण सक्षम करती है।