Large Language Model Selection with Limited Annotations
यह शोध पत्र SELECT-LLM प्रस्तुत करता है, जो एक नवीन ढांचा है जो एनोटेशन के लिए प्रश्नों के एक न्यूनतम सेट को सक्रिय रूप से चुनने के लिए युग्मवार (pairwise) मॉडल आउटपुट समानताओं से प्राप्त अपेक्षित सूचना लाभ (expected information gain) का लाभ उठाता है, जिससे मॉडल वेट्स (weights) तक पहुंच की आवश्यकता के बिना, किसी दिए गए कार्य के लिए सर्वश्रेष्ठ लार्ज लैंग्वेज मॉडल की प्रभावी ढंग से पहचान करते हुए मूल्यांकन लागत को काफी कम किया जा सकता है।