Putting HUMANS first: Efficient LAM Evaluation with Human Preference Alignment
यह शोध पत्र HUMANS बेंचमार्क प्रस्तुत करता है, जो लार्ज ऑडियो मॉडल्स के लिए एक कुशल मूल्यांकन ढांचा है जो केवल 50 उदाहरणों के सुव्यवस्थित उपसमुच्चयों का उपयोग करके पूर्ण बेंचमार्क के साथ उच्च सहसंबंध प्राप्त करता है और, रिग्रेशन मॉडलिंग के माध्यम से, मानव उपयोगकर्ता प्राथमिकताओं की भविष्यवाणी करने में रैंडम उपसमुच्चयों और पूर्ण बेंचमार्क दोनों से काफी बेहतर प्रदर्शन करता है।