BASS: Benchmarking Audio LMs for Musical Structure and Semantic Reasoning
यह शोध पत्र BASS को प्रस्तुत करता है, जो ऑडियो लैंग्वेज मॉडल्स की संगीत संरचना और अर्थ संबंधी तर्क क्षमताओं का मूल्यांकन करने के लिए 12 कार्यों में फैले 2,658 प्रश्नों वाला एक व्यापक बेंचमार्क है, जो यह प्रकट करता है कि जबकि वर्तमान अत्याधुनिक मॉडल गीत प्रतिलेखन (lyric transcription) में उत्कृष्ट हैं, वे संरचनात्मक विभाजन (structural segmentation) और कलाकार सहयोग (artist collaboration) जैसे उच्च-स्तरीय कार्यों के साथ काफी संघर्ष करते हैं।