In-Context Learning in Speech Language Models: Analyzing the Role of Acoustic Features, Linguistic Structure, and Induction Heads
यह शोध पत्र स्पीच लैंग्वेज मॉडल्स में इन-कॉन्टेक्स्ट लर्निंग की जांच करता है, यह प्रदर्शित करते हुए कि बोलने की दर टास्क इन्फरेंस और ध्वनिक अनुकरण (acoustic mimicry) दोनों को महत्वपूर्ण रूप से प्रभावित करती है, साथ ही यह भी दिखाता है कि टेक्स्ट-आधारित मॉडलों के निष्कर्षों के समान, इंडक्शन हेड्स इन क्षमताओं को सक्षम करने में एक कारण संबंधी भूमिका निभाते हैं।