In-Sync: Adaptation of Speech Aware Large Language Models for ASR with Word Level Timestamp Predictions
تقدم هذه الورقة طريقة لتكييف النماذج اللغوية الكبيرة المدركة للكلام للتنبؤ بالطوابع الزمنية على مستوى الكلمة مباشرةً إلى جانب النصوص باستخدام استراتيجيات تدريب مبتكرة خفيفة الوزن، مما يحسن دقة المحاذاة وأداء التعرف التلقائي على الكلام بشكل عام.