Efficient Audio-Visual Generation via Synchrony-Aware Cross-Modal Sparse Attention
تقترح هذه الورقة إطار عمل للتسريع يراعي التزامن، يستخدم استراتيجية انتباه متفرقة محمية لتقليل تكاليف الاستدلال العالية لنماذج التوليد السمعي البصري من خلال تفريد التفاعلات المتبادلة بين الوسائط الزائدة بشكل انتقائي مع الحفاظ على الرموز الحرجة والأساسية للحفاظ على التزامن السمعي البصري.