Expert-Choice Routing Enables Adaptive Computation in Diffusion Language Models
تقترح هذه الورقة البحثية توجيه "اختيار الخبير" (EC) كبديل متفوق لتوجيه "اختيار الرمز" (TC) لنماذج اللغة الانتشارية، حيث تُثبت أن موازنة الحمل الحتمية لـ (EC)، مقترنة بالسعة التكيفية المعتمدة على الخطوة الزمنية، تُحسن بشكل كبير من معدل الإنتاجية، وسرعة التقارب، ودقة المهام اللاحقة، مع تمكين تحديث النماذج الحالية.