Federated Foundation Models Fine-Tuning with Heterogeneous Compressed Clients
تقترح الورقة البحثية FedSLM، وهو إطار عمل جديد للتعلم الاتحادي يُمكّن العملاء ذوي الموارد المحدودة من ضبط النماذج التأسيسية باستخدام نماذج ذاتية الاحتواء مضغوطة تعتمد على تحليل القيم المفردة (SVD) وبروتوكول تجميع ثنائي المراحل، محققاً أداءً فائقاً مع تقليل متطلبات الذاكرة بشكل كبير مع الحفاظ على دقة التمثيل.