Not How Many, But Which: Parameter Placement in Low-Rank Adaptation
تُظهر هذه الورقة أنه تحت تدريب GRPO، يعد الموضع المحدد للمعلمات القابلة للتدريب في مصفوفة B الخاصة بـ LoRA أمراً حاسماً للأداء، بينما يكفي الموضع العشوائي لتدريب SFT، وتقترح طريقة تسجيل سريعة ومنخفضة التكلفة لتحديد هذه المعلمات الأساسية التي تتركز باستمرار على إسقاطات كتابة مسار المتبقي (residual-stream-writing).