Locality-Aware Redundancy Pruning for LLM Depth Compression
تقترح هذه الورقة إطار عمل LoRP، وهو إطار عمل لتقليم العمق بضربة واحدة وبدون تدريب، يقوم بتخصيص إزالة الطبقات ديناميكيًا بناءً على "درجة محلية التمثيل" (Representation Locality Score) مبتكرة لتقليل الفائض في النماذج اللغوية الكبيرة بفعالية مع الحفاظ على الأداء.