Step-Size Stability in Stochastic Optimization: A Theoretical Perspective
تقدم هذه الورقة تحليلاً نظرياً يحدد كمية رئيسية تقيس الحساسية لحجم الخطوة في التحسين العشوائي، مما يثبت أن الطرق التكيفية مثل SPS وNGN أكثر متانة من SGD، وتوفر حداً يتنبأ بدقة بتدهور الأداء حتى في الإعدادات غير المحدبة.