A Short Survey of Averaging Techniques in Stochastic Gradient Methods
Dit artikel biedt een overzicht van gemiddelde technieken in stochastische gradiëntmethoden, waarbij het de theoretische fundamenten, moderne ontwikkelingen en toepassingen in het machine learning, zoals bij het trainen van diepe neurale netwerken, bespreekt en recente resultaten over het gedrag in eindige steekproeven samenvat.