New Results on the Polyak Stepsize: Tight Convergence Analysis and Universal Function Classes
Dit artikel heronderzoekt de Polyak-stapgrootte voor gradientenafstijging door de nauwkeurigheid van de bekende convergentiesnelheden te bewijzen via constructie van worst-case functies, het theoretisch aantonen dat drijvende-kommafouten helpen om deze worst-case scenario's te ontvluchten, en het leveren van nieuwe universele convergentiegaranties die automatisch inspelen op verschillende functieklassen zonder voorafgaande kennis van probleemparameters.