How Learning Dynamics Drive Adversarially Robust Generalization?
Questo studio introduce un quadro analitico PAC-Bayesiano basato sulla dinamica di apprendimento per spiegare meccanicamente il sovradattamento robusto nell'addestramento avversariale, rivelando come l'evoluzione del mean e della covarianza posteriore sia legata a parametri come il tasso di apprendimento e la curvatura del paesaggio di perdita.