Pulse-Driven Neural Architecture: Learnable Oscillatory Dynamics for Robust Continuous-Time Sequence Processing
Il documento presenta PDNA, un'architettura neurale che integra dinamiche oscillatorie apprendibili e meccanismi di auto-attenzione nei modelli continui, dimostrando attraverso studi sperimentali che tale approccio migliora significativamente la robustezza delle reti ricorrenti rispetto alle interruzioni nei dati di input.