When Attention Beats Fourier: Multi-Scale Transformers for PDE Solving on Irregular Domains
Dieser Beitrag stellt den Multi-Scale Attention Transformer (MSAT) vor und zeigt durch umfassende empirische und theoretische Analysen, dass auf Aufmerksamkeit basierende Architekturen Fourier-Domain-Operatoren bei der Lösung von PDEs auf irregulären Gebieten übertreffen, während gleichzeitig ein kritischer Zielkonflikt etabliert wird, bei dem physikinformierte Regularisierung diffusionsdominierte Probleme verbessert, aber die Leistung in chaotischen Regimen verschlechtert.