MSIQ: Moment-based Scale-Invariant Quality Measure for Single Image Super-Resolution

Technische Samenvatting: MSIQ – Moment-gebaseerde Schaal-invariante Kwaliteitsmaat voor Single Image Super-Resolution

Probleemstelling
De beoordeling van resultaten van Single Image Super-Resolution (SISR) blijft een methodologische uitdaging. Standaard full-reference-metingen, zoals PSNR en SSIM, evalueren voornamelijk fouten op pixelniveau of lokale structurele gelijkenissen, maar falen in het expliciet beoordelen van het behoud van de globale geometrische structuur. Bovendien vereisen deze metingen dat de referentieafbeelding ($I_{GT}$) en de super-resolutie-afbeelding ($I_{SR}$) worden herschaald naar dezelfde afmetingen voordat ze worden vergeleken. Deze "gedwongen herschaling" introduceert externe interpolatiefouten die niets te maken hebben met de prestaties van het SISR-model, waardoor de evaluatie wordt verontreinigd. Hoewel perceptuele metingen (bijvoorbeeld LPIPS, DISTS) beter aansluiten bij het menselijk zicht, missen ze vaak geometrische specificiteit en kunnen ze geen onderscheid maken tussen geometrische vervormingen (bijvoorbeeld anisotrope schaling, schuiving) en niet-geometrische artefacten (bijvoorbeeld JPEG-compressie). Het artikel adresseert de behoefte aan een diagnostisch hulpmiddel dat geometrische fideliteit evalueert zonder gedwongen herschaling en dat geometrische anomalieën kan onderscheiden van andere vervormingen.

Methodologie
De voorgestelde oplossing, MSIQ (Moment-based Scale-Invariant Quality), is een full-reference-meting die afbeeldingen vergelijkt in de ruimte van genormaliseerde centrale geometrische momenten in plaats van in de pixelruimte.

1. Wiskundige Grondslag: De methode maakt gebruik van geometrische momenten van orde $(p, q)$, gedefinieerd als integralen (of sommen voor discrete afbeeldingen) van pixelintensiteiten gewogen met ruimtelijke coördinaten. Om invariantie te bereiken, maken de auteurs gebruik van genormaliseerde centrale geometrische momenten ($\nu_{pq}$), die in het continue model invariant zijn voor translatie en uniforme schaling.
2. Constructie van Descriptoren: Voor een afbeelding $I$ wordt een moment-descriptor $M_N(I)$ geconstrueerd als een geordende set van niet-triviale genormaliseerde centrale momenten tot een vaste orde $N$. Het artikel stelt $N=4$ vast, waarbij 12 informatieve momenten worden gebruikt (exclusief triviale termen van orde nul en orde één).
3. Definitie van de Meting: MSIQ wordt gedefinieerd als de afstand tussen de moment-descriptoren van de ground-truth-afbeelding ($I_{GT}$) en de super-resolutie-afbeelding ($I_{SR}$). Twee varianten worden voorgesteld:
   • MSIQ$_{RMSE}$: De root mean square error tussen overeenkomstige momentcomponenten.
   • MSIQ$_{W}$: Een gewogen versie die de invloed van hogere-orde momenten vermindert, die gevoeliger zijn voor discretisatieruis.
4. Belangrijkste Eigenschappen:
   • Vrij van Herschaling: Omdat momenten schaal-invariant zijn, kunnen $I_{GT}$ en $I_{SR}$ direct worden vergeleken op hun native resoluties, waardoor interpolatiefouten worden geëlimineerd.
   • Modelvrij: De berekening is puur analytisch en vertrouwt niet op vooraf getrainde neurale netwerken.
   • Geometrische Specificiteit: De meting is ontworpen om invariant te zijn voor uniforme schaling, maar gevoelig voor anisotrope vervormingen, schuiving, rotatie en perspectiefvervormingen.

Belangrijkste Bijdragen
Het artikel schetst vier primaire bijdragen:

1. Conceptueel Kader: Het stelt voor om SISR-resultaten te evalueren door de integriteit van schaal-invariante moment-descriptoren te verifiëren, waardoor de vergelijking verschuift van pixelruimte naar een kenmerkruimte die methodologische afhankelijkheid van gedwongen herschaling elimineert.
2. Analytische Maat: Het introduceert MSIQ als een deterministische, modelvrije meting die de stabiliteit van de moment-geometrische structuur van een afbeelding onder schaaltransformaties kwantificeert.
3. Geometrische Selectiviteit: Experimentele validatie toont aan dat MSIQ een hoge "geometrische specificiteit" bezit en effectief geometrische vervormingen kan scheiden van niet-geometrische artefacten zoals JPEG-compressie, een vermogen dat ontbreekt bij standaard pixel-gebaseerde en perceptuele metingen.
4. Methodologisch Onderscheid: Het artikel onderscheidt twee kenmerken van metingen: volgvermogen (het vermogen om monotoon toenemende vervormingssterkte te volgen) en geometrische specificiteit (het vermogen om geometrische vervormingen te onderscheiden van niet-geometrische vervormingen). Het betoogt dat een hoog volgvermogen niet impliceert dat er een hoge geometrische specificiteit is.

Experimentele Resultaten
De auteurs hebben vier reeksen experimenten uitgevoerd om MSIQ te valideren:

• Schaal-invariantie: MSIQ bleef stabiel (waarden $\approx 10^{-7}$ tot $10^{-6}$) onder uniforme schaling zonder herschaling. Daarentegen vertoonden PSNR en SSIM aanzienlijke instabiliteit (mediaan spreiding van 5,28 dB voor PSNR) wanneer gedwongen herschaling werd toegepast, met extreme waarden in degeneratieve gevallen.
• Geometrische Specificiteit: In gecontroleerde tests met anisotrope schaling, schuiving, rotatie en perspectiefvervorming versus JPEG-compressie, vertoonde MSIQ een verhouding van geometrisch- naar JPEG-respons ($RM$) van ongeveer 71 bij matige degradatie ($\lambda=0,20$) en 161 bij zwakke degradatie ($\lambda=0,05$). Omgekeerd vertoonden perceptuele metingen zoals DISTS een $RM$ dicht bij 1, waardoor ze geen onderscheid konden maken tussen geometrische fouten en compressie.
• Validatie van SISR-algoritmen: Wanneer toegepast op outputs van zowel klassieke interpolatoren als Deep Neural Network (DNN)-modellen (bijvoorbeeld EDSR, FSRCNN), behield MSIQ een hoge geometrische specificiteit ($RM \approx 122$) en architectonische stabiliteit (variaties < 5% tussen algoritmeklassen).
• Validatie van Benchmarks: Op standaard datasets (Set5, Set14, Urban100) behield MSIQ zijn geometrische specificiteit ($RM \approx 100$), wat de robuustheid bevestigt over diverse afbeeldingsinhouden.

Betekenis en Aanspraken
Het artikel positioneert MSIQ niet als vervanging voor algemene metingen (PSNR, SSIM, LPIPS), maar als een complementair diagnostisch hulpmiddel. De betekenis ervan ligt in het adresseren van een specifieke niche: de objectieve controle van structurele integriteit en geometrische fideliteit.

De auteurs beweren dat MSIQ bijzonder kritiek is voor domeinen waar geometrische correctheid prioriteit heeft boven perceptuele natuurlijkheid, zoals medische beeldvorming, remote sensing en technische visualisatie. In deze velden is het behoud van objectproporties en ruimtelijke organisatie essentieel, en kunnen standaardmetingen falen in het detecteren van subtiele geometrische anomalieën die onzichtbaar zijn voor foutmetingen op pixelniveau of perceptuele modellen. Het artikel concludeert dat MSIQ een gat in het evaluatieparadigma opvult door een schaal-invariante, herschaling-vrije en geometrie-specifieke beoordeling van SISR-reconstructiekwaliteit te bieden.