Broadband Wide Field of View Imaging with Computational Mirrors

1. Enunciato del Problema

L'ottica rifrattiva tradizionale (basata su vetro) incontra un collo di bottiglia fondamentale quando si esegue l'imaging nello spettro dal Visibile all'Infrarosso a Onde Corte (VIS-SWIR) (400–1700 nm). A causa della natura dispersiva del vetro, diverse lunghezze d'onda focalizzano a profondità diverse (aberrazione cromatica), richiedendo assemblaggi di lenti multi-elemento complessi, pesanti e costosi per allineare il piano focale. Anche con queste correzioni, l'ottica in vetro è spesso limitata a bande spettrali ristrette.

Al contrario, l'ottica riflettente (specchi) è intrinsecamente acromatica, il che significa che focalizza tutte le lunghezze d'onda nello stesso punto. Ciò le rende teoricamente ideali per l'imaging a banda larga. Tuttavia, i sistemi a specchio semplici (ad esempio, singoli specchi concavi) soffrono di gravi aberrazioni geometriche fuori asse, in particolare la curvatura di campo di Petzval. In questi sistemi, la superficie dell'immagine è curva anziché piatta; diverse regioni del campo visivo (FoV) raggiungono la messa a fuoco a distanze variabili dallo specchio. Di conseguenza, un sensore piatto non può catturare un'immagine nitida e completamente a fuoco su tutto il fotogramma simultaneamente, rendendo gli specchi semplici poco pratici per lunghezze focali medie (50–100 mm) e applicazioni con ampio FoV.

2. Metodologia: Specri Computazionali

Gli autori propongono un framework chiamato Specri Computazionali, che combina l'acquisizione di uno stack focale controllato dall'hardware con una pipeline di ricostruzione computazionale ispirata alla fisica per superare i limiti degli specchi semplici.

A. Configurazione Hardware

• Ottica: Il sistema utilizza uno specchio concavo primario (50 mm F/1 o 100 mm F/2) con un'apertura centrale e uno specchio di piega planare secondario per ridirigere il percorso ottico. Questo design è leggero e compatto rispetto alle equivalenti rifrattive.
• Sensore: Un sensore Sony IMX990 VIS-SWIR capace di rilevare da 400 a 1700 nm.
• Acquisizione: Invece di una singola esposizione, il sistema cattura uno stack focale sparso (tipicamente 2–4 immagini). Il sensore viene spostato lungo l'asse ottico utilizzando una piattaforma di traslazione motorizzata. Questa scansione assiale garantisce che ogni punto nell'ampio campo visivo venga campionato al o vicino al suo piano focale ottimale, "scansionando" efficacemente la superficie curva di Petzval.

B. Algoritmo: SeidelConv

L'innovazione centrale è SeidelConv, un nuovo modello di Funzione di Dispersione del Punto (PSF) progettato per correggere le gravi aberrazioni fuori asse variabili nello spazio (coma, astigmatismo) intrinseche negli specchi ad alta apertura.

• Modello Ispirato alla Fisica: Attingendo alla teoria classica delle aberrazioni di Seidel e alle Spatial Transformer Networks, SeidelConv modella la sfocatura non come un kernel statico, ma come una miscela di componenti di base.
• Meccanismo: Per ogni immagine nello stack focale, il modello:
  1. Deforma l'immagine latente nitida utilizzando un piccolo insieme di trasformazioni affini (circa 20–30 termini) per modellare le distorsioni geometriche (allungamento/rotazione) causate dalle aberrazioni fuori asse.
  2. Sfoca le immagini deformate utilizzando kernel appresi.
  3. Pesa e somma questi componenti per ogni pixel.
• Calibrazione: I parametri del modello (matrici affini, kernel, pesi) vengono appresi tramite una procedura di calibrazione basata su monitor utilizzando un insieme sparso di punti casuali, ottimizzando il modello diretto per corrispondere al sistema fisico.
• Ricostruzione: Il sistema risolve un problema inverso multi-immagine utilizzando un framework Plug-and-Play (PnP) con un prior di denoising profondo (DPIR). Questo fonde lo stack focale sparso in un'unica immagine ad alta fedeltà e completamente a fuoco.

3. Contributi Chiave

1. Acquisizione di Stack Focale Sparso: Dimostrazione che uno stack minimo di 2–4 immagini è sufficiente per recuperare un'immagine nitida e ad ampio FoV, riducendo significativamente il tempo di acquisizione e il sovraccarico dei dati rispetto ai precedenti metodi di stack densi (che richiedevano 10–30 immagini).
2. Modello PSF SeidelConv: Introduzione di un modello PSF variabile nello spazio e apprendibile che incorpora deformazioni affini. Questo è fondamentale per modellare le estreme distorsioni geometriche dell'ottica a specchio fuori asse, superando i modelli di convoluzione a patch o a simmetria radiale standard.
3. Imaging Acromatico a Banda Larga: Dimostrazione che una singola calibrazione hardware (eseguita nella luce visibile) può essere applicata su tutto lo spettro 400–1700 nm senza ricalibrazione o rimessa a fuoco, un risultato impossibile con l'ottica rifrattiva a causa della dispersione cromatica.
4. Validazione del Prototipo: Costruzione e test di obiettivi a specchio 50 mm F/1 e 100 mm F/2 di prima generazione accoppiati a sensori VIS-SWIR.

4. Risultati

• Qualità dell'Immagine: Il sistema produce immagini nitide e completamente a fuoco nelle bande RGB, NIR e SWIR. I confronti quantitativi mostrano che SeidelConv supera i modelli PSF all'avanguardia (ad esempio, CoordGate, Patch-wise) di >2 dB in PSNR nelle regioni fuori asse.
• Analisi dei Materiali: Il sistema rivela proprietà dei materiali invisibili ai sensori standard:
  • Autenticazione Valuta: L'imaging SWIR rivela caratteristiche di sicurezza sulle banconote invisibili alla luce visibile.
  • Vegetazione: NIR/SWIR distingue tra piante reali e artificiali in base alla riflettanza.
  • Oclusione: L'imaging SWIR penetra ostacoli sottili in plastica (buste, bottiglie) che sono opachi alla luce visibile.
• Efficienza: Il sistema basato su specchi è significativamente più leggero (60 g contro 400 g per una lente in vetro comparabile) e più compatto.
• Scalabilità: L'approccio funziona sia per lunghezze focali di 50 mm (macro/primo piano) che di 100 mm (lunga distanza).

5. Significato

Questo lavoro colma il divario tra l'ottica riflettente semplice e a basso costo e l'imaging computazionale avanzato. Superando i limiti tradizionali della curvatura di campo e delle aberrazioni fuori asse, gli Specri Computazionali abilitano:

• Imaging ultra-a banda larga (400–1700 nm) con un unico sistema ottico leggero ed economicamente vantaggioso.
• Eliminazione della rimessa a fuoco cromatica, consentendo un imaging rapido e indipendente dalla lunghezza d'onda.
• Nuove applicazioni nell'imaging iperspettrale, nella classificazione dei materiali e nel telerilevamento dove l'ottica in vetro tradizionale è troppo pesante, costosa o limitata spettralmente.

Gli autori rilasciano il codice SeidelConv e un dataset di validazione per facilitare ulteriori ricerche nell'imaging computazionale basato su specchi.