Characterization of Event-Based Vision Sensors for High-Speed Optical Instrumentation

Sintesi Tecnica: Caratterizzazione di Sensori di Visione Basati su Eventi per l'Strumentazione Ottica ad Alta Velocità

Problema
I sensori di visione basati su eventi (EVS), come l'IMX636, offrono una risoluzione temporale su scala dei microsecondi e una generazione di eventi asincrona, il che li rende attraenti per misurazioni ottiche ad alta velocità dove l'informazione è codificata in segnali che variano temporalmente anziché in immagini statiche. Tuttavia, esiste una lacuna di conoscenza critica: la precisione dei timestamp degli eventi non garantisce necessariamente una ricostruzione accurata delle forme d'onda ottiche che variano nel tempo, in particolare sotto un'illuminazione densa e spazialmente estesa. Sebbene gli EVS siano sempre più utilizzati in applicazioni come la sensoristica a fibra, la spettroscopia e l'interferometria, i limiti operativi imposti dalla dinamica dei fotorecettori, dal comportamento di frazione di riferimento (refractory behavior), dai meccanismi di reset dipendenti dalla polarità e dalla serializzazione della lettura asincrona rimane ancora poco esplorato. Nello specifico, non è chiaro come questi fattori limitino la fedeltà temporale dei segnali ricostruiti quando il sensore viene utilizzato come interrogatore ottico piuttosto che come un convenzionale sistema di imaging.

Metodologia
Gli autori presentano una caratterizzazione sistematica e quantitativa di un sensore a eventi basato su IMX636 (Prophesee EVK4) sotto eccitazione ottica controllata. L'apparato sperimentale ha utilizzato un sistema di acquisizione dati (DAQ) National Instruments per pilotare un LED con forme d'onda sinusoidali e pulsate precise, sincronizzate con la telecamera tramite segnali di trigger.

La caratterizzazione è stata suddivisa in due domini primari:

1. Analisi nel Dominio della Frequenza: L'intensità del LED è stata modulata con forme d'onda sinusoidali (da 1 kHz a 350 kHz). Lo studio ha valutato la risposta alla modulazione, il comportamento del tasso di eventi, il bilanciamento della polarità e la fedeltà della ricostruzione spettrale attraverso diversi livelli di illuminazione (tensione di offset), ampiezze di modulazione e geometrie della Regione di Interesse (ROI) (ad es., 1280×12, 22×720, 128×128 pixel). Le metriche includevano il rapporto segnale-rumore (SNR) locale, l'ampiezza lock-in e il bilanciamento della polarità.
2. Analisi nel Dominio del Tempo (Impulso): Il sensore è stato sottoposto a impulsi ottici isolati e a treni di impulsi ripetuti rapidamente. Ciò ha permesso di quantificare la latenza del primo evento, la durata della risposta, la dinamica di recupero e l'accuratezza della ricostruzione della larghezza dell'impulso. Lo studio ha analizzato specificamente come la geometria della ROI influenzi la dispersione temporale dovuta all'arbitraggio delle righe e alla serializzazione della lettura.

Contributi Chiave e Risultati
Il documento stabilisce che, sebbene il rilevamento degli eventi avvenga su scale temporali di microsecondi, la fedeltà della ricostruzione della forma d'onda è limitata da diversi fattori fisici e architettonici:

• Latenza vs. Fedeltà: La latenza del primo evento è eccezionalmente bassa (< 5 µs) e debolmente dipendente dalla geometria della ROI, indicando che il rilevamento iniziale è dominato dal contrasto a livello di pixel e dall'accesso iniziale alla lettura. Tuttavia, la durata completa della risposta è significativamente più lunga e fortemente dipendente dalla geometria della ROI a causa della serializzazione della lettura.
• Squilibrio di Polarità e Dinamica di Refractory: Sotto modulazione ad alta frequenza o rapida ripetizione di impulsi, il sensore mostra una progressiva soppressione degli eventi negativi. Poiché gli eventi positivi aggiornano il livello di riferimento interno verso uno stato di illuminazione più elevato, la mancanza di eventi negativi corrispondenti impedisce al riferimento di resettarsi. Ciò porta a una perdita di simmetria della forma d'onda e a un degrado della fedeltà della ricostruzione, anche se il tasso di eventi rimane elevato.
• Geometria della ROI e Dispersione Temporale: L'estensione spaziale della regione attiva influenza direttamente la risposta temporale. Le ROI verticalmente estese (che coprono molte righe) soffrono di un aumento della dispersione temporale dovuto ai ritardi di arbitraggio delle righe, mentre le ROI orizzontalmente estese (con meno righe) presentano transizioni più nette. Di conseguenza, la selezione della ROI agisce come un parametro di progettazione temporale, non solo spaziale.
• Limiti di Ricostruzione:
  • Sinusoidale: Una risposta spettrale coerente può essere rilevata fino a circa 80 kHz, ma la ricostruzione fedele della forma d'onda degrada a frequenze inferiori a causa dello squilibrio di polarità e della dispersione temporale.
  • Pulsata: Le transizioni ottiche sono rilevabili per larghezze di impulso fino a circa 50 µs. Tuttavia, la ricostruzione accurata della forma dell'impulso è ottenuta solo per impulsi superiori a circa 200 µs. Gli impulsi più brevi risultano in forme d'onda ricostruite allargate con lunghe code di decadimento a causa della distribuzione temporale del burst di eventi.
• Regimi Operativi: Lo studio identifica due regimi: un regime "limitato dal contrasto" a basse ampiezze di modulazione, dove il rilevamento dipende dal superamento della soglia, e un regime "limitato dalla dinamica" ad ampiezze più elevate, dove le prestazioni sono vincolate dai tempi di refractory, dalla risposta del fotorecettore e dalla serializzazione della lettura.

Significato e Rivendicazioni
Gli autori affermano che questo lavoro fornisce linee guida pratiche essenziali per l'utilizzo di sensori basati su eventi come strumenti di misura ottica ad alta velocità. Il significato primario risiede nella distinzione tra capacità di rilevamento degli eventi e fedeltà di ricostruzione della forma d'onda. Il documento sostiene che il rilevamento degli eventi su scala di microsecondi non implica una fedeltà della forma d'onda su scala di microsecondi.

I risultati stabiliscono che la prestazione temporale di questi dispositivi non è una proprietà intrinseca fissa, ma dipende fortemente dalla configurazione sperimentale, inclusi l'illuminazione di fondo, il contrasto di modulazione e la geometria della ROI. La caratterizzazione definisce i limiti pratici della risposta temporale, dimostrando che, sebbene gli EVS siano promettenti per il rilevamento di transizioni rapide e il recupero di segnali periodici in condizioni favorevoli, la ricostruzione quantitativa della forma d'onda richiede una gestione attenta della polarità, dei livelli di illuminazione e dell'attività spaziale per mitigare gli effetti della serializzazione della lettura e della dinamica di refractory. Questo lavoro mira a prevenire la misinterpretazione dei flussi di eventi nella strumentazione scientifica, chiarendo i meccanismi che limitano il recupero delle informazioni temporali.