Quantitative evaluation of LED based optical autofocus module

Deze studie presenteert een verbeterde, op LED gebaseerde open-source optische autofocusmodule voor lichtmicroscopie en introduceert een methode om de prestaties te kwantificeren, waarbij wordt aangetoond dat het systeem, ondanks thermische variaties, een axiale stabiliteit van minder dan 10 nm gedurende ten minste 45 minuten bereikt.

De kern

De Kern: Een Slimme Autofocus voor Microscopen

Stel je voor dat je een hele dure camera hebt om heel kleine dingen te fotograferen, zoals cellen in een menselijk lichaam. Het probleem is dat deze camera's heel gevoelig zijn. Als de temperatuur in het lab een beetje verandert, of als het gebouw een klein beetje trilt, verschuift het beeld. Het wordt wazig. In de microscopie noemen we dit "uit focus raken".

Vroeger moesten onderzoekers vaak handmatig scherpstellen of gebruikmaken van dure, complexe lasersystemen om dit automatisch te corrigeren. Dit artikel beschrijft een nieuwe, goedkopere en slimmere manier om dit te doen, ontwikkeld door onderzoekers van de Imperial College London.

1. De Oude Manier vs. De Nieuwe Manier

De oude manier (De dure laser):
Vroeger gebruikten ze een speciaal soort laser (een SLD) die heel stabiel licht uitstraalde. Dit werkte goed, maar het was duur, fragiel (breekbaar) en vereiste strenge veiligheidsmaatregelen omdat het om een laser ging. Het was alsof je een dure, ingewikkelde raceauto gebruikte om naar de supermarkt te gaan: het doet het werk, maar het is onnodig complex en kostbaar.

De nieuwe manier (De goedkope LED):
De onderzoekers hebben die dure laser vervangen door een simpele LED-lamp (zoals die in je telefoon of lampen thuis) die via een optische vezel het licht naar de microscoop stuurt.

• Voordeel: Het is veel goedkoper, robuuster en veilig (geen lasergevaar).
• Nadeel: Een LED is niet zo stabiel als een laser. Als je hem net hebt ingeschakeld, is hij koud. Naarmate hij opwarmt, verandert de kracht van het licht een beetje.

2. Het Probleem: De "Opwarmfase"

Hier komt de creatieve analogie:
Stel je voor dat je een auto hebt die automatisch remt als er een obstakel voor komt. Maar de sensor die kijkt of er een obstakel is, werkt op batterijen die net zijn opgeladen. Terwijl de batterijen opwarmen, wordt de sensor een beetje "slaperig" en meet hij de afstand niet helemaal correct.

Bij de LED gebeurde precies dit. Toen de lamp net aan ging, warmde hij op en werd het licht iets zwakker. Omdat het systeem dacht dat het licht zwakker was door een verschuiving in het beeld, probeerde het onterecht het beeld scherp te stellen. Dit leidde tot een verschuiving van het beeld van wel 500 nanometer (dat klinkt klein, maar voor een microscoop is dat enorm). Het systeem dacht dat het beeld scherp was, terwijl het eigenlijk wazig werd.

3. De Oplossing: De "Slimme Rekenaar"

De onderzoekers bedachten een slimme oplossing. Ze realiseerden zich dat het probleem niet de LED zelf was, maar hoe het systeem de gegevens verwerkte.

• De analogie: Stel je voor dat je een weegschaal gebruikt om appels te wegen, maar de weegschaal zelf een beetje zwaarder wordt naarmate hij warmer wordt. Als je dat niet corrigeert, weeg je de appels verkeerd.
• De oplossing: Ze programmeerden de computer om te kijken naar de "achtergrond" (het licht dat er altijd is, zelfs zonder appel). Zodra de LED opwarmt en zwakker wordt, past de computer de weegschaal (de berekening) direct aan. Ze "normaliseren" het signaal.

Dankzij deze software-aanpassing werkt het systeem perfect, zelfs direct nadat de LED is ingeschakeld. Het beeld blijft stabiel binnen een marge van 10 nanometer (dat is ongeveer 10.000 keer smaller dan een haar) gedurende meer dan 45 minuten.

4. Hoe weten ze dat het werkt? (De "Astigmatische" Test)

Hoe kun je controleren of een autofocus werkt, als je niet zeker weet of het beeld scherp is? Je kunt niet gewoon naar het beeld kijken.

De onderzoekers gebruikten een slimme truc met fluorescerende pareltjes (kleine lichtgevende bolletjes) en een speciaal glazen lensje dat het licht "vervormt" (astigmatisme).

• De analogie: Denk aan een sterretje dat je door een vervormd raam kijkt. Als het raam perfect scherp is, zie je een rond sterretje. Als je het raam een beetje kantelt, wordt het sterretje langwerpig (zoals een ei).
• Door te kijken hoe "eivormig" het sterretje is, kunnen ze heel precies meten hoe ver het beeld uit focus is. Ze gebruikten een computerprogramma dat dit "eivormigheid" meet door het beeld te vergelijken met zichzelf (autocorrelatie). Dit is sneller en makkelijker dan het hele beeld opnieuw te berekenen.

5. De "Oneindige" Hulpmethode

Tijdens het onderzoek bedachten ze ook een simpel hulpmiddel om microscopen in te stellen, genaamd de "Infinity alignment tool".

• De analogie: Het is alsof je een spiegel met een roosterpatroon in de lens van je camera schroeft. Je kijkt door de lens en ziet het patroon. Als het patroon haarscherp is, weet je dat je camera perfect is ingesteld. Dit maakt het opzetten van dure microscopen veel sneller en makkelijker voor iedereen, ook voor mensen met minder geld.

Conclusie: Waarom is dit belangrijk?

Dit onderzoek is een doorbraak omdat het:

1. Goedkoper maakt: Je hoeft geen dure lasers meer te kopen; een simpele LED volstaat.
2. Veiliger maakt: Geen lasergevaar meer.
3. Betrouwbaarder maakt: Door de slimme software-correctie werkt het zelfs als de lamp opwarmt.
4. Toegankelijker maakt: Het is open-source software. Iedereen kan het downloaden en gebruiken, wat helpt bij het versnellen van medisch onderzoek (zoals het vinden van kanker of het trainen van AI-modellen).

Kortom: Ze hebben een dure, breekbare raceauto vervangen door een betrouwbare, goedkope en slimme elektrische auto die precies doet wat hij moet doen, zelfs als hij net is opgestart.

Technische samenvatting

Titel: Kwantitatieve evaluatie van een op LED gebaseerde optische autofocusmodule

1. Het Probleem

In de optische microscopie, vooral bij toepassingen zoals hoge-inhoudsanalyse (HCA), whole-slide scanning en super-resolutie microscopie (SMLM), is het handhaven van scherpte essentieel. Mechanische en omgevingsfactoren, zoals thermische drift, veroorzaken axiale verschuivingen die de beeldkwaliteit en de nauwkeurigheid van 3D-localisatie aantasten.
Bestaande oplossingen hebben beperkingen:

• Software-gedreven autofocus: Vereist vaak het nemen van een volledige z-stack voor elk beeldveld, wat de doorvoer verlaagt en niet werkt bij dikke monsters.
• Optische autofocus (OAF) modules: Bestaande open-source modules (zoals de eerdere "openAF") maakten gebruik van superluminescente diodes (SLD) of laserdiodes. Deze zijn echter duur, kwetsbaar en vereisen strikte lasersafety-maatregelen.
• Thermische stabiliteit: Een specifiek probleem bij het gebruik van lichtbronnen is dat de uitgangsvermogen kan variëren tijdens het opwarmen (thermisch evenwicht), wat leidt tot fouten in de autofocusberekening die niet direct worden gedetecteerd door het systeem zelf.
• Validatie: Er ontbreekt vaak een snelle, onafhankelijke methode om de prestaties van een autofocusmodule te kwantificeren zonder de module zelf te vertrouwen.

2. Methodologie

De auteurs hebben een verbeterde versie van de open-source "openAF" module ontwikkeld en een nieuwe methode voor prestatie-evaluatie geïmplementeerd.

A. Hardware-verbeteringen (LED-gebaseerde openAF):

• Lichtbron: De dure en kwetsbare SLD/SMOF (Single Mode Optical Fiber) combinatie is vervangen door een goedkope, robuuste 850 nm LED gekoppeld aan een multimode optische vezel (MMOF).
• Optica: Om de lagere ruimtelijke coherentie van de LED en verstrooiing vanuit de vezelmantel te beheersen, werd een 3D-geprinte rechthoekige apertuur toegevoegd. De optische opstelling gebruikt twee orthogonale cilindrische lenzen om astigmatisme te creëren, waardoor de richting van de defocus (boven/onder focus) uit één beeld kan worden bepaald.
• Algoritme: Het systeem gebruikt een kalibratie-z-stack om een lookup-tabel te genereren. De defocus wordt berekend door de breedte (FWHM) van de Fourier-transformatie van de autofocus-camera beelden langs twee orthogonale assen te analyseren.

B. Onafhankelijke prestatie-evaluatie (Astigmatische Autocorrelatie):
Om de autofocus onafhankelijk te testen, hebben de auteurs een softwaretool ontwikkeld die 2D-autocorrelatieanalyse toepast op afbeeldingen van fluorescerende nanobeads (100 nm) die via astigmatische imaging worden vastgelegd.

• Door een cilindrische lens in het fluorescentiepad te plaatsen, verandert de vorm van het puntverspreidingsfunctie (PSF) van de bead afhankelijk van de axiale positie.
• De verhouding tussen de breedtes van de autocorrelatiepieken in de X- en Y-richting ($\sigma_X / \sigma_Y$) biedt een monotone maatstaf voor defocus binnen een bereik van ca. ±0,7 µm.
• Dit is veel sneller dan het localiseren van individuele beads of het nemen van volledige z-stacks.

C. Correctie voor vermogensvariaties:
De auteurs ontdekten dat de autofocusfouten correleerden met de thermische drift van de LED-vermogen. Ze losten dit op door de achtergrondsubtractie in het algoritme te normaliseren op basis van de gemiddelde intensiteit van de realtime autofocus-beelden, zodat variaties in de lichtbron de defocus-metriek niet beïnvloeden.

3. Belangrijkste Bijdragen

1. Kosteneffectieve en veilige oplossing: Vervanging van de SLD/Laser door een LED/MMOF-configuratie, wat de kosten verlaagt, de robuustheid verhoogt en lasersafety-problemen elimineert.
2. Nieuwe validatiemethode: Introductie van een snelle, software-gebaseerde methode (2D-autocorrelatie van astigmatische bead-beelden) om de prestaties van autofocussystemen onafhankelijk en in real-time te kwantificeren.
3. Algoritmische correctie: Ontwikkeling van een normalisatiemethode voor achtergrondintensiteit die de negatieve invloed van thermische drift in de lichtbron op de autofocusnauwkeurigheid elimineert.
4. Infinity Alignment Tool: Een eenvoudig mechanisch hulpmiddel om de oneindigheidsafstelling van microscopen (inclusief astigmatische systemen) snel en nauwkeurig in te stellen.

4. Resultaten

• Prestaties zonder correctie: Zonder normalisatie vertoonde de LED-module een significante focusdrift (>500 nm) tijdens de eerste 20 minuten na het inschakelen, veroorzaakt door een vermogensdaling van de LED van ~2%. De SLD-module vertoonde ook drift (>100 nm) door vermogensvariaties.
• Prestaties met normalisatie: Na implementatie van de intensiteitsnormalisatie:
  • De LED/MMOF-module behaalde een axiale stabiliteit met een standaardafwijking (SD) van <10 nm (gemeten op ~7 nm) gedurende minimaal 45 minuten, zelfs terwijl de LED-vermogen nog aan het stabiliseren was.
  • De SLD/SMOF-module verbeterde eveneens tot een SD van ~8 nm.
• Werkingsbereik: Het LED-systeem heeft een lineair werkingsbereik van ongeveer ±15 µm. Dit is voldoende voor time-lapse imaging op een vast beeldveld. Voor grotere bereiken kan een tweestapsmethode worden gebruikt.
• Nauwkeurigheid: De fout in de voorspelde defocus ligt aanzienlijk onder de diepteveld (DOF) van de gebruikte 100x 1.4 NA objectieflens (200 nm).

5. Betekenis en Conclusie

Dit onderzoek levert een belangrijke bijdrage aan de open-source microscopie-gemeenschap door een betaalbaar, veilig en hoogwaardig autofocussysteem te presenteren dat geschikt is voor geavanceerde toepassingen zoals SMLM en time-lapse imaging.

• Toepasbaarheid: De module werkt betrouwbaar zelfs bij hoge NA olie-immersie objectieven, waar de reflectie van het dekglas-zuigmedium-interface zeer laag is (~0,4%).
• Validatie: De ontwikkelde autocorrelatie-methode biedt een standaard voor het onafhankelijk testen van autofocussystemen, wat cruciaal is voor de betrouwbaarheid van langdurige experimenten.
• Toekomst: De auteurs benadrukken dat de LED-oplossing de drempel voor toegang tot geavanceerde microscopie verlaagt, met name voor onderzoekers in minder rijk begrote omgevingen, zonder in te leveren op de prestaties (stabiliteit <10 nm).

De software voor de verbeterde openAF en de autocorrelatie-analyse is openbaar beschikbaar gemaakt via GitHub, en de data is beschikbaar via Zenodo.