Context Aware AI Assistant and AR Interface for Lunar Extravehicular Activity (EVA) Procedural Guidance

Stel je voor dat je een ingewikkeld nieuw recept probeet te koken terwijl je ovenwanten draagt die te dik zijn om de knoppen te voelen, staand in een keuken die schudt, en met een timer die tegen je schreeuwt. Stel je nu voor dat die keuken op de Maan staat, de ovenwanten een zwaar ruimtepak zijn, en het schudden wordt veroorzaakt door je eigen hartslag en de noodzaak om te overleven. Dit is de realiteit voor astronauten die "Extravehicular Activities" (EVA's), of ruimtewandelingen, uitvoeren. Ze moeten apparatuur repareren, door lastig terrein navigeren en lange lijsten met instructies volgen, terwijl hun hersenen op volle toeren werken om hen veilig te houden. Het probleem is niet dat ze de instructies niet hebben; het is onmogelijk om een enorme, saaie handleiding te lezen terwijl je in een vacuüm zweeft. Hier komt "Augmented Reality" (AR) om de hoek kijken. Denk aan AR als een paar magische brillen die nuttige aantekeningen direct op je gezichtsveld projecteren, zodat je niet weg hoeft te kijken van waar je mee bezig bent. Maar als die magische brillen een hele encyclopedie op je gezicht dumpen, raak je overweldigd en mis je de volgende stap. De grote vraag die wetenschappers stellen is: Hoe geven we de astronaut de juiste informatie op het exacte juiste moment, zonder hun zicht te vervuënten of hun hersenen te verwarren?

Dit artikel introduceert een nieuwe tool genaamd GAIN-AI (Guided Assistant for Intelligent Navigation) die probeert dit puzzelstukje op te lossen. In plaats van de astronaut een enorme muur van tekst te tonen, fungeert het systeem als een super-slimme, hyper-geconcentreerde rondgeleider die alleen de allereerste volgende stap fluistert die je moet zetten. De onderzoekers bouwden een "twee-lagen" systeem om dit mogelijk te maken. Eerst leerden ze een krachtig computerbrein (een AI) om de officiële missiehandleidingen te lezen, de live data van het ruimtepak van de astronaut te controleren (zoals zuurstofniveaus en temperatuur), en te begrijpen wat te doen als er iets misgaat. Ten tweede namen ze het antwoord van de AI en hakten dit in kleine, gemakkelijk leesbare "kaarten" die één voor één op het helmdisplay van de astronaut verschijnen. Elke kaart bevat drie dingen: een Doel (wat je probeert te doen), een Taak (het ene specifieke ding dat je op dit moment moet doen) en een Verificatie (hoe je weet dat je het goed hebt gedaan, zoals het zien van een groen lampje of een meter die een bepaald getal bereikt).

Om te zien of dit idee daadwerkelijk werkt, hebben ze het nog niet naar de Maan gestuurd. In plaats daarvan creëerden ze 111 fictieve ruimtewandeling-scenario's op een computer om het systeem te testen. Ze vroegen de AI om alles te beheren, van normale, gemakkelijke taken tot lastige situaties waarin er iets misging, zoals een defect gereedschap of een druklek. De resultaten waren een mix van groot succes en enkele groeipijnen. Wanneer de ruimtewandeling perfect soepel verliep (een "nominaal" scenario), scoorde het systeem een perfecte 10.0/10. Wanneer er slechts één klein probleem was (een "single-fault" scenario), deed het het erg goed met een score van 8.15/10. Echter, wanneer de situatie echt chaotisch werd met meerdere problemen tegelijkertijd, of wanneer de instructies zeer precieze, stapsgewijze logica vereisten (zoals het herstarten van een navigatiesysteem met 13 specifieke stappen), daalde de score naar 7.73/10 of lager. De AI was goed in het opmerken dat er iets mis was, maar had soms moeite met het geven van de exacte juiste oplossing voor complexe, meerstaps rampen.

Het ontwerp van het display zelf is even belangrijk als de AI. De onderzoekers realiseerden zich dat je in de ruimte niet op een scherm kunt tikken met handschoenen aan, en dat je het je niet kunt veroorloven om naar een klembord te kijken. Daarom ontwierpen ze de interface zodat deze "glanceable" (in één oogopslag te begrijpen) is. Stel je een videogame voor waarin een quest-marker verschijnt, je precies vertelt wat je moet doen, en dan verdwijnt totdat je klaar bent. Dat is het idee hier. De "kaarten" zijn hoog-contrastrijk en simpel, zodat een astronaut ze in een fractie van een seconde kan lezen zonder zijn evenwicht of zijn focus op de gevaarlijke omgeving om hem heen te verliezen. Door de AI te dwingen grote procedures op te splitsen in deze piepkleine, geverifieerde stappen, helpt het systeem de hersenen van de astronaut om niet overbelast te raken.

Het team testte deze prototype in mei 2026 bij NASA's Johnson Space Center met echte mensen die de uitrusting droegen, maar het artikel merkt op dat de volledige resultaten van die menselijke tests nog binnenkomen. Wat ze tot nu toe hebben aangetoond, is dat hoewel de AI een krachtige helper is, hij nog niet perfect is. Hij blinkt uit wanneer de situatie rechtlijnig is, maar raakt een beetje in de war wanneer de situatie een chaotische puinhoop wordt. De auteurs suggereren dat dit een veelbelovende start is, maar dat ze het systeem moeten blijven verfijnen, vooral voor die lastige scenario's met meerdere problemen, voordat het echt vertrouwd kan worden om mensen op het maanoppervlak te begeleiden. Het is een stap naar een toekomst waarin je ruimtepak je niet alleen beschermt, maar je ook actief helpt denken.