Design and computational evaluation of an eye gaze wheelchair retrofit with temporal command supervision

Voor miljoenen mensen die leven met ernstige fysieke beperkingen kan de eenvoudige handeling van het verplaatsen van de ene kamer naar de andere een monumentale uitdaging zijn. Hoewel elektrische rolstoelen een pad naar onafhankelijkheid bieden, vertrouwen ze op een besturingsinterface die de gebruiker moet kunnen bedienen, typisch een joystick die handkracht en behendigheid vereist. Wanneer handen niet kunnen functioneren, blijven de ogen vaak een krachtige, onbenutte hulpbron. Het menselijk oog is van nature precies en in staat om met opmerkelijke snelheid op objecten te focussen; voor hen die wel kunnen zien maar niet de ledematen kunnen bewegen, kan het kijken naar een richting een commando worden om te bewegen. Echter, het omzetten van een blik in veilige, betrouwbare beweging is niet zo eenvoudig als wijzen en klikken. De ogen scannen voortdurend de wereld, verschuiven de focus om een bordje te lezen of een persoon te observeren, en een controlesysteem dat de stoel elke keer beweegt wanneer de ogen op een plek landen, zou chaotisch en gevaarlijk zijn. De kernuitdaging voor ingenieurs is om onderscheid te maken tussen een bewuste intentie om te bewegen en een vluchtige blik, en om ervoor te zorgen dat als de verbinding tussen de geest van de gebruiker en de machine wordt verbroken, de stoel onmiddellijk stopt in plaats van een gevaarlijk pad voort te zetten.

Onderzoekers aan het Kuwait College of Science and Technology hebben dit probleem aangepakt door een systeem gebouwd en getest genaamd iMove, een retrofit-kit waarmee een standaard elektrische rolstoel volledig kan worden aangestuurd door oogbewegingen. Het team, onder leiding van Hasan Fayyad-Kazan, heeft een apparaat geconstrueerd dat tussen een commerciële eye-tracking camera en de bestaande joystick van de rolstoel wordt geplaatst. In plaats van dat de gebruiker een stok beweegt, kijkt hij naar een specifieke richting op een tablet scherm, en een kleine robotarm die aan de rolstoel is bevestigd, duwt fysiek de joystick in die richting. Het systeem bevat een centraal "STOP"-doel en acht directionele doelen. Wanneer een gebruiker naar een richting kijkt, wacht het systeem om te zien of de blik stabiel genoeg is om een intentioneel commando te zijn. Als de blik lang genoeg aanhoudt, beweegt de robotarm de joystick en begint de rolstoel te rollen. Als de gebruiker wegkijkt, is het systeem ontworpen om de beweging te stoppen.

De onderzoekers begonnen door een basisversie van dit systeem te testen om te zien of het een blik kon vertalen naar een beweging. In een voorlopige proef probeerden zij tien keer een richting te selecteren. Het systeem bewoog de joystick acht van de tien keer succesvol, met een succespercentage van 80 procent. Deze initiële test onthulde echter een kritiek gebrek in het basisontwerp: het systeem was te wantrouwig. Als de ogen van de gebruiker van een doel afdriften, of als de computer die het signaal verzendt vastliep, zou het basisysteem de joystick ingedrukt houden en de rolstoel laten blijven bewegen. Het wist niet hoe het uit zichzelf moest stoppen wanneer de input ongeldig werd. Dit is een gevaarlijk scenario, aangezien een rolstoel die blijft bewegen nadat de gebruiker de controle of de focus is verloren, tot een botsing kan leiden.

Om dit op te lossen, ontwikkelde het team een "temporele supervisor", een laag softwarelogica die fungeert als een veiligheidsbewaker voor de commando's. Deze supervisor introduceert een reeks regels om te verifiëren dat een commando nog steeds geldig is voordat de stoel mag bewegen. Ten eerste vereist het een "dwell"-tijd (verblijftijd), wat betekent dat de gebruiker een specifere duur naar een doel moet kijken — ingesteld op 0,60 seconden in hun ontwerp — voordat de stoel beweegt. Dit voorkomt accidentele bewegingen veroorzaakt door een snelle blik. Ten tweede controleert het systeem of de input "vers" is, om er zeker van te zijn dat het signaal dat van de eye-tracker komt nieuw is en geen bevroren beeld van een moment geleden. Derde monitort het de verbinding tussen de tablet en de rolstoel; als de communicatielink wordt verbroken, kapt het systeem het commando onmiddellijk af.

De onderzoekers hebben dit systeem niet alleen gebouwd; ze hebben duizenden scenario's rigoureus gesimuleerd om te zien hoe het zich onder stress zou gedragen. Ze creëerden een digitale omgeving waarin ze fouten konden injecteren, zoals het bevriezen van de eye-tracker, het doorsnijden van de communicatiekabel of het laten stoppen van de computer met verwerken. In deze simulaties faalde het basissysteem elke keer wanneer er een fout optrad, waarbij de rolstoel de hele duur van de test bleef bewegen. In contrast hiermee reageerde het nieuwe supervisor-systeem snel. Wanneer de eye-tracker bevroor, stopte de supervisor het commando binnen 0,12 seconden. Wanneer de communicatielink werd verbroken, stopte het het commando binnen 0,24 seconden. Het team testte ook wat er zou gebeuren als een gebruiker per ongeluk heel kort naar een doel keek, zoals 0,12 seconden. Het basissysteem zou de stoel geactiveerd hebben, maar de supervisor negeerde het correct omdat de blik te kort was voor een bewuste opdracht.

De studie keek ook naar de fysieke realiteit van het stoppen. Zelfs als de software onmiddellijk een "stop"-commando stuurt, komt de rolstoel niet halverwege in de lucht tot stilstand. Het heeft momentum. Gebruikmakend van de geobserveerde remtijd van de rolstoel, die tussen de 3 en 4 seconden nodig had om volledig tot rust te komen, berekenden de onderzoekers hoe ver de stoel zou reizen nadat een stopcommando was uitgegeven. Bij een snelheid van 0,50 meter per seconde zou de stoel tussen de 0,78 en 1,13 meter afleggen voordat deze volledig tot stilstand kwam. Deze afstand is aanzienlijk, wat benadrukt dat de snelheid van de software slechts één deel van de veiligheidsvergelijking is; het fysieke remmen van de stoel is even belangrijk. Het team stelde vast dat als het systeem te lang wachtte met het uitgeven van een stopcommando, de stoel nog verder zou reizen, wat het belang van de snelle reactietijden van hun supervisor onderstreept.

Hoewel de resultaten veelbelovend zijn, merken de onderzoekers voorzichtig op dat dit werk een bewijs van concept is en geen afgewerkt medisch product. De tests werden uitgevoerd door de ontwikkelaars zelf, niet door de mensen die de stoel uiteindelijk zouden gebruiken, en het succespercentage van 80 procent was gebaseerd op een zeer klein aantal pogingen. De studie bewijst dat de logica werkt in een computersimulatie en dat de hardware fysiek de joystick kan bewegen, maar het bewijst nog niet dat een echte gebruiker veilig door een complexe omgeving kan navigeren. Het team benadrukt dat toekomstig werk het moet omvatten van testen met echte gebruikers om te zien hoe zij met het systeem interageren over langere perioden en in real-world condities. Ze merken ook op dat het systeem robuust moet zijn tegen mechanische defecten, zoals een vastgelopen robotarm, wat de huidige software niet kan detecteren.

Uiteindelijk benadrukt dit onderzoek een vitaal principe in assistieve technologie: veiligheid gaat niet alleen over het laten werken van een apparaat, maar over het zorgen dat het stopt wanneer het dat moet. Door een bewuste selectiemethode te combineren met een slimme veiligheidslaag die op fouten let, hebben de onderzoekers een blauwdruk gecreëerd voor een veiligere manier om een rolstoel met de ogen te besturen. Het iMove-systeem laat zien dat met de juiste combinatie van tijdscontroles en foutdetectie, het mogelijk is om de natuurlijke, vloeiende beweging van de menselijke blik om te zetten in een betrouwbaar en veilig commando voor een machine, waardoor de kloof tussen intentie en actie wordt overbrugd voor hen die het het hardst nodig hebben.