Usability testing with a prototype user interface of an Artificial Intelligence driven air-Safety Tool (AISaT)
Dit artikel rapporteert over een bruikbaarheidsonderzoek naar een prototype van een door AI gestuurde luchtveiligheidstool (AISaT) waarbij tien medewerkers van een ziekenhuis betrokken waren, wat specifieke verbeteringen aan de interface identificeerde en kritieke beslissingen onderstreepte met betrekking tot datavariabelen, infectie-aannames en gebruikersautonomie die nodig zijn voor toekomstige ontwikkeling.
Oorspronkelijk artikel gelicentieerd onder CC BY 4.0 (https://creativecommons.org/licenses/by/4.0/). Dit is een AI-gegenereerde uitleg van een preprint die niet peer-reviewed is. Dit is geen medisch advies. Neem geen gezondheidsbeslissingen op basis van deze inhoud. Lees de volledige disclaimer
Stel je voor dat je een super-slimme digitale assistent hebt die ontworpen is om een heel specifiek probleem op te lossen: het veilig houden van ziekenhuiskamers voor onzichtbare bacteriën die in de lucht zweven. Dit hulpmiddel wordt AISaT (Artificial Intelligence driven air-Safety Tool) genoemd. Het gebruikt complexe wiskunde en informatica om precies uit te rekenen waar je een enorme luchtreiniger (zoals een HEPA-filter) moet plaatsen, zodat deze zoveel mogelijk bacteriën opvangt voordat ze iemand ziek maken.
Maar voordat de artsen en verpleegkundigen deze "slimme assistent" konden gebruiken, wilden de makers zeker weten dat hij niet te ingewikkeld in gebruik zou zijn. Ze nodigden 10 medewerkers van het ziekenhuis uit (artsen, verpleegkundigen en gebouwbeheerders) om naar een prototype (een testversie) van het hulpmiddel te kijken en hen te laten vertellen wat zij ervan vonden.
Hier is wat er gebeurde, eenvoudig uitgelegd:
De "Proefrit"
De onderzoekers lieten het personeel het hulpmiddel nog niet zelf gebruiken. In plaats daarvan lieten ze hen via een videocall naar het scherm kijken en zeiden: "Kijk hiernaar, en vertel ons hardop wat je denkt." Ze liepen zes stappen door, zoals het invullen van een digitaal formulier over een ziekenhuiskamer:
- De Kamer: Hoe groot is deze?
- De Mensen: Wie zijn er aanwezig? (Patiënten, artsen, etc.)
- Het Filter: Waar moeten we de luchtreiniger plaatsen?
- Het Resultaat: Een 3D-afbeelding die laat zien hoe goed het filter werkt.
Wat het personeel zei (Het Goede, het Slechte en het Verwarrende)
Het personeel gaf veel nuttige feedback, die de onderzoekers in een paar hoofdcategorieën hebben onderverdeeld:
1. "Wat moet ik doen?" (Begrijpelijkheid)
- Het Probleem: De instructies waren een beetje als een kaart geschreven in een vreemde taal. Het personeel wist niet zeker of ze vijf filters in de kamer moesten plaatsen of gewoon de beste uit vijf suggesties moesten kiezen.
- De Oplossing: Ze stelden voor om verwarrende termen te hernoemen. In plaats van "Human Models", noem ze "Patiënt" en "Arts". In plaats van "Mitigation", zeg gewoon "Luchtreiniger". Ze wilden ook duidelijkere labels zodat ze wisten dat ze twee verschillende locaties met elkaar vergeleken.
2. "Is dit de werkelijkheid?" (Inhoud & Realiteit)
- Het Probleem: Het hulpmiddel was een beetje te simpel. Het wist niet van dingen die daadwerkelijk in een kamer bestaan, zoals ramen, gordijnen of meubels die de luchtstroom blokkeren. Het had ook moeite met de vraag: "Wie is er ziek?"
- Sommige medewerkers maakten zich zorgen dat als het hulpmiddel ervan uitgaat dat iedereen ziek is, het de aanbeveling zou geven om duizenden dure filters te kopen die het ziekenhuis zich niet kan veroorloven.
- Anderen maakten zich zorgen dat als het ervan uitgaat dat niemand ziek is, het een gevaarige patiënt zou missen.
- De Oplossing: Het hulpmiddel moet slimmer worden. Het moet vragen naar specifieke ziekten (zoals griep versus TBC) en rekening houden met zaken als hoesten of zwaar ademhalen, in plaats van alleen maar "ademniveau".
3. "Ik kan de knoppen niet vinden!" (Navigatie)
- Het Probleem: Het bewegen van de kleine digitale mensen door de kamer was lastig. Je moest toetsenbordknoppen zoals "Q" gebruiken om ze te bewegen, wat onhandig aanvoelde. Het was also려 een auto besturen met alleen de claxon.
- De Oplossing: Laat gebruikers items slepen en neerzetten met een muis, net zoals het verplaatsen van meubels in een videogame. Ook vonden sommige mensen het overweldigend om alle stappen op één grote pagina te zien; ze gaven de voorkeur aan één stap tegelijk te zien.
4. "Ik zie het verschil niet!" (Zichtbaarheid)
- Het Probleem: Het hulpmiddel gebruikte kleuren (zoals rood en blauw) om aan te geven waar de bacteriën zaten. Maar voor mensen die kleurenblind zijn, of voor schermen waarbij de kleuren met elkaar vloeken, was het onmogelijk om het verschil te zien tussen "veilige lucht" en "gevaarlijke lucht".
- De Oplossing: Gebruik vormen, cijfers of duidelijkere plaatjes in plaats van alleen op kleur te vertrouwen. Maak ook de tekst groter.
5. "Past dit wel in mijn kamer?" (Workflow & Praktische bruikbaarheid)
- Het Probleem: Het hulpmiddel kan zeggen: "Zet het filter precies hier!" Maar in het echte leven kan die plek direct naast een deur liggen, of is er geen stopcontact in de buurt, of vormt de kabel een struikelgevaar.
- De Oplossing: Het hulpmiddel moet controleren of een plek praktisch is, niet alleen wetenschappelijk perfect. Het moet vragen: "Is er een stopcontact in de buurt?"
6. "Wie is de baas over dit hulpmiddel?" (Eigenaarschap)
- Het Probleem: Niemand wist zeker wie verantwoordelijk was voor het gebruik ervan.
- De Clinicians (Artsen/Verpleegkundigen) zeiden: "Wij zijn te druk met het behandelen van patiënten om kamers te meten en gegevens in te voeren."
- De Estates Team (Gebouwbeheerders) zeiden: "Wij kennen de kamerafmetingen, maar we weten niet welke patiënten ziek zijn."
- De Conclusie: Het heeft misschien een gezamenlijke inspanning nodig. Misschien stelt de gebouwbeheerder de kameromvang eenmalig in, en werkt de verpleegkundige dit bij wanneer er een nieuwe patiënt arriveert.
De Belangrijkste Les
De paper concludeert dat hoewel het AISaT-hulpmiddel een briljant idee heeft, het een "software-update" nodig heeft om gebruiksvriendelijk te worden.
De onderzoekers leerden dat:
- De instructies simpeler moeten zijn.
- De visuele elementen duidelijker moeten zijn (minder verwarrende kleuren, realistischere plaatjes).
- De gegevens realistischer moeten zijn (rekening houden met echt meubilair en praktische beperkingen zoals stopcontacten).
- Het proces moet passen bij het drukke leven van het ziekenhuispersoneel, zonder extra werk op hun bord te leggen.
Kortom, het hulpmiddel is als een nieuw recept voor een taart. De ingrediënten (AI en wiskunde) zijn geweldig, maar de instructies (de gebruikersinterface) moeten opnieuw geschreven worden zodat de bakkers (het ziekenhuispersoneel) de taart daadwerkelijk kunnen bakken zonder de keuken in brand te steken.
Verdrinkt u in papers in uw vakgebied?
Ontvang dagelijkse digests van de nieuwste papers die bij uw onderzoekswoorden passen — met technische samenvattingen, in uw taal.