Usability of UgandaEMR+ among health workers in Uganda: adaptation and evaluation of the System Usability Scale in a low- resource EMR environment

Technische Samenvatting: Bruikbaarheid van UgandaEMR+ in omgevingen met beperkte middelen

Probleemstelling
Elektronische medische dossiers (EMR-systemen) zijn cruciaal voor het versterken van de gezondheidszorg in landen met lage en middeninkomens (LMIC's), maar de adoptie ervan in sub-Sahara Afrika wordt vaak belemmerd door implementatieproblemen zoals onbetrouwbare infrastructuur en variërende digitale geletterdheid. Hoewel Oeganda UgandaEMR+ (gebouwd op het OpenMRS 3-framework) heeft uitgerold naar meer dan 1.000 faciliteiten, blijven er aanzienlijke tekortkomingen bestaan in het routinematig gebruik, waarbij veel zorgverleners vertrouwen op parallelle papiergestuurde systemen. Een primaire, onderbelichte barrière voor adoptie is bruikbaarheid—gedefinieerd als de effectiviteit, efficiëntie en tevredenheid waarmee specifieke gebruikers hun doelen bereiken. Eerdere literatuuronderzoeken in de regio vertrouwden op secundaire bewijslast, en geen enkele studie heeft een gevalideerd instrument toegepast om de bruikbaarheid van UgandaEMR+ direct te beoordelen vanuit het perspectief van vooraanstaande zorgverleners in routineuze klinische settings.

Methodologie
De studie maakte gebruik van een convergent mixed-methods design dat tussen juli en september getrokken werd in vier doelgericht geselecteerde faciliteiten in Oeganda: twee regionale verwijzingsziekenhuizen (Lira en Hoima) en twee Gezondheidscentra IV (Kyangwali en Kawaala).

• Kwantitatieve tak: Een dwarsdoorsnede-enquête werd afgenomen bij 302 zorgverleners (gestratificeerd per beroepscategorie: clinici, verpleegkundigen, lab-/apothekerspersoneel en datafunctionarissen). Bruikbaarheid werd gemeten met behulp van een 10-items Likert-schaal die is aangepast van de System Usability Scale (SUS). De items werden gecontextualiseerd voor UgandaEMR+, waarbij vier items achterwaarts werden gecodeerd om negatieve dimensies te vangen (complexiteit, inconsistentie, omslachtigheid en hoge leerbehoefte). Samengestelde scores werden gecategoriseerd als Laag (<3,0), Matig (3,0–3,9) of Hoog (≥4,0). Interne consistentie werd beoordeeld via Cronbach's alfa.
• Kwalitatieve tak: Semi-gestructureerde Key Informant Interviews (KII's) werden uitgevoerd met 10 deelnemers, waaronder facilitaire leidinggevenden, clinici, datafunctionarissen en nationale implementatoren. De interviews richtten zich op dagelijkse EMR-ervaringen, workflow-uitdagingen en percepties van systeemgebruikbaarheid.
• Analyse: Kwantitatieve gegevens werden geanalyseerd met behulp van descriptieve statistiek en chi-kwadraattoetsen voor associaties. Kwalitatieve gegevens werden getranscribeerd en thematisch geanalyseerd. De bevindingen werden getrianguleerd met behulp van een joint-display matrix om kwantitatieve patronen te verklaren.

Belangrijkste Bijdragen

1. Eerste Gevalideerde Beoordeling: Dit is de eerste studie die de bruikbaarheid van UgandaEMR+ systematisch evalueert met behulp van een aangepast, gevalideerd instrument (SUS) dat direct wordt toegepast op vooraanstaande zorgverleners.
2. Instrumentaanpassing: De studie slaagde erin de SUS aan te passen voor een EMR-context met beperkte middelen, waarbij een goede interne consistentie werd aangetoond (Cronbach's α = 0,82) en een praktisch instrument werd opgezet voor toekomstige monitoring van bruikbaarheid in soortgelijke settings.
3. Operationele versus Technische Frictie: Het onderzoek maakt onderscheid tussen fouten in de software-interface en operationele omgevingsbarrières, wat een granulair onderzoek op itemniveau mogelijk maakt naar waar de lasten van de bruikbaarheid zich concentreren.

Resultaten

• Algemene Bruikbaarheid: De aangepaste schaal leverde een algemene gemiddelde bruikbaarheidsscore op van 3,44 (SD = 0,83), wat wijst op een matige waargenomen bruikbaarheid.
  • Verdeling: 28,1% van de respondenten viel in de groep "Lage" bruikbaarheid, 43,7% in "Matige" en 28,1% in "Hoge" bruikbaarheid.
  • Adoptieparadox: Ondanks matige bruikbaarheidsscores werd 56,3% van de respondenten gecategoriseerd als "lage EMR-gebruikers" (gebruiken het systeem zelden), wat suggereert dat matige bruikbaarheid niet automatisch vertaalt naar routinematige adoptie.
• Patronen op Itemniveau: De analyse toonde aan dat de lasten van de bruikbaarheid geconcentreerd zijn op operationele frictie in plaats van kernfunctionaliteit. De vier achterwaarts gecodeerde items kregen de hoogste instemmingspercentages:
  • Omslachtig (US8): 52,6% stemde in.
  • Inconsistentie (US6): 49,7% stemde in.
  • Hoge Leerbehoefte (US10): 48,3% stemde in.
  • Complexiteit (US2): 44,4% stemde in.
• Voorspellers van Gebruik: Jaren EMR-ervaring was de sterkste voorspeller van hoog gebruik (p < 0,001); opvallend genoeg was formele EMR-training niet significant geassocieerd met hoog gebruik (p = 0,465).
• Kwalitatieve Context: Interviews schreven de kwantitatieve bevindingen toe aan drie hoofdthema's:
  1. Fragiele Infrastructuur: Onbetrouwbare stroomvoorziening en internet dwingen personeel tot hybride papier-digitale workflows, wat leidt tot de perceptie dat het systeem "omslachtig" is.
  2. Zwakke IT-ondersteuning: Onopgeloste technische problemen en het ontbreken van escalatiepaden leiden tot percepties van "inconsistentie".
  3. Mismatch in Workflow: De hoge "leerbehoefte" komt voort uit een mismatch tussen de documentatielogica van de EMR en bestaande klinische routines, in plaats van intrinsieke interfacecomplexiteit.

Betekenis en Claims
Het artikel claimt dat de matige bruikbaarheid van UgandaEMR+ niet het gevolg is van een "defecte" software-interface, maar wordt gedreven door de implementatie-ecologie. De auteurs betogen dat het verbeteren van de EMR-adoptie in omgevingen met beperkte middelen vereist dat de focus verschuift van enkel software-redesign naar het adresseren van omgevingsfactoren:

• Infrastructuur: Elektriciteit en connectiviteit moeten worden behandeld als klinische veiligheidsinfrastructuur.
• Ondersteuningssystemen: Responsieve IT-ondersteuning met duidelijke escalatiepaden is noodzakelijk om het vertrouwen van de gebruiker te herstellen.
• Workflow-afstemming: Het herontwerpen van workflows om dubbele papier-digitale documentatie te elimineren is essentieel om de waargenomen omslachtigheid te verminderen.
• Trainingsstrategie: Capaciteitsopbouw moet verschuiven van eenmalige trainingsgelegenheden naar continue, in de workflow ingebedde leerprocessen en mentorschap.

De studie concludeert dat de aangepaste SUS een levensvatbaar, goedkoop instrument is voor voortdurende monitoring van bruikbaarheid, in staat om opkomende frictiepunten te signaleren voordat deze de adoptie onderdrukken. De bevindingen suggereren dat zonder de operationele omgeving aan te pakken, de perceptie van bruikbaarheid — en daarmee de routinematige adoptie — suboptimaal zal blijven.