Towards Expert-level Medical AI for Real-time Video Consultations
Dit artikel introduceert AMIE (Video), een op Gemini gebaseerd multi-agent systeem dat expertprestaties bereikt in realtime klinische videoconsultaties door audio-visuele perceptie en klinisch redeneren te integreren, waarbij het in een gerandomiseerde studie met artsen en patiëntacteurs aantoont dat het de menselijke artsen evenaart of overtreft in diagnostische nauwkeurigheid en anamnese, terwijl het een voorkeursinterface biedt voor patiëntcommunicatie.
Oorspronkelijk artikel gelicentieerd onder CC BY 4.0 (http://creativecommons.org/licenses/by/4.0/). Dit is een AI-gegenereerde uitleg van het onderstaande artikel. Het is niet geschreven of goedgekeurd door de auteurs. Raadpleeg het oorspronkelijke artikel voor technische nauwkeurigheid. Lees de volledige disclaimer
Stel je een wereld voor waarin je arts niet alleen iemand is met wie je praat, maar iemand die je ook kan zien. Al een lange tijd is kunstmatige intelligentie (AI) in de geneeskunde als een zeer slimme bibliothecaris die alleen boeken kan lezen. Het is geweldig in het beantwoorden van vragen als je ze uittypt, maar het kan je bleke gezicht niet zien, de piep in je ademhaling niet horen of merken dat je zenuwachtig met je voet tikt. Dit is een groot probleem, want menselijke artsen luisteren niet alleen naar woorden; ze observeren je houding, je gezichtsuitdrukkingen en hoe je beweegt om te achterhalen wat er mis is. Ze gebruiken deze visuele aanwijzingen om vertrouwen op te bouwen en betere vermoedens over je gezondheid te vormen. Maar een computer leren om dit in realtime te doen, terwijl je een videocall hebt, is als proberen een robot te leren jongleren terwijl hij op een eenwieler op een koord balanceert. Het moet snel zijn, het moet alles kunnen zien, en het moet diep nadenken over wat het ziet, allemaal tegelijkertijd.
Dit artikel introduceert een nieuw soort medische AI genaamd AMIE (Articulate Medical Intelligence Explorer), die probeert deze evenwichtsoefening te beheersen. In plaats van alleen je getypte berichten te lezen, kijkt AMIE (Video) naar je en luistert naar je via een videocall, precies zoals een echte arts dat zou doen. De onderzoekers wilden zien of deze AI zich als een deskundige arts kon gedragen tijdens een video-consult in realtime. Ze vroegen de AI niet alleen om te gokken; ze zetten het op de proef in een grote simulatie genaamd een OSCE (Objective Structured Clinical Examination). In deze test speelden professionele acteurs de rol van patiënten met verschillende gezondheidsproblemen, en zij hadden videocalls met ofwel de AI, ofwel met echte, gecertificeerde huisartsen. Het doel was om te zien wie de juiste vragen kon stellen, de juiste fysieke symptomen kon opmerken en het beste plan kon opstellen om de patiënt te helpen.
Dit is wat ze vonden: De AI was verrassend goed. Sterker nog, op veel vlakken presteerde het net zo goed als, of zelfs beter dan, de menselijke artsen. Wanneer onafhankelijke experts de consulten beoordeelden, scoorde de AI hoger dan de menselijke artsen in het nemen van de anamnese, het stellen van een diagnose, het plannen van de behandeling en het begeleiden van de patiënt tijdens fysieke onderzoeken via de video. De AI was bijzonder goed in het gebruik van de videofeed om dingen te "zien", zoals een patiënt vragen om het hoofd te draaien of de armen op te tillen om pijn of stijfheid te controleren. Ook de menselijke acteurs die de rollen van de patiënten speelden, vonden de videoversie van de AI veel prettiger dan een tekstgebaseerde chat; ze vonden de video-interface gemakkelijker in gebruik en voelden zich meer begrepen.
Het verhaal is echter geen sprookje waarin de robot de mens volledig heeft vervangen. Hoewel de AI een superster was in de medische feiten en de fysieke controles, wonnen de menselijke artsen nog steeds de populariteitswedstrijd als het ging om het opbouwen van een warme, vriendelijke connectie. De acteurs voelden dat de menselijke artsen beter waren in het opbouwen van rapport en het geven van het gevoel een partner te zijn in hun zorg. De AI had ook enkele "haperingen" in zijn superkrachten. Het miste soms zeer subtiele zaken, zoals een kleine trilling in een hand of een vluchtige verandering in de stemming van een persoon, en het had moeite met snelle bewegingen. Bovendien was de studie een simulatie met acteurs, niet met echte patiënten in een echte kliniek, dus hoewel de resultaten een enorme mijlpaal zijn, is de AI nog niet klaar om je arts te vervangen. Het is meer als een briljante nieuwe stagiair die geweldig is in het technische werk, maar nog steeds leert hoe hij een warm, empathisch mens kan zijn. Het artikel suggereert dat deze technologie met meer werk in de toekomst artsen overal kan helpen door het zware werk van observatie en diagnose op zich te nemen, zodat zij zich kunnen concentreren op de menselijke connectie.
Verdrinkt u in papers in uw vakgebied?
Ontvang dagelijkse digests van de nieuwste papers die bij uw onderzoekswoorden passen — met technische samenvattingen, in uw taal.