Examining Tools for Assessing Technical Skills in Robotic Surgery: A Validity- Focused Systematic Review
Deze systematische review evalueert de validiteit van huidige beoordelingsinstrumenten voor robotchirurgie, waarbij wordt onthuld dat hoewel bestaande methoden zoals GEARS en OSATS over sterke bewijzen voor interne structuur beschikken, er een aanzienlijke kloof is in gevalideerde instrumenten die de meeste ACS/APDS-vaardigheidsmodules dekken en een gebrek aan bewijs met betrekking tot de consequenties van beoordeling.
Oorspronkelijk artikel gelicentieerd onder CC BY 4.0 (https://creativecommons.org/licenses/by/4.0/). Dit is een AI-gegenereerde uitleg van het onderstaande artikel. Het is niet geschreven of goedgekeurd door de auteurs. Raadpleeg het oorspronkelijke artikel voor technische nauwkeurigheid. Lees de volledige disclaimer
Stel je voor dat je iemand leert autorijden. Vroeger zei je misschien gewoon: "Je bent er klaar voor als ik dat zeg," gebaseerd op hoeveel mijlen ze met jou hebben gereden. Maar tegenwoordig gebruiken we bij rijtests specifieke checklists: "Hebben ze in de spiegels gekeken? Hebben ze gecommuniceerd? Zijn ze gestopt voor het rode licht?" Dit zorgt ervoor dat de bestuurder ook echt veilig is, en niet alleen maar geluk heeft gehad.
Dit artikel gaat over het doen van precies hetzelfde voor de robotchirurgie, maar het stelt vast dat we nog steeds veel van die checklists missen.
Hier is de uitsplitsing van wat de onderzoekers hebben gevonden, met eenvoudige analogieën:
1. Het Probleem: We hebben een nieuwe auto, maar geen handleiding voor de rijles
Robotchirurgie is als een hoogtechnologische, futuristische auto. Het is anders dan gewone chirurgie (laparoscopie) omdat de chirurg aan een console zit, instrumenten met een polsfunctie gebruikt en niet hetzelfde "gevoel" (haptische feedback) heeft als wanneer ze hun handen direct gebruiken.
Omdat deze technologie zo nieuw en anders is, vroegen de onderzoekers zich af: "Hoe weten we of een chirurg daadwerkelijk goed is in het gebruiken van de robot?"
Ze bekeken het standaard "rijleerprogramma" dat voor alle chirurgen wordt gebruikt (gemaakt door de American College of Surgeons). Dit curriculum bevat 45 specifieke vaardigheden die een chirurg moet leren, variërend van basisdingen zoals het leggen van knopen tot complexe procedures zoals het verwijderen van een galblaas.
2. De Zoektocht: Op zoek naar de "examenvragen"
De onderzoekers gingen op een zoektocht (een systematisch overzicht) om bestaande "tests" of "scorekaarten" te vinden die deze specifieief robotische vaardigheden meten. Ze wilden zien of er een geldige manier was om een chirurg te beoordelen op al die 45 vaardigheden.
De Resultaat: Het was een beetje een ramp.
- Van de 45 vaardigheden die chirurgen moeten leren, vonden ze slechts geldige tests voor 13 van hen.
- Dat betekent dat er voor 32 vaardigheden (ongeveer 71%) helemaal geen test is. Het is alsof je een rijschool hebt waar je moet leren hoe je een parallelle parkeeractie uitvoert, maar er is geen test om te zien of je het daadwerkelijk kunt. Je moet er maar op hopen dat je er goed in bent.
3. De Instrumenten: Oude kaarten gebruiken voor nieuw terrein
Voor de 13 vaardigheden die wel tests hadden, merkten de onderzoekers iets anders op. Meestal werden er geen speciale "robotische" tests gebruikt. In plaats daarvan namen ze tests die ontworpen waren voor gewone chirurgie of laparoscopie en probeerden ze die simpelweg op robots toe te passen.
- De Belangrijkste Instrumenten: De meest voorkomende instrumenten die werden gevonden, waren GEARS (Global Evaluative Assessment of Robotic Skills) en OSATS (Objective Structured Assessment of Technical Skills).
- De Analogie: Het is alsoal een Formule 1-coureur testen met een test die ontworpen is voor een standaard personenauto. Het kan misschien enkele basisfouten in het rijden oppikken, maar het mist misschien de specifieke hogesnelheidvaardigheden die nodig zijn voor een F1-wagen.
4. De "Rapportcijfer"-controle: Werken de tests eigenlijk wel?
De onderzoekers telden niet alleen de tests; ze controleerden ook de "rapportcijfers" (geldigheidsbewijs) om te zien of de scores die deze instrumenten geven daadwerkelijk betrouwbaar zijn. Ze keken naar vijf verschillende soorten bewijs:
- Inhoud: Dekt de test de juiste zaken? (Grotendeels oké).
- Responsproces: Begrijpen de beoordelaars waar ze naar kijken? (Oké).
- Interne Structuur: Passen de verschillende onderdelen van de test logisch bij elkaar? (Sterk).
- Relaties: Komen de scores overeen met de ervaring van de chirurg? (Sterk).
- Gevolgen: Zorgt het gebruik van deze test daadwerkelijk voor veiligere patiënten of helpt het chirurgen beter te leren?
De Grote Kloof:
De onderzoekers ontdekten dat hoewel de tests goed waren in het meten van vaardigheden (zoals "hebben ze de knoop gelegd?"), ze erg slecht waren in het bewijzen van de Gevolgen.
- Analogie: We hebben een test die zegt: "Deze student is geslaagd voor het rijexamen." Maar we hebben bijna geen bewijs dat het slagen voor deze test er daadwerkelijk voor zorgt dat ze niet met hun auto te pas komen in het echte leven. De link tussen de testscore en echte veiligheid in de praktijk is het zwakste deel van het bewijs.
5. De Conclusie: We moeten meer tests bouwen
Het artikel concludeert dat hoewel we begonnen zijn met het bouwen van de "rijschool" voor robotchirurgie, we het grootste deel van het curriculum missen.
- Wat we hebben: Een paar tests voor basisvaardigheden (zoals het leggen van knopen of eenvoudige weefselverwerking) en enkele tests voor specifieke procedures (zoals het verwijderen van een colon).
- Wat we missen: Tests voor de meerderheid van de complexe procedures en een gebrek aan bewijs dat deze tests daadwerkelijk de patiëntveiligheid voorspellen.
De Kern van het Verhaal:
De auteurs zeggen dat we moeten stoppen met gokken. We moeten specifieke, hoogwaardige tests bouwen voor de vele robotische vaardigheden waar momenteel geen beoordeling voor bestaat, en we moeten bewijzen dat deze tests chirurgen daadwerkelijk veiliger en beter maken. Tot die tijd vliegen we blind op een enorm deel van de robotische chirurgische training.
Verdrinkt u in papers in uw vakgebied?
Ontvang dagelijkse digests van de nieuwste papers die bij uw onderzoekswoorden passen — met technische samenvattingen, in uw taal.