Video Observed Surgical Skills vs Directly Observed Surgical Skills Among Postgraduate Residents of Pediatric Surgery: A Comparative Study

Het leren uitvoeren van delicate chirurgie bij kinderen is een veeleisende reis die jarenlange training vereist onder de waakzame ogen van ervaren mentoren. In dit gespecialiseerde vakgebied is het vermogen om het vaardigheidsniveau van een trainee te beoordelen even cruciaal als de vaardigheid zelf. Traditioneel vindt deze beoordeling plaats in realtime, waarbij een senior chirurg naast de operatietafel staat, elke beweging observeert en onmiddellijke feedback geeft. Deze directe observatie is al lang de gouden standaard om te waarborgen dat toekomstige chirurgen veilig kunnen opereren. Het vertrouwen op de fysieke aanwezigheid van een docent bij elke individuele procedure creëert echter een aanzienlijke logistieke uitdaging, vooral in drukke ziekenhuizen of op plaatsen waar deskundig personeel schaars is. De vraag rijst of het opnemen van deze operaties op video en het laten beoordelen van het beeldmateriaal door experts op een later moment een even nauwkeurig beeld kan geven van de vaardigheden van een chirurg, of dat de live-ervaring iets biedt dat de camera simpelweg niet kan vastleggen.

Onderzoekers van de Afdeling Kinderchirurgie van het King Edward Medical University besloten deze vraag te beantwoorden door twee beoordelingsmethoden naast elkaar te leggen. Zij verzamelden twintig senior assistenten, die zich in hun laatste jaar van opleiding bevonden, en volgden hen terwijl zij negenentwintig verschillende electieve operaties uitvoerden. Voor elke procedure hanteerde het team een tweeledige aanpak voor de evaluatie. Ten eerste stonden twee faculteitsleden in de operatiekamer om de chirurgie direct te observeren, waarbij zij elk detail van de prestatie van de assistent noteerden. Tegelijkertijd werd de gehele operatie op video opgenomen. Later bekeken twee andere faculteitsleden, die niet in de kamer aanwezig waren geweest, deze opnames en beoordeelden de assistenten met behulp van exact dezelfde checklist. Deze checklist, bekend als de OSATS, breekt chirurgische vaardigheid af in zeven specifieke gebieden, zoals hoe goed de chirurg het weefsel respecteert, hoe zij hun assistenten gebruiken en hun algehele efficiëntie.

Toen de onderzoekers de scores vergeleken, kwam er een duidelijk patroon naar voren met betrekking tot de algemene indruk van de chirurgen. De faculteitsleden die de operaties live volgden, gaven hogere gemiddelde scores dan degenen die de video's later bekeken. De live-waarnemers gaven een gemiddelde score van bijna vijfentwintig punten, terwijl de video-beoordelaars gemiddeld net onder de eenentwintig punten scoorden. Deze kloof van ongeveer vier punten suggere leert dat het persoonlijk bijwonen van een procedure positiever aanvoelt of misschien een ruimere beoordeling mogelijk maakt dan het terugkijken van een opname. Het verhaal verandigt echter wanneer men naar de specifieke vaardigheden kijkt. Wanneer de onderzoekers elk van de zeven individuele categorieën van chirurgische bekwaamheid onderzochten, waren de scores van de video-kijkers opmerkelijk dicht bij die van de live-kijkers. De verschillen in deze specifieke gebieden waren zo klein — variërend van een fractie van een punt tot minder dan een derde van een punt — dat ze binnen een marge vielen die als gelijkwaardig wordt beschouwd. Met andere woorden: hoewel de algemene stemming van de beoordeling verschilde, was de gedetailleerde uitsplitsing van vaardigheden consistent tussen beide methoden.

De studie concludeert dat het beoordelen van video-opnames een geldige manier is om de specifieke technische domeinen van de pediatrische chirurgie te beoordelen, wat een praktisch alternatief biedt voor het fysiek aanwezig zijn van een docent bij elke casus. Deze bevinding is bijzonder waardevol voor opleidingsprogramma's met beperkte middelen, aangezien het de noodzaak wegneemt dat een faculteitslid voor elke beoordeling fysiek aanwezig moet zijn, wat het potentieel vergemakkelijkt om meer chirurgen op te leiden. Toch bieden de onderzoekers een noodzakelijke waarschuwing. Omdat de video-beoordelaars consequent lagere algemene scores gaven, moet het gebruik van deze methode voor beslissingen met een hoge inzet, zoals het bepalen of een assistent klaar is om zelfstandig te praktiseren, met zorg gebeuren. De videomethode werkt goed voor het helpen van assistenten bij het verbeteren van hun specifieke technieken, maar totdat verdere tests de betrouwbaarheid ervan voor definitieve pass/fail-beslissingen bevestigen, mag het de traditionele live-beoordeling voor die kritieke momenten niet vervangen.