Harnessing Artificial Intelligence (AI) for Surgical Education: Comparing AI- and Surgeon-Generated Feedback in Informed Consent Training
Obwohl das KI-generierte Feedback für das Training zur informierten Einwilligung als qualitativ hochwertiger und umfassender als das von Chirurgen erstellte Feedback bewertet wurde, wies die KI systematisch günstigere Leistungsbewertungen zu, was darauf hindeutet, dass eine hohe Feedbackqualität keine garantierte evaluative Validität bedeutet und die Notwendigkeit menschlicher Aufsicht bei nuancierten chirurgischen Beurteilungen unterstreicht.
Originalarbeit lizenziert unter CC BY 4.0 (https://creativecommons.org/licenses/by/4.0/). Dies ist eine KI-generierte Erklärung des untenstehenden Papers. Sie wurde nicht von den Autoren verfasst oder gebilligt. Für technische Genauigkeit konsultieren Sie das Originalpaper. Vollständigen Haftungsausschluss lesen
In der hochriskanten Welt der Chirurgie ist der Moment, in dem ein Patient einer Operation zustimmt, ebenso entscheidend wie der Eingriff selbst. Diese Zustimmung, bekannt als die informierte Einwilligung (Informed Consent), ist nicht bloß eine Unterschrift auf einem Formular, sondern ein komplexes Gespräch, bei dem ein Arzt die Risiken, Vorteile und Alternativen einer Operation so erklären muss, dass der Patient sie wirklich versteht. Es erfordert ein sensibles Gleichgewicht aus medizinischem Fachwissen, Empathie und der Fähigkeit, die Ängste, kulturellen Überzeugungen und persönlichen Werte eines Patienten zu berücksichtigen. Seit Jahrzehnten basiert die Ausbildung angehender Chirurgen darin, diese Gesprächsführung zu meistern, darauf, dass menschliche Lehrer die Studenten beobachten und kritisieren. Doch in geschäftigen Krankenhäusern kämpfen diese Lehrer oft darum, die Zeit zu finden, um jedem Auszubildenden ein detailliertes, personalisiertes Feedback zu geben. Da die künstliche Intelligenz immer besser darin wird, die menschliche Sprache zu verstehen, stellt sich eine neue Frage: Könnte ein Computerprogramm lernen, diese lebenswichtigen Kommunikationsfähigkeiten ebenso gut oder vielleicht sogar besser als ein menschlicher Chirurg zu lehren?
Forscher der Columbia University unternahmen den Versuch, diese Idee zu testen, indem sie ein hochentwickeltes Computerprogramm in einer simulierten Trainingsübung gegen menschliche Experten antreten ließen. Sie baten sechs Medizinstudierende, ein schwieriges Gespräch zu üben: die Notwendigkeit einer laparoskopischen Appendektomie gegenüber einem virtuellen Patienten zu erklären, der spezifische religiöse Überzeugungen und kulturelle Einschränkungen vertrat. Die Studenten sprachen mit einem Computerprogramm, das als Patient fungierte und ein Szenario durchlief, das von ihnen verlangte, sowohl medizinisch korrekt als auch kulturell sensibel zu agieren. Nachdem jeder Student das Gespräch beendet hatte, erstellte der Computer einen detaillierten Bericht über seine Leistung. Gleichzeitig lasen vier Chirurgen, die während der Simulation nicht anwesend waren, die Transkripte derselben Gespräche und verfassten ihre eigenen Bewertungen unter Verwendung desselben Bewertungsleitfadens. Das Ziel war es zu sehen, ob das Feedback des Computers mit den Ansichten der menschlichen Experten übereinstimmte und um festzustellen, ob der Computer qualitativ hochwertige Ratschläge zur Verbesserung geben konnte.
Die Ergebnisse zeigten einen markanten Kontrast zwischen der Qualität des Feedbacks und der Genauigkeit der Bewertung. Das Computerprogramm erzeugte ein Feedback, das signifikant umfassender, ausgewogener und konstruktiver war als die Notizen, die die menschlichen Chirurgen verfassten. In einer standardisierten Bewertung der Feedbackberichte erzielten die Vorschläge des Computers wesentlich höhere Werte, da sie spezifische Beispiele dafür lieferten, was gut gelaufen war und was verbessert werden musste, zusammen mit klaren, umsetzbaren Schritten zur Verbesserung. Die menschlichen Chirurgen hingegen lieferten im Vergleich dazu oft kürzere, direktere Kommentare, die sich manchmal stark auf Fehler konzentrierten, ohne stets die Stärken des Studenten zu würdigen. Der Computer verwendete konsequent eine unterstützende Sprache und begründete seine Bewertungen mit detaillierter Argumentation, während die menschliche Rückmeldung in Tiefe und Tonfall stärker variierte.
Als die Forscher jedoch die tatsächlichen Punktzahlen betrachteten, die der Computer vergab, im Vergleich zu den Punktzahlen, die die Chirurgen vergaben, zeichnete sich ein anderes Bild ab. Der Computer war konsequent großzügiger und vergab für dieselben Gespräche höhere Leistungspunkte als die menschlichen Experten. In mehreren Schlüsselbereichen, wie etwa der Erklärung der Risiken der Operation, der Erörterung von Alternativen und der Ansprache der Emotionen des Patienten, bewertete der Computer die Studenten deutlich höher als die Chirurgen es taten. Die Lücke war am größten in Bereichen, die tiefes klinisches Urteilsvermögen erforderten, wie etwa die Beurteilung, ob der Patient die Situation wirklich verstanden hatte oder ob die persönlichen Vorlieben des Patienten in den Plan integriert wurden. Während der Computer oft nahezu perfekte Punktzahlen vergab, identifizierten die menschlichen Chirurgen subtile Mängel im Verständnis und in der Nuancierung der Studenten, die die Maschine übersah.
Diese Studie legt nahe, dass künstliche Intelligenz zwar ein exzellentes Werkzeug zur Erstellung von detaillierten, ermutigenden und strukturierten Rückmeldungen ist, aber noch nicht bereit ist, das menschliche Urteilsvermögen bei der Bewertung der wahren Kompetenz eines Chirurgen zu ersetzen. Der Computer zeichnete sich dadurch aus, reichhaltige, pädagogische Kommentare bereitzustellen, die einem Lernenden helfen, zu üben und sich zu verbessern, doch er neigte dazu, die tieferen, subtileren Mängel in einem Gespräch zu übersehen, die ein erfahrener Chirurg bemerken würde. Die Ergebnisse deuten darauf hin, dass der beste Ansatz für die Ausbildung angehender Chirurgen wahrscheinlich eine Partnerschaft ist: die Nutzung künstlicher Intelligenz, um häufige, unmittelbare und hochwertige Übungseinheiten bereitzustellen, während man sich auf menschliche Experten verlässt, um die abschließende, nuancierte Bewertung darüber abzugeben, ob ein Student die schwierige Kunst der informierten Einwilligung tatsächlich gemeistert hat.
Ertrinken Sie in Arbeiten in Ihrem Fachgebiet?
Erhalten Sie tägliche Digests der neuesten Arbeiten passend zu Ihren Forschungsbegriffen — mit technischen Zusammenfassungen, in Ihrer Sprache.