Evaluating Methods for Assessing LLM-Translated Clinical Discharge Instructions: A Comparison of Automated Metrics, MQM-Based Evaluation, and Clinician Review
Questo studio confronta le metriche automatizzate, la valutazione tramite LLM basata su MQM e la revisione da parte di clinici bilingui per la valutazione delle istruzioni cliniche di dimissione tradotte da LLM, riscontrando che, sebbene tali metodi catturino aspetti complementari della qualità, la loro bassa concordanza sottolinea la continua necessità di una revisione umana mirata per garantire l'accuratezza nel significato clinico e nella terminologia.