Closing the Confidence Gap: Piloting an In-House Revision Programme to Improve UKMLA Preparedness, Confidence, and Question Comprehension

Resumen Técnico: Cerrando la brecha de confianza en la preparación para el UKMLA

Planteamiento del problema
La introducción del examen de conocimientos aplicados (AKT) del United Kingdom Medical Licensing Assessment (UKMLA) en 2024 estableció un nuevo umbral nacional de alta exigencia para la inscripción provisional en el General Medical Council (GMC). A diferencia de los sistemas anteriores, donde las facultades de medicina gestionaban de forma individual los exámenes finales, el UKMLA requiere que todos los graduados demuestren un nivel estandarizado de conocimientos básicos y razonamiento clínico. Este cambio presenta desafíos significativos para los estudiantes de último año, quienes deben sintetizar años de aprendizaje en un formato de pregunta específico (respuesta única mejor seleccionada) mapeado al Mapa de Contenidos del MLA.

Existe una brecha crítica en el apoyo institucional: la revisión formal liderada por la universidad para el AKT es limitada, lo que obliga a los estudiantes a depender en gran medida de bancos de preguntas comerciales. Esta dependencia plantea preocupaciones con respecto a la equidad, ya que el costo de los recursos comerciales puede crear disparidades entre estudiantes de diferentes entornos socioeconómicos. Además, aunque la evidencia respalda las estrategias de aprendizaje activo como la práctica de recuperación y la repetición espaciada, los estudiantes suelen carecer de la conciencia sobre estos principios o de la guía para aplicarlos de manera efectiva al nuevo formato de examen.

Metodología
Este estudio fue una evaluación de servicio de un solo centro realizada en un importante hospital docente en el noroeste de Inglaterra, que involucró a 156 estudiantes de medicina de último año elegibles. La intervención consistió en un programa de revisión de dos sesiones, liderado por la institución, diseñado para ser de bajos recursos y accesible.

• Sesión 1 (En línea): Una sesión estructurada de 40 minutos impartida a través de Microsoft Teams por un graduado reciente que había aprobado el piloto del UKMLA AKT. El contenido cubrió la estructura del examen, tipos de preguntas, distribución de contenidos y estrategias de revisión.
• Sesión 2 (Presencial): Una sesión interactiva de 75 minutos realizada un mes después, utilizando un formato de ritmo rápido basado en preguntas con preguntas de opción múltiple (MCQ) curadas y muestras de exámenes de práctica oficiales.

Recopilación y análisis de datos:

• Instrumentación: Se administraron cuestionarios pre y post sesión para la Sesión 1, y un cuestionario post sesión para la Sesión 2. Los instrumentos se desarrollaron específicamente para esta evaluación utilizando una escala de Likert de cinco puntos (1 = 'totalmente en desacuerdo' a 5 = 'totalmente de acuerdo').
• Métricas: Para la Sesión 1, se evaluaron cuatro dominios: (1) preparación autoinformada, (2) comprensión de la estructura del examen, (3) confianza en el abordaje de las MCQ tipo AKT y (4) confianza en la idoneidad de los recursos de revisión. La Sesión 2 evaluó el disfrute, la relevancia y la interactividad.
• Análisis estadístico: Las distribuciones pre y post sesión para la Sesión 1 se compararon utilizando la prueba U de Mann-Whitney (para datos ordinales) y la prueba exacta de Fisher (para respuestas dicotomizadas de "de acuerdo/totalmente de acuerdo"). Las respuestas de texto libre se analizaron de forma descriptiva.

Result el clave

• Resultados de la Sesión 1:

  • Tasas de respuesta: Se completaron 27 cuestionarios pre-sesión y 18 post-sesión (tasas de respuesta del 17.3% y 11.5%, respectivamente).
  • Preparación: La proporción de estudiantes que coincidían en que se sentían preparados aumentó del 7.4% al 33.3% (+25.9 puntos porcentuales; p = 0.045).
  • Comprensión de la estructura del examen: El acuerdo aumentó del 29.6% al 83.3% (+53.7 puntos porcentuales; p < 0.001).
  • Confianza en las MCQ: El acuerdo aumentó del 33.3% al 61.1% (+27.8 puntos porcentuales; p = 0.022).
  • Confianza en los recursos: El cambio más significativo ocurrió aquí, con el acuerdo aumentando del 18.5% al 94.4% (+75.9 puntos porcentuales; p < 0.001). La incertidumbre respecto a los recursos cayó del 66.7% al 5.6%.
  • Intención de seguimiento: El 88.9% de los encuestados tenía la intención de asistir a la sesión de seguimiento.

• Resultados de la Sesión 2:

  • Asistencia: 50 estudiantes asistieron (32.0% de la cohorte elegible).
  • Retroalimentación: De 42 encuestados, el 97.6% estuvo de acuerdo o totalmente de acuerdo en que la sesión fue amena, relevante para el AKT e interactiva/divertida.
  • Retroalimentación cualitativa: Los estudiantes valoraron el formato interactivo y las explicaciones inmediatas. Las sugerencias constructivas incluyeron reemplazar el levantar la mano por herramientas de votación digital para asegurar una participación inclusiva y reducir el ritmo para acomodar a estudiantes con diferencias de aprendizaje (por ejemplo, dislexia).

Contribuciones clave

1. Modelo de intervención institucional: El artículo demuestra que una serie de revisión breve, de bajos recursos y liderada por la institución puede producir mejoras medibles en los resultados autoinformados de los estudiantes.
2. Confianza en los recursos: El estudio destaca que la incertidumbre respecto a los recursos de revisión es una fuente importante de ansiedad para los estudiantes. Un programa estructurado que señale recursos basados en evidencia puede abordar este estresor desproporcionadamente grande.
3. Conocimiento del formato de la prueba: Los resultados sugieren que la comprensión de la estructura del examen es un dominio distinto y maleable que puede mejorarse significamente mediante una sola sesión educativa, separada de la maestría del conocimiento clínico.
4. Implicaciones de equidad: Al proporcionar orientación gratuita y estructurada, las instituciones pueden potencialmente reducir la dependencia de los costosos bancos de preguntas comerciales, abordando así posibles barreras para el desempeño equitativo.

Significancia y afirmaciones
Los autores posicionan este trabajo como una evaluación piloto en lugar de una prueba definitiva de eficacia. El artículo afirma que:

• Una intervención estructurada, liderada por un graduado reciente, puede mejorar la preparación autoinformada, la comprensión de la estructura del examen y la confianza en los recursos.
• Los hallazgos justifican una evaluación multicéntrica para determinar si estos cambios autoinformados se traducen en mejoras reales de desempeño (Nivel 4 de la jerarquía de Kirkpatrick).
• El modelo ofrece un mecanismo de apoyo de pares cercanos (near-peer) sostenible que podría integrarse en el currículo de último año para abordar la brecha de información dejada por la transición al UKMLA.

Los autores señalan explícitamente las limitaciones, incluyendo los pequeños tamaños de muestra, las bajas tasas de respuesta (riesgo de sesgo de autoselección), la imposibilidad de rastrear cambios a nivel individual debido a la recopilación de datos anónimos y la dependencia de la confianza autoinformada en lugar de las puntuaciones reales del examen. En consecuencia, el artículo concluye de manera modesta, sugiriendo que el modelo es prometedor pero requiere mayor validación en estudios más grandes que vinculen la exposición a la intervención con el desempeño real en el UKMLA AKT.