Closing the Confidence Gap: Piloting an In-House Revision Programme to Improve UKMLA Preparedness, Confidence, and Question Comprehension

Resumo Técnico: Fechando a Lacuna de Confiança na Preparação para o UKMLA

Definição do Problema
A introdução do United Kingdom Medical Licensing Assessment (UKMLA) Applied Knowledge Test (AKT) em 2024 estabeleceu um novo limiar nacional de alto risco para o registro provisório no General Medical Council (GMC). Diferente dos sistemas anteriores, nos quais as escolas de medicina individuais gerenciavam os exames finais, o UKMLA exige que todos os graduados demonstrem um nível padronizado de conhecimento central e raciocínio clínico. Esta mudança apresenta desafios significativos para os estudantes do último ano, que devem sintetizar anos de aprendizagem em um formato de questão específico (resposta única mais adequada) mapeado para o Mapa de Conteúdo do MLA.

Existe uma lacuna crítica no suporte institucional: a revisão formal liderada pela universidade para o AKT é limitada, forçando os alunos a dependerem fortemente de bancos de questões comerciais. Essa dependência levanta preocupações relativas à equidade, pois o custo dos recursos comerciais pode criar disparidades entre alunos de diferentes contextos socioeconômicos. Além disso, embora evidências apoiem estratégias de aprendizagem ativa, como a prática de recuperação (retrieval practice) e a repetição espaçada, os alunos frequentemente carecem de consciência sobre esses princípios ou de orientação para aplicá-los de forma eficaz ao novo formato de exame.

Metodologia
Este estudo foi uma avaliação de serviço de centro único, realizada em um grande hospital de ensino no Noroeste da Inglaterra, envolvendo 156 estudantes de medicina do último ano elegíveis. A intervenção consistiu em um programa de revisão liderado pela instituição, composto por duas sessões, projetado para ser de baixo custo e acessível.

• Sessão 1 (Online): Uma sessão estruturada de 40 minutos, entregue via Microsoft Teams por um recém-graduado que havia sido aprovado no teste piloto do UKMLA AKT. O conteúdo abrangeu a estrutura do exame, tipos de questões, distribuição de conteúdo e estratégias de revisão.
• Sessão 2 (Presencial): Uma sessão interativa de 75 minutos realizada um mês depois, utilizando um formato de ritmo acelerado baseado em questões, com questões de múltipla escolha (MCQs) curadas no estilo AKT e amostras de provas oficiais de prática.

Coleta e Análise de Dados:

• Instrumentação: Questionários pré e pós-sessão foram administrados para a Sessão 1, e um questionário pós-sessão para a Sessão 2. Os instrumentos foram desenvolvidos especificamente para esta avaliação utilizando uma escala Likert de cinco pontos (1 = 'discordo totalmente' a 5 = 'concordo totalmente').
• Métricas: Para a Sessão 1, quatro domínios foram avaliados: (1) prontidão autorrelatada, (2) compreensão da estrutura do exame, (3) confiança na abordagem de MCQs no estilo AKT e (4) confiança na adequação dos recursos de revisão. A Sessão 2 avaliou o prazer, a relevância e a interatividade.
• Análise Estatística: As distribuições pré e pós-sessão para a Sessão 1 foram comparadas usando o teste de Mann-Whitney U (para dados ordinais) e o teste exato de Fisher (para respostas dicotomizadas de "concordo/concordo totalmente"). As respostas de texto livre foram analisadas descritivamente.

Resultados Principais

• Resultados da Sessão 1:

  • Taxas de Resposta: 27 questionários pré-sessão e 18 pós-sessão foram completados (taxas de resposta de 17,3% e 11,5%, respectivamente).
  • Prontidão: A proporção de alunos que concordaram que se sentiam preparados aumentou de 7,4% para 33,3% (+25,9 pontos percentuais; p = 0,045).
  • Compreensão da Estrutura do Exame: O acordo subiu de 29,6% para 83,3% (+53,7 pontos percentuais; p < 0,001).
  • Confiança em MCQ: O acordo aumentou de 33,3% para 61,1% (+27,8 pontos percentuais; p = 0,022).
  • Confiança nos Recursos: A mudança mais significativa ocorreu aqui, com o acordo subindo de 18,5% para 94,4% (+75,9 pontos percentuais; p < 0,001). A incerteza em relação aos recursos caiu de 66,7% para 5,6%.
  • Intenção de Acompanhamento: 88,9% dos respondentes pretendiam comparecer à sessão de acompanhamento.

• Resultos da Sessão 2:

  • Presença: 50 alunos compareceram (32,0% do coorte elegível).
  • Feedback: Dos 42 respondentes, 97,6% concordaram ou concordaram fortemente que a sessão foi prazerosa, relevante para o AKT e divertida/interativa.
  • Feedback Qualitativo: Os alunos valorizaram o formato interativo e as explicações imediatas. Sugestões construtivas incluíram a substituição do levantamento de mãos por ferramentas de votação digital para garantir a participação inclusiva e a redução do ritmo para acomodar alunos com diferenças de aprendizagem (ex: dislexia).

Principais Contribuições

1. Modelo de Intervenção Institucional: O artigo demonstra que uma série de revisão breve, de baixo custo e liderada pela instituição pode produzir melhorias mensuráveis nos resultados autorrelatados pelos estudantes.
2. Confiança nos Recursos: O estudo destaca que a incerteza em relação aos recursos de revisão é uma grande fonte de ansiedade nos alunos. Um programa estruturado que direcione recursos baseados em evidências pode abordar esse estressor desproporcionalmente grande.
3. Conhecimento do Formato do Teste: Os resultados sugerem que a compreensão da estrutura do exame é um domínio distinto e maleável que pode ser significativamente melhorado através de uma única sessão educacional, separada do domínio do conhecimento clínico.
4. Implicações de Equidade: Ao fornecer orientação gratuita e estruturada, as instituições podem potencialmente reduzir a dependência de bancos de questões comerciais caros, abordando assim possíveis barreiras ao desempenho equitativo.

Significância e Alegações
Os autores posicionam este trabalho como uma avaliação piloto, e não como uma prova definitiva de eficácia. O artigo alega que:

• Uma intervenção estruturada, liderada por um recém-graduado, pode melhorar a prontidão autorrelatada, a compreensão da estrutura do exame e a confiança nos recursos dos estudantes.
• Os achados justificam uma avaliação multicêntrica para determinar se essas mudanças autorrelatadas se traduzem em melhorias reais de desempenho (Nível 4 da hierarquia de Kirkpatrick).
• O modelo oferece um mecanismo de suporte sustentável, baseado em pares próximos (near-peer), que poderia ser incorporado ao currículo do último ano para preencher a lacuna informacional deixada pela transição para o UKMLA.

Os autores explicitamente observam limitações, incluindo amostras pequenas, baixas taxas de resposta (risco de viés de autoseleção), a impossibilidade de rastrear mudanças no nível individual devido à coleta de dados anônimos e a dependência da confiança autorrelatada em vez de notas reais de exame. Consequentemente, o artigo conclui de forma modesta, sugerindo que o modelo é promissor, mas requer validação adicional em estudos maiores que liguem a exposição à intervenção ao desempenho real no UKMLA AKT.