USMLE Step 2 CK Preparation and Performance in the Post-Pass/Fail Step 1 Era: A Multi-Institutional Study

Resumo Técnico: Preparação e Desempenho para o USMLE Step 2 CK na Era Pós-Pass/Fail do Step 1

Definição do Problema
A transição do United States Medical Licensing Examination (USMLE) Step 1 para o sistema de aprovação/reprovação (pass/fail) em janeiro de 2022 deslocou a principal métrica para a seleção de residência para o Step 2 Clinical Knowledge (CK). Essa mudança criou uma incerteza significativa em relação à sequenciação ideal dos exames e às estratégias de preparação. Especificamente, faculdades de medicina e estudantes questionam se a ordem tradicional (Step 1 seguido pelo Step 2 CK) deve ser invertida, com o Step 2 CK sendo realizado mais próximo da conclusão das rotações clínicas (clerkships) e o Step 1 adiado. Além disso, há um debate contínuo sobre a eficácia de recursos comerciais de preparação específicos e a duração ideal dos períodos de estudo dedicado. A literatura prévia concentrou-se amplamente no tempo do Step 1 ou em análises de recursos de estudo de uma única instituição, deixando uma lacuna na compreensão de como essas variáveis interagem com o desempenho no Step 2 CK no ambiente pós-pass/fail.

Metodologia
Os autores conduziram um levantamento transversal multi-institucional envolvendo estudantes de medicina de três faculdades de medicina dos EUA: Vanderbilt University School of Medicine (VUSM), Harvard Medical School (HMS) e University of Virginia School of Medicine (UVASOM). A coleta de dados ocorreu entre fevereiro de 2023 e o outono de 2024.

• Participantes: A coorte analítica consistiu em 241 estudantes que haviam realizado pelo menos um exame USMLE sob o sistema pass/fail do Step 1. Estudantes com resultados numéricos do Step 1 foram excluídos.
• Coleta de Dados: Um questionário administrado via REDCap capturou a ordem dos exames, a duração do estudo dedicado, a utilização de recursos comerciais (ex: UWorld, AMOSS, Anki, First Aid), o número de testes práticos e as pontuações autorrelatadas tanto para o último teste prático do Step 2 quanto para o exame oficial Step 2 CK.
• Análise Estatística: Um modelo de regressão linear multivariável foi ajustado com a pontuação autorrelatada do Step 2 CK como variável dependente. As variáveis independentes incluíram a sequência de exames, a duração do estudo, as taxas de conclusão de bancos de questões e a frequência de testes práticos, além da pontuação do último teste prático do Step 2. A análise utilizou dados de casos completos (n=139) sem imputação.

Principais Resultados
Entre os 241 respondentes, 64,7% realizaram o Step 1 primeiro, enquanto 35,3% realizaram o Step 2 CK primeiro. A média da pontuação autorrelatada no Step 2 CK foi de 261 (DP 13,1).

• Sequenciamento de Exames: No modelo multivariável, realizar o Step 2 CK antes do Step 1 não foi associado a uma diferença significativa no desempenho do Step 2 CK. A diferença ajustada foi de 0,3 pontos (IC 95%, −2,9 a 3,6; p=0,832).
• Duração do Estudo e Recursos: Nem a duração do estudo dedicado, nem a porcentagem de conclusão de bancos de questões comerciais específicos (UWorld, AMBOSS) ou o uso de recursos específicos (Anki, First Aid, etc.) foram independentemente associados às pontuações do Step 2 CK (todos p > 0,05).
• Testes Práticos: A pontuação no último teste prático do Step 2 foi o único fator independentemente associado à pontuação oficial do Step 2 CK. Para cada aumento de um ponto no teste prático final, a pontuação do Step 2 CK aumentou em 0,71 pontos (IC 95%, 0,62 a 0,81; p < 0,001). O modelo explicou 67,1% da variância das pontuações (R² = 0,671).

Principais Contribuições
Este estudo fornece a primeira evidência multi-institucional abordando o sequenciamento de exames na era pós-pass/fail do Step 1. Ele desafia a suposição de que uma ordem fixa de exames ou listas de recursos comerciais específicos são determinantes críticos para o sucesso. Em vez disso, os dados sugerem que a autoavaliação objetiva via testes práticos é o preditor mais robusto de desempenho. Os achados estendem a literatura prévia ao demonstrar que inverter a ordem tradicional dos exames não impacta negativamente os resultados do Step 2 CK, apoiando, assim, abordagens curriculares flexíveis.

Significância e Alegações
Os autores afirmam que estes achados oferecem uma base fundamentada em dados para orientar estudantes e desenhar currículos. Especificamente:

1. Flexibilidade no Sequenciamento: Escolas e orientadores podem permitir que os estudantes sequenciem o Step 1 e o Step 2 CK com base em cronogramas clínicos individuais e bem-estar, em vez de aderir a uma ordem prescrita rígida.
2. Foco na Autoavaliação: A orientação educacional deve priorizar o auxílio aos estudantes para que interpretem seu desempenho em testes práticos como um indicador formativo de prontidão, em vez de endossar produtos comerciais específicos ou prescrever durações de estudo.
3. Integração Curricular: Integrar avaliações práticas periódicas de baixo risco nos currículos clínicos pode fornecer sinais objetivos de prontidão, potencialmente mitigando a ansiedade e alinhando o tempo de exame com os objetivos de treinamento.

Limitações
Os autores reconhecem diversas limitações, incluindo a forte correlação entre a ordem dos exames e a instituição (o que limita a capacidade de separar totalmente esses efeitos), o tamanho de amostra modesto para o modelo de regressão (n=139) e a dependência de dados autorrelatados, o que pode introduzir viés de memória ou de relato. Adicionalmente, a coorte consistiu em estudantes de alto desempenho de instituições que conferem grau de MD, sem relatos de reprovação no Step 1, o que pode limitar a generalização dos resultados para aprendizes de desempenho inferior.