Standardised Patient Training and Calibration in Objective Structured Clinical Examinations: A Scoping Review

Resumo Técnico: Treinamento e Calibração de Pacientes Padronizados em Exames Clínicos Objetivos Estruturados

Definição do Problema
Os Exames Clínicos Objetivos Estruturados (ECOEs) são o método dominante para avaliar a competência clínica na educação de profissionais de saúde. Embora a validade dos ECOEs dependa fortemente da padronização do desenho das estações, dos critérios de pontuação e do comportamento dos examinadores, o papel dos Pacientes Padronizados (PPs) é frequentemente tratado como uma questão logística ou operacional, em vez de um componente central da ciência da avaliação. O artigo argumenta que os PPs não são mecanismos de entrega passivos, mas atores ativos e consequentes que co-constroem o desempenho do candidato por meio de respostas verbais, expressividade emocional e estilo de interação.

Apesar de sua centralidade, existe uma lacuna significativa na literatura sobre como os PPs são treinados e, crucialmente, como são calibrados para garantir a consistência do desempenho em diferentes exames. Os autores postulam que a inconsistência na representação do PP constitui um problema de validade, introduzindo variância irrelevante ao construto que ameaça a justiça, a confiabilidade e a defensibilidade dos resultados de avaliações de alto risco. A produção acadêmica atual tende a privilegiar a pontuação do examinador, negligenciando a qualidade e a consistência da representação do PP, deixando o campo sem estruturas consolidadas para treinamento, calibração ou avaliação de desempenho.

Metodologia
Este estudo é uma revisão de escopo conduzida de acordo com o framework metodológico de Arksey e O'Malley e aderindo às diretrizes de relatório PRISMA-ScR. O objetivo da revisão foi mapear a literatura existente sobre métodos de treinamento e calibração de PP dentro de ECOEs de graduação médica.

• Estratégia de Busca: As buscas foram realizadas em três bases de dados acadêmicas (MEDLINE, EMBASE e ASSIA) e literatura cinzenta (Google Scholar) para publicações entre janeiro de 2014 e dezembro de 2024.
• Critérios de Elegibilidade: Foram incluídos estudos focados no treinamento ou calibração de PP em ECOEs ou avaliações de habilidades clínicas equivalentes dentro de contextos de educação médica, publicados em inglês. Estudos focados exclusivamente no treinamento de examinadores ou que careciam de descrições específicas de métodos de treinamento foram excluídos.
• Processo de Seleção: De um pool inicial de 2.632 registros, 17 estudos atenderam aos critérios de inclusão após triagem de título/resumo e revisão de texto completo por dois revisores independentes.
• Análise: Os dados foram extraídos usando um formulário de sistematização estruturado. Uma análise temática qualitativa, guiada pelo framework de Braun e Clarke, foi empregada para sintetizar os achados. Não foi realizada uma avaliação crítica formal da qualidade do estudo, uma vez que o propósito da revisão era mapear a amplitude da evidência, e não gerar uma síntese ponderada.

Principais Contribuições e Resultados
A revisão identificou 17 estudos, predominantemente dos Estados Unidos, Reino Unido e China. A análise revelou quatro abordagens temáticas primárias para o treinamento de PP, embora exista uma heterogeneidade significativa em sua implementação:

1. Treinamento Pré-ECOE Estruturado: A abordagem mais comum, variando de briefings breves no mesmo dia a workshops de vários dias. Os métodos incluem sessões presenciais, familiarização com o roteiro e ensaio. Embora universalmente implementados, a duração e a intensidade variam amplamente, com alguns estudos observando que preparações breves são percebidas como insuficientes.
2. Observação e Modelagem: Utilização de PPs experientes, cenários gravados ou instrução baseada em vídeo para permitir que novos PPs observem e alinhem seu comportamento aos padrões esperados.
3. Familiarização com o Roteiro do Caso e Ensaio: Envolvendo a distribuição de roteiros com dias ou semanas de antecedência para permitir a preparação do papel.
4. Feedback e Debriefing Reflexivo: Ciclos de feedback pós-ensaio ou pós-exame utilizando questionários de escala Likert ou debriefings estruturados para abordar a consistência do desempenho.

Principais Achados sobre Calibração:
Um achado central da revisão é a quase ausência de processos de calibração explícitos e sistemáticos. Embora o treinamento seja amplamente relatado, mecanismos para garantir a padronização do desempenho entre PPs ou ao longo do tempo raramente são descritos.

• Métricas de Avaliação: As métricas para avaliar o desempenho do PP são inconsistentes e frequentemente dependem de feedback subjetivo em vez de instrumentos robustos e validados.
• Recrutamento: Há variabilidade nos perfis de PP (atores, profissionais de saúde, estudantes, indivíduos com deficiências), mas poucos estudos detalham como as características de recrutamento influenciam a eficácia do treinamento.
• Efetividade: A evidência sobre a eficácia comparativa de diferentes modalidades de treinamento (ex: presencial vs. vídeo) é limitada e reportada de forma inconsistente.

Significância e Alegações
O artigo alega que o estado atual do treinamento e calibração de PP representa uma "fraqueza negligenciada" na arquitetia de avaliação dos ECOEs. Os autores argumentam que o campo falhou em tratar a preparação do PP com a mesma seriedade conceitual conferida ao treinamento de examinadores ou ao blueprinting.

• Reenquadramento da Validade: A revisão propõe reenquadrar o treinamento de PP de um exercício logístico para um componente central da validade da avaliação. Os PPs devem ser conceituados como instrumentos ativos cujo desempenho influencia diretamente a interpretação da pontuação.
• A Lacuna de Calibração: A falta de frameworks de calibração representa uma ameação direta à confiabilidade. Sem mecanismos para garantir o desempenho consistente dos PPs, a variabilidade introduzida pelos PPs pode confundir os resultados da avaliação dos estudantes, prejudicando a comparabilidade dos resultados entre candidatos e administrações de exames.
• Direção Futura: O artigo conclui que o avanço do campo exige uma mudança de paradigma: passar de relatos descritivos de treinamento para abordagens informadas por teoria e testadas empiricamente. Ele clama pelo desenvolvimento de frameworks de treinamento e calibração padronizados e baseados em evidências para garantir uma avaliação justa e confiável.

Os autores mantêm uma postura modesta, reconhecendo que, como uma revisão de escopo, os achados dependem da qualidade da literatura incluída e que a heterogeneidade do relato limita a capacidade de tirar conclusões definitivas sobre a eficácia comparativa. A principal contribuição é a identificação da lacuna de evidência e o chamado para uma abordagem mais rigorosa e sistemática da calibração de PP.