Beyond the Checklist: How Different Prebriefing Tools Influence Simulation Outcomes—A Systematic Review and Meta-Analysis

Resumo Técnico: Além do Checklist: Como Diferentes Ferramentas de Prebriefing Influenciam os Resultados da Simulação

Definição do Problema
A educação baseada em simulação (EBS) depende fortemente da fase de prebriefing para alinhar os alunos aos objetivos, reduzir a ansiedade e estabelecer a segurança psicológica. Apesar de sua importância reconhecida, a implementação do prebriefing sofre de variabilidade significativa, ambiguidade conceitual e falta de frameworks padronizados e baseados em evidências. Embora revisões sistemáticas anteriores tenham examinado a presença geral do prebriefing, elas falharam em diferenciar as intervenções pelo tipo ou nível de inovação das ferramentas empregadas. Além disso, a literatura existente tem amplamente negligenciado o impacto específico de tecnologias emergentes (ex: IA, Realidade Virtual) e não sintetizou quantitativamente os efeitos na segurança psicológica como um desfecho distinto. Essa lacuna limita a capacidade dos educadores de otimizar o design do prebriefing na prática contemporânea, particularmente à medida que ferramentas de alta tecnologia tornam-se mais prevalentes.

Metodologia
Este estudo é uma revisão sistemática e metanálise conduzida de acordo com as diretrizes PRISMA 2020.

• Estratégia de Busca: Quatro bases de dados (ScienceDirect, Embase, Medline, Web of Science) foram pesquisadas desde a criação até 6 de agosto de 2025.
• Critérios de Elegibilidade: A revisão incluiu Ensaios Controlados Aleatorizados (ECAs) e estudos quase-experimentais comparando intervenções de prebriefing estruturadas contra prebriefing padrão ou ausente em EBS na área da saúde. Os desfechos foram limitados ao desempenho na simulação, segurança psicológica e experiência de simulação.
• Framework de Classificação: As intervenções foram categorizadas usando o modelo de Substituição, Aumentação, Modificação e Redefinição (SAMR) para estratificar os níveis de inovação das ferramentas:
  • Grupo 1 (Substituição): Esboços estruturados padrão ou checklists sem componentes interativos adicionais.
  • Grupo 2 (Aumentação): Checklists suplementados com elementos interativos (ex: discussão entre pares facilitada ou diálogo com o instrutor).
  • Grupo 3 (Modificação): Ferramentas digitais inovadoras que permitem novas formas de engajamento (ex: Realidade Virtual, chatbots de IA).
• Análise Estatística: Um modelo de efeitos aleatórios foi usado para calcular as Diferenças Médias Padronizadas (DMP) agrupadas com Intervalos de Confiança (IC) de 95%. A heterogeneidade foi avaliada por meio de $I^2$ e $\tau^2$. O viés de publicação foi avaliado via teste de Egger e o método trim-and-fill de Duval e Tweedie. Análises de sensibilidade foram conduzidas usando uma abordagem leave-one-out.

Principais Resultados
Quinze estudos (6 ECAs, 9 quase-experimentais) compreendendo 16 braços de estudo para desempenho, 15 para segurança psicológica e 6 para experiência foram incluídos.

• Desempenho na Simulação: O prebriefing inovador melhorou significativamente o desempenho na simulação globalmente (DMP = 1,04, IC 95% [0,73, 1,36]). Este resultado permaneceu robusto após o ajuste trim-and-fill (DMP = 0,98). A análise de subgrupo mostrou efeitos positivos consistentes em todos os grupos SAMR, embora o Grupo 2 (Aumentação) tenha demonstrado a menor heterogeneidade ($I^2$ = 58,2%).
• Segurança Psicológica: A análise agrupada inicial sugeriu um benefício significativo (DMP = 0,84). No entanto, o teste de Egger indicou viés de publicação significativo ($P < 0,0001$). Após o ajuste trim-and-fill, o efeito foi atenuado para não significância (DMP ajustado = 0,47, IC 95% [-0,49, 1,43]). O Grupo 2 apresentou um efeito estatisticamente confiável na segurança, enquanto o Grupo 3 (Modificação) não demonstrou benefício significativo (DMP = 0,51, IC 95% [-3,53, 4,55]).
• Experiência de Simulação: Não foi encontrada melhoria significativa global (DMP = 0,22, $P$ = 0,32), e esse achado nulo persistiu após a correção de viés.
• Heterogeneidade: Alta heterogeneidade foi observada em todos os domínios ($I^2$ variando de 71,6% a 82,0%). As intervenções do Grupo 3 exibiram heterogeneidade extrema ($I^2$ = 88,0% para desempenho), provavelmente devido a fatores institucionais não controlados, como infraestrutura de hardware e proficiência do facilitador.

Principais Contribuições

1. Estratificação Granular: Esta é a primeira metanálise a classificar sistematicamente as intervenções de prebriefing pelo nível de inovação da ferramenta (framework SAMR), indo além das comparações binárias de "presença vs. ausência" de prebriefing.
2. Desfechos Diferenciados: O estudo fornece evidência quantitativa distinta de que, embora o prebriefing estruturado melhore consistentemente o desempenho objetivo, seu impacto na segurança psicológica é altamente sensível ao viés de publicação e ao tipo de ferramenta.
3. Evidência para "Aumentação": A análise identifica as intervenções do Grupo 2 (folhas de trabalho estruturadas combinadas com interação facilitada) como a estratégia mais confiável, oferecendo o melhor equilíbrio de eficácia, consistência e menor heterogeneidade entre os desfechos.
4. Cautela com Ferramentas de Alta Tecnologia: Os achados desafiam a suposição de que a maior novidade tecnológica (Grupo 3) gera resultados superiores, observando que tais ferramentas introduzem extrema variabilidade e podem falhar em melhorar a segurança psicológica sem o devido suporte (scaffolding).

Significância e Alegações
O artigo alega que a aplicação de diferentes tipos de ferramentas de prebriefing está significativamente associada a variados desfechos de EBS, mas esses efeitos são específicos para cada desfecho. Os autores afirmam que a maior novidade tecnológica não produz uniformemente resultados superiores e pode introduzir demandas cognitivas estranhas que prejudicam a segurança psicológica.

A conclusão central é que abordagens de inovação moderada que incorporam elementos interativos facilitados (Grupo 2) representam a estratégia de design de prebriefing mais confiável e apoiada por evidências. O estudo argumenta que o prebriefing deve priorizar a estabilidade instrucional e a viabilidade contextual sobre a novidade isolada. Embora ferramentas digitais como VR e IA mostrem promessa, a evidência atual é muito heterogênea para apoiar sua preferência rotineira sobre formatos interativos mais simples e guiados por humanos. Os autores enfatizam que o prebriefing deve ser visto como um processo preparatório sensível ao contexto, em vez de um pacote de conteúdo fixo, com elementos principais adaptados aos níveis dos alunos e aos contextos institucionais.