📄 medicine

Measuring What Future Physicians Know About Contraception: Development and Validation of the Clinical Contraceptive Knowledge Test (CCKT) in Vietnam Using Item Response Theory

Este estudio desarrolló y validó el Test de Conocimientos Clínicos sobre Anticonceptivos de 18 ítems (CCKT-18) utilizando la Teoría de Respuesta al Ítem entre estudiantes de medicina vietnamitas, demostrando ser un instrumento robusto, unidimensional y preciso para evaluar el conocimiento sobre anticonceptivos y orientar las mejoras curriculares.

Autores originales: Nguyen Dinh Ky, Nguyen Quynh Anh, Nguyen Ngoc Minh, Pham The Lam, Do Hoa Cham, To Khanh Linh, Nguyen Dang Linh Chi, Pham Hong Anh, Nguyen Thi Hong Hanh, Nguyen Tien Thang, Nguyen Thi Huyen Anh, Nguyen

Publicado 2026-07-08

📖 5 min de lectura🧠 Análisis profundo

CC BY 4.0

Autores originales: Nguyen Dinh Ky, Nguyen Quynh Anh, Nguyen Ngoc Minh, Pham The Lam, Do Hoa Cham, To Khanh Linh, Nguyen Dang Linh Chi, Pham Hong Anh, Nguyen Thi Hong Hanh, Nguyen Tien Thang, Nguyen Thi Huyen Anh, Nguyen Manh Thang

Artículo original bajo licencia CC BY 4.0 (https://creativecommons.org/licenses/by/4.0/). ✨ Esta es una explicación generada por IA del artículo a continuación. No ha sido escrita ni avalada por los autores. Para mayor precisión técnica, consulte el artículo original. Leer descargo de responsabilidad completo

Imagina que estás intentando medir qué tan bien sabe un grupo de futuros médicos sobre anticoncepción. En el pasado, los investigadores usaban una "regla" que estaba un poco rota. Trataba cada pregunta como si fuera igualmente importante y solo te daba un único número (como una puntuación de examen sobre 100) sin decirte qué sabía realmente el estudiante o en qué estaba teniendo dificultades. Era como intentar medir la altura de una cadena montañosa con una sola cinta métrica plana; obtienes un número, pero te pierdes los picos y los valles.

Este artículo describe la creación de un nuevo "escáner láser" de alta tecnología llamado Clinical Contraceptive Knowledge Test (CCKT-18). He aquí cómo los investigadores construyeron esta herramienta y lo que descubrieron, utilizando analogías sencillas.

1. El Problema: La vieja regla no era suficiente

Los investigadores notaron que los estudiantes de medicina en Vietnam (y a nivel mundial) a menudo obtienen buenas calificaciones en la escuela, pero aún carecen del conocimiento práctico para asesorar a los pacientes sobre anticoncepción. Las pruebas antiguas que utilizaban se basaban en la "Teoría Clásica de los Tests".

La Analogía: Piensa en la prueba antigua como una bolsa de canicas donde cada canica es del mismo tamaño. Si las cuentas, sabes cuántas tienes, pero no sabes si algunas son pesadas y otras ligeras. La prueba antigua asumía que cada pregunta era igual de difícil e igualmente importante.
El Objetivo: Querían una herramienta que pudiera medir la dificultad de cada pregunta y qué tan bien cada pregunta diferenciaba a un "sabelotodo" de alguien que solo está adivinando.

2. Construcción de la Nueva Herramienta: Una Construcción de Cuatro Pasos

El equipo no se limitó a escribir preguntas y esperar lo mejor. Construyeron la prueba en cuatro fases cuidadosas, como la construcción de un puente sólido:

Fase 1: Reunir los Ladrillos (Generación de Ítems): Revisaron las directrices de salud global (de la OMS) y teorías educativas para redactar 27 preguntas iniciales. Estas preguntas cubrían desde hechos básicos hasta decisiones clínicas complejas.
Fase 2: El Control de Calidad (Revisión de Expertos): Seis expertos en salud reproductiva y educación revisaron las preguntas. Actuaron como editores estrictos, eliminando una pregunta que no encajaba y puliendo otras dos hasta que quedaron perfectas. Esto dejó 26 preguntas.
Fase 3: La Prueba de Esfuerzo (Prueba Piloto): Probaron la prueba de 26 preguntas en un pequeño grupo de 100 estudiantes. Funcionó bien, pero querían hacerla aún más aguda.
Fase 4: El Escaneo de Alta Tecnología (Validación a Gran Escala): Aplicaron la prueba a más de 700 estudiantes de medicina en cinco universidades de Vietnam. Utilizaron un método matemático sofisticado llamado Teoría de Respuesta al Ítem (IRT).
- La Analogía: Si el método antiguo era una simple báscula, la IRT es como una impresora 3D que analiza la forma de cada pieza de datos. Observa qué tan difícil es cada pregunta y qué tan bien distingue entre estudiantes que realmente conocen el material y aquellos que solo están adivinando.

3. El Resultado: El CCKT-18

Tras analizar los datos, los investigadores se dieron cuenta de que no necesitaban todas las 26 preguntas. Algunas eran redundantes (preguntaban lo mismo de diferentes maneras) o no cumplían bien su función de diferenciar a los estudiantes.

El Recorte: Redujeron la prueba a 18 preguntas.
La Forma: Esperaban que la prueba midiera tres habilidades diferentes (recordar hechos, comprender conceptos y aplicar reglas). Sin embargo, la matemática mostró que, para estos estudiantes, todas estas habilidades estaban tan estrechamente conectadas que actuaban como una única súper-habilidad. Por lo tanto, mantuvieron la prueba como una medida única y unificada.
El Desempeño: La nueva prueba de 18 preguntas (CCKT-18) es altamente precisa. Puede medir con exactitud el conocimiento de un estudiante, ya sea que sea un principiante o un estudiante avanzado. Es como una cámara con un lente de zoom perfecto que se mantiene nítida a cualquier distancia.

4. Lo que la Prueba Reveló

Cuando utilizaron este nuevo "escáner láser" con los estudiantes, encontraron algunas cosas interesantes:

Equidad: La prueba funcionó exactamente igual para estudiantes hombres y mujeres. Nadie se vio favorecido o perjudicado injustamente por las preguntas.
La Curva de Aprendizaje: La prueba mostró que los estudiantes eran generalmente buenos en lo "fácil" (hechos básicos), pero tenían más dificultades con lo "difícil" (aplicar directrices a situaciones complejas de la vida real).
La Brecha "Clínica": La prueba notó que los estudiantes que ya habían comenzado sus rotaciones clínicas (trabajando en hospitales) respondieron mejor ciertas preguntas complicadas que aquellos que no las habían comenzado. Esto sugiere que la prueba es buena para detectar quién ha aprendido realmente las habilidades prácticas frente a quien solo ha memorizado el libro de texto.

5. Por qué esto es Importante (Según el Artículo)

El artículo concluye que el CCKT-18 es una herramienta válida, fiable y robusta.

La Analogía: Antes, los educadores intentaban adivinar cuánta agua había en un cubo mirando el color del agua. Ahora, tienen una taza de medir precisa.
El Beneficio: Debido a que esta prueba es tan precisa, puede decirle a los educadores exactamente dónde están las brechas de conocimiento. En lugar de decir "La clase necesita estudiar más", pueden decir: "La clase es excelente recordando hechos, pero necesitan más práctica sobre cómo aplicar esos hechos a pacientes reales".

Nota Importante: El artículo se centra estrictamente en la creación y validación de esta herramienta de medición. No afirma haber solucionado el problema todavía, ni dice exactamente cómo las escuelas deben cambiar sus clases basándose en estos resultados. Simplemente proporciona la "regla" de alta calidad necesaria para medir el problema con precisión, de modo que el trabajo futuro pueda comenzar.

Resumen Técnico: Desarrollo y Validación del Test de Conocimientos Clínicos sobre Anticoncepción (CCKT)

Planteamiento del Problema
La evaluación precisa de los conocimientos anticonceptivos entre los estudiantes de medicina se ve obstaculizada por las limitaciones de las herramientas de evaluación tradicionales. Los instrumentos existentes, como la Evaluación de Conocimientos sobre Anticoncepción (CKA), se basan en la Teoría Clásica de los Tests (TCT), que agrega puntuaciones brutas bajo el supuesto de una ponderación de ítems igualitaria. Este enfoque no logra proporcionar una medida precisa de la competencia clínica latente y no puede estimar de forma independiente la dificultad y la discriminación de los ítems. Además, existe una falta de instrumentos validados basados en la Teoría de Respuesta al Ítem (TRI) para evaluar los conocimientos anticonceptivos en Vietnam o a nivel internacional, a pesar de la necesidad crítica de cuantificar las brechas educativas para informar la reforma curricular. Dado que Vietnam enfrenta altas tasas de embarazos no deseados y abortos, y que los estudiantes de medicina suelen carecer de conocimientos prácticos sobre anticonceptivos modernos y los Criterios Médicos de Elegibilidad (CME) de la OMS, se requiere una herramienta psicométrica más robusta.

Metodología
Este estudio empleó un diseño transversal y multicéntrico que involucró a estudiantes de medicina de pregrado de cinco universidades en Vietnam. El desarrollo y la validación del Test de Conocimientos Clínicos sobre Anticoncepción (CCKT) siguieron un riguroso marco secuencial de cuatro fases:

Generación de Ítems: Se construyó una escala inicial de 27 ítems basada en las directrices de la OMS y mapeada según la Taxonomía Revisada de Bloom (Recuerdo, Comprensión, Aplicación). Los ítems utilizaron un formato de 'Verdadero/Falso/No lo sé' para minimizar el azar.
Revisión de Expertos: Un panel de seis especialistas evaluó la validez de contenido utilizando el Índice de Validez de Contenido a Nivel de Ítem (I-CVI) y el Índice de Validez de Contenido a Nivel de Escala (S-CVI/Ave). Esta fase resultó en la eliminación de un ítem y la revisión de dos, produciendo un instrumento de 26 ítems.
Prueba Piloto: Un estudio piloto (n=100) utilizó la TCT para cribar la dificultad, la discriminación y la consistencia interna (KR-20 = 0.854) de los ítems.
Validación a Gran Escala: El estudio principal reclutó a 723 estudiantes, de los cuales se retuvieron 636 para el análisis tras excluir respuestas inválidas. Los investigadores aplicaron un modelo de 2 parámetros logísticos (2PL) de la TRI.
- Dimensionalidad: Se utilizaron análisis paralelos y gráficos de sedimentación (scree plots) para determinar el número de factores latentes.
- Selección del Modelo: Se evaluaron siete modelos competidores (que variaban desde especificaciones unidimensionales hasta multidimensionales 2PL y MIRT) utilizando índices de ajuste (CFI, TLI, RMSEA, SRMR). El principio de parsimonia guio la selección del modelo final.
- Reducción de Ítems: Los ítems se eliminaron iterativamente basándose en una baja discriminación ( $a < 0.80$ ), dependencia local ( $|Q3| > 0.20$ ) o desajuste ( $S-X^2, p < 0.05$ ).
- Verificaciones de Validación: Se probó el Funcionamiento Diferencial de los Ítems (DIF) a través del sexo y las etapas de formación. Se realizaron análisis de sensibilidad utilizando un conjunto de datos "estricto-limpio" (n=545) para asegurar la robustez del modelo.

Resultos Clave

Refinamiento del Instrumento: El proceso redujo los 26 ítems iniciales a un instrumento final de 18 ítems (CCKT-18).
Validez Estructural: Aunque los análisis exploratorios sugirieron una potencial multidimensionalidad, la evaluación empírica respaldó una estructura unidimensional. El modelo 2PL unidimensional (Modelo 7) demostró excelentes índices de ajuste (CFI = 0.983, TLI = 0.980, RMSEA = 0.036, SRMR = 0.039), comparables con modelos multidimensionales más complejos. Las correlaciones inter-factores en los modelos multidimensionales fueron extremadamente altas ( $r > 0.80$ ), lo que indica un único rasgo latente dominante.
Parámetros de los Ítems: Los ítems finales exhibieron parámetros de discriminación que oscilaron entre 0.687 y 2.374 y parámetros de dificultad de -3.86 a 1.08.
Fiabilidad y Precisión: La escala demostró una alta precisión de medición con una fiabilidad marginal de 0.844. La Función de Información del Test (TIF) alcanzó su pico en $\theta = 0.462$ , proporcionando una alta precisión (fiabilidad $\ge 0.80$ ) en el rango de capacidad de -0.784 a +1.51.
Análisis de DIF: No se encontró un DIF significativo a través del sexo, confirmando la invarianza de la medición. Sin embargo, cuatro ítems mostraron un DIF significativo a través de las etapas de formación (preclínica vs. clínica), específicamente respecto a las competencias de toma de decisiones clínicas (ej., selección de DIU, gestión de olvido de la píldora), lo que refleja diferencias en la exposición curricular más que un sesgo.
Robustez: Los análisis de sensibilidad confirmaron la estabilidad estructural, con cambios insignificantes en el ajuste del modelo ( $\Delta CFI = 0.003$ ) y en los parámetros de los ít items entre los conjuntos de datos principal y estricto-limpio.

Significancia y Reivindicaciones
Los autores afirman que el CCKT-18 es un instrumento válido, fiable y robusto para evaluar los conocimientos anticonceptivos entre los estudiantes de medicina. Su principal significancia radica en su avance metodológico sobre las herramientas heredadas:

Precisión: Al aprovechar la TRI, el CCKT-18 va más allá de las puntuaciones brutas para proporcionar una evaluación precisa y orientada a competencias de la capacidad latente, permitiendo a los educadores identificar déficits curriculares específicos (ej., brechas en habilidades de aplicación de orden superior) en lugar de solo niveles generales de conocimiento.
Utilidad Educativa: El instrumento respalda un cambio de la evaluación tradicional basada en puntuaciones hacia una evaluación basada en competencias, alineándose con marcos que enfatizan el razonamiento clínico.
Contexto Global: El estudio corrobora hallazgos internacionales de que los estudiantes de medicina a menudo carecen de habilidades de aplicación práctica a pesar de poseer un sólido conocimiento teórico, pero proporciona una plantilla estandarizada y psicométricamente rigurosa para la evaluación transcultural.
Aplicación Futura: Dentro del marco más amplio del Estudio V-COC, el CCKT-18 se posiciona como una herramienta fundamental para encuestas nacionales que caractericen el panorama de los conocimientos anticonceptivos en Vietnam, con el objetivo de impulsar reformas curriculares dirigidas en la educación de la salud reproductiva.

Los autores reconocen las limitaciones, incluyendo el uso de muestreo por conveniencia, el diseño transversal y la concentración de la dificultad de los ítems en el rango moderado, lo que puede limitar la discriminación en los niveles de capacidad más altos. Señalan que el trabajo futuro debería incluir estudios longitudinales y evaluaciones de validez de criterio.