The challenging task of investigating student thinking: an example from quantum computing

Este artículo narra el complejo proceso de desarrollo de la pregunta 15 del Cuestionario Conceptual de Computación Cuántica, ilustrando tanto las sutilezas del razonamiento estudiantil sobre el "retroceso de fase" como las advertencias inherentes a la evaluación de dicho pensamiento mediante pruebas de opción múltiple.

Lo esencial

Imagina que eres un detective que intenta descubrir qué está pensando un estudiante mientras resuelve un problema de física cuántica. Pero hay un problema: no puedes leer su mente. Solo puedes ver la respuesta final que escribe en un examen.

Este artículo cuenta la historia real de cómo un equipo de investigadores intentó crear una pregunta de examen para medir si los estudiantes entendían un concepto difícil llamado "retroceso de fase" (phase kickback) en la computación cuántica. Fue como intentar adivinar por qué un gato se asusta de un pepino, pero el pepino era una pregunta de opción múltiple.

Aquí tienes la historia, explicada de forma sencilla:

1. El Objetivo: Atrapar un "Fantasma"

Los investigadores querían crear un examen (llamado QCCS) para ver qué tan bien entendían los estudiantes la computación cuántica. Querían una pregunta específica sobre un truco cuántico llamado "retroceso de fase".

La analogía: Imagina que tienes dos monedas mágicas conectadas por un hilo invisible (entrelazamiento). Si giras una moneda, la otra gira también, pero de una manera que no ocurre en el mundo real. El "retroceso de fase" es como si, al tocar la moneda de abajo, la moneda de arriba cambiara de color sin que nadie la tocara directamente. Es un concepto muy confuso para los estudiantes.

2. El Problema: La Pregunta "Fantasma"

Los investigadores intentaron escribir esta pregunta una y otra vez. Fue un desastre inicial. La pregunta que parecía perfecta en la pizarra (cuando los investigadores la discutían entre ellos) se convertía en un caos cuando los estudiantes reales la veían.

Lo que pasó en cada intento:

• Versión 1.0 (El borrador confuso): La pregunta era demasiado vaga. Usaban palabras como "efecto" o "puede", que los estudiantes interpretaban de mil maneras diferentes. Algunos pensaban que el examen les estaba jugando una broma.

  • Analogía: Era como preguntar "¿Qué pasa con el coche?" sin decir si el coche está en el garaje, en la carretera o si tiene gasolina.

• Versión 2.0 (La trampa del adivino): Arreglaron la redacción, pero descubrieron algo extraño: los estudiantes que no sabían la respuesta adivinaban la correcta por pura suerte o por estrategias de examen (como eliminar opciones obvias), mientras que los estudiantes que sabían un poco pero no todo, elegían la respuesta incorrecta con más frecuencia.

  • Analogía: Era como un juego de "Encuentra la aguja en el pajar". Los que no sabían adivinaban y acertaban por casualidad, pero los que sabían un poco se confundían con las trampas del juego.

• Versión 2.1 (El muro de la frustración): Intentaron hacer la pregunta más difícil dividiéndola en dos partes. El resultado fue catastrófico: ¡solo el 3% de los estudiantes acertó!

  • El secreto: Los investigadores se dieron cuenta de que los estudiantes no estaban fallando por falta de conocimiento de física, sino por estrategias de examen. En la opción "e", que decía "ninguna de las anteriores", los estudiantes pensaban: "Nadie pondría una respuesta tan negativa, debe ser una trampa". Preferían adivinar una respuesta positiva aunque supieran que era falsa, solo por miedo a elegir "ninguna".

• Versión 2.2 (La solución final): Finalmente, cambiaron la redacción para que la opción "ninguna de las anteriores" fuera más clara y específica: "El estado NO se puede escribir como una sola moneda".

  • El resultado: ¡Funcionó! La pregunta ahora distinguía claramente entre quienes entendían el concepto y quienes no. Los estudiantes que sabían la física elegían la respuesta correcta, y los que no, elegían las incorrectas de forma lógica (basada en sus errores de concepto).

3. ¿Qué aprendimos de esta historia?

Este artículo no es solo sobre computación cuántica; es una lección sobre cómo enseñar y evaluar cualquier cosa difícil.

• Lo que parece obvio no lo es: Los expertos creen que sus preguntas son claras, pero los estudiantes las leen con "gafas" diferentes. Una palabra pequeña puede cambiar todo el significado.
• El examen es un juego: Los estudiantes a veces juegan al "juego del examen" en lugar de pensar en la física. Si la pregunta parece una trampa, la evitan, incluso si la respuesta correcta es la que buscan.
• La importancia de probar: No puedes inventar un examen en una oficina y esperar que funcione. Tienes que probarlo con estudiantes reales, ver dónde fallan, y volver a empezar. Fue un proceso de "prueba, error, y vuelve a probar" durante varios años.

En resumen

La historia de la "Pregunta 15" nos enseña que entender cómo piensa un estudiante es como intentar descifrar un código secreto. A veces, el problema no es que el estudiante sea tonto, sino que la pregunta está mal construida o que el estudiante está pensando en cómo ganar el juego del examen en lugar de resolver el problema.

Los investigadores tuvieron que ser como detectives de errores, reescribiendo la misma pregunta cuatro veces hasta que finalmente lograron ver la mente del estudiante tal como era, sin el ruido de las trampas del examen.

Resumen técnico

Resumen Técnico: "La tarea desafiante de investigar el pensamiento estudiantil: un ejemplo de la computación cuántica"

Autores: Josephine C. Meyer, Steven J. Pollock, Bethany R. Wilcox y Gina Passante.
Fuente: arXiv:2602.22388v1 (Publicado en febrero de 2026).

1. El Problema

La Investigación en Educación Física (PER) enfrenta el desafío fundamental de comprender los matices del razonamiento estudiantil en física. A diferencia de la física experimental tradicional, la PER rara vez puede realizar experimentos controlados directos sobre el pensamiento. Las herramientas existentes (entrevistas, análisis de tareas escritas) tienen limitaciones de escalabilidad o presentan narrativas "limpiadas" que ocultan el proceso de pensamiento real.

El problema central abordado en este artículo es la dificultad extrema de diseñar ítems de opción múltiple que midan con precisión conceptos cuánticos complejos, específicamente el "retroceso de fase" (phase kickback) en computación cuántica. El artículo utiliza el desarrollo del Ítem 15 de la Encuesta Conceptual de Computación Cuántica (QCCS) como un estudio de caso para ilustrar cómo pequeñas variaciones en la redacción o el diseño pueden alterar drásticamente la interpretación de los estudiantes, llevando a resultados estadísticos engañosos que no reflejan la comprensión conceptual real.

2. Metodología

El equipo de investigación desarrolló la QCCS, una evaluación de opción múltiple basada en la investigación para medir el aprendizaje en cursos de computación cuántica. El desarrollo del Ítem 15 siguió un proceso iterativo riguroso a lo largo de cuatro versiones (v1.0 a v2.2) entre 2023 y 2025:

• Diseño Iterativo: Se crearon múltiples versiones del ítem basadas en objetivos de evaluación específicos (fundamentos matemáticos, entrelazamiento, superposición, puertas cuánticas y diagramas de circuitos).
• Fuentes de Datos:
  • Administraciones a gran escala: Se recolectaron respuestas de cientos de estudiantes en múltiples instituciones de EE. UU. (N total acumulado > 2000).
  • Entrevistas "Pensar en voz alta": Se realizaron entrevistas clínicas con estudiantes (N=36 en total a lo largo de las rondas) para entender su razonamiento en tiempo real.
  • Entrevistas con expertos: Se consultó a instructores para validar la claridad y el contexto.
• Métricas Estadísticas: Se evaluaron las versiones utilizando:
  • Dificultad del ítem ($p_i$): Proporción de respuestas correctas.
  • Discriminación del ítem ($\rho^*$): Correlación de Spearman modificada entre el ítem y la puntuación total del examen (objetivo: $\rho^* \geq 0.2$).
• Análisis Cualitativo: Triangulación de datos cuantitativos con hallazgos cualitativos para diagnosticar por qué fallaban los ítems (ej. estrategias de prueba, ambigüedad notacional).

3. Contribuciones Clave y Hallazgos

El artículo no solo presenta el resultado final de la pregunta, sino el "detrás de escena" de su evolución, revelando hallazgos críticos sobre el aprendizaje y la evaluación:

A. La evolución del Ítem 15 (Cronología de fallos y ajustes)

1. Versión 1.0 (Fall 2023): Presentó ambigüedades sobre la base de medición (Z vs. no especificada) y el significado de "efecto". Los estudiantes lucharon con la notación de los diagramas de circuitos.
2. Versión 2.0 (Spring 2024): Se introdujo un estado de entrada específico ($|+\rangle$) y una línea de tiempo. Aunque la dificultad fue aceptable, la discriminación fue baja ($\rho^* = 0.14$). Se descubrió que los estudiantes de bajo rendimiento adivinaban la respuesta correcta ("b") mediante estrategias de prueba, mientras que los de rendimiento medio seleccionaban distractores conceptuales, rompiendo la monotonicidad esperada.
3. Versión 2.1 (Fall 2024): Se dividió en dos partes para reducir la probabilidad de adivinanza. Sin embargo, la dificultad se volvió extrema (solo 3% de aciertos). Se observó que los estudiantes rechazaban la opción "ninguna de las anteriores" (la correcta) por miedo a elegir una opción negativa, prefiriendo adivinar entre las opciones positivas.
4. Versión 2.2 (Spring/Fall 2025): Se añadió explícitamente la opción "el estado NO PUEDE escribirse como un ket de un solo qubit". Esta versión logró una discriminación fuerte ($\rho^* \gtrsim 0.3$) y una dificultad alta pero manejable, validando que el ítem medía realmente la comprensión del entrelazamiento y la medición parcial.

B. Hallazgos sobre el pensamiento estudiantil

• Confusión entre estado cuántico y probabilidades: Muchos estudiantes confunden el estado del qubit con las probabilidades de medición. Si las probabilidades no cambian, asumen erróneamente que el estado no ha cambiado, ignorando el cambio de fase.
• Sobre-generalización de estados base: Los estudiantes tienden a aplicar reglas aprendidas con estados base ($|0\rangle, |1\rangle$) a superposiciones, fallando en reconocer que un qubit en un estado entrelazado no tiene un estado definido individualmente (no es un ket puro).
• Estrategias de prueba vs. Razonamiento: Se demostró que las opciones de respuesta "negativas" (ej. "no se puede definir") son a menudo rechazadas por los estudiantes incluso cuando son conceptualmente correctas, debido a sesgos cognitivos en la toma de pruebas.
• Convenios Notacionales: Existe una divergencia entre cursos: algunos definen la medición sin base como carente de sentido, mientras que otros asumen implícitamente la base Z. Esto requiere que las evaluaciones sean explícitas para no confundir a estudiantes de diferentes contextos.

4. Resultados Cuantitativos

• La versión final (v2.2) mostró una dificultad de $p = 0.23(2)$, lo cual es bajo, pero significativamente superior al suelo de adivinanza (4%).
• La discriminación aumentó a $\rho^* \gtrsim 0.3$, indicando que el ítem distingue efectivamente entre estudiantes con y sin comprensión conceptual profunda.
• El patrón de respuestas incorrectas se alineó con las concepciones erróneas documentadas en la literatura (ej. la idea de que el qubit de control en una puerta CNOT nunca cambia).

5. Significado e Implicaciones

Este artículo sirve como una advertencia y una guía para investigadores y educadores en física:

1. La validación iterativa es crucial: Incluso los desarrolladores experimentados no pueden predecir cómo interpretarán los estudiantes una pregunta. La validación con datos reales de estudiantes es insustituible.
2. El diseño de ítems es un arte y una ciencia: Cambios menores en la redacción o la estructura de las opciones pueden transformar un ítem que mide el razonamiento en uno que mide la capacidad de adivinar o seguir estrategias de prueba.
3. La complejidad del pensamiento cuántico: El "retroceso de fase" es un concepto donde la intuición clásica falla completamente. Evaluarlo requiere herramientas que capturen la naturaleza no factorizable de los estados entrelazados.
4. Valor del proceso de fracaso: Las versiones fallidas del ítem proporcionaron más información sobre el aprendizaje estudiantil que la versión final exitosa, revelando lagunas en la comprensión de la notación, el entrelazamiento y la interpretación de diagramas de circuitos.

En conclusión, el desarrollo del Ítem 15 demuestra que investigar el pensamiento estudiantil es un proceso no lineal y complejo, donde la "historia" de cómo se refinó una pregunta es tan valiosa como la métrica final de su rendimiento.