Leveraging Speech to Identify Signatures of Insight and Transfer in Problem Solving

Resumen Técnico: Aprovechamiento del Discurso para Identificar Firmas de Insight y Transferencia en la Resolución de Problemas

Problema y Motivación
La resolución de problemas basada en insight se caracteriza a menudo por transiciones súbitas y no obvias en la comprensión, frecuentemente acompañadas de una experiencia subjetiva de "Eureka". Sin embargo, el propio insight no es directamente observable, y resolver un problema de insight no garantiza un momento discreto de reestructuración. Aunque los marcos teóricos sugieren que el insight implica un cambio desde una representación inicial del problema hacia un "espacio de problemas" alternativo (por ejemplo, relajando restricciones o descomponiendo bloques), sigue sin estar claro cómo estos cambios internos se manifiestan en el comportamiento observable, particularmente en cómo los solucionadores abordan problemas similares en el futuro. Este trabajo investiga las características distintivas del discurso producido durante la resolución exitosa de problemas y cómo estos patrones verbales evolucionan cuando una estructura de solución descubierta puede transferirse a problemas subsiguientes y similares.

Metodología
El estudio empleó un protocolo de pensar en voz alta con 189 participantes que resolvieron una secuencia de cinco problemas de aritmética con fósforos. En este paradigma, los participantes deben transformar una ecuación de números romanos inválida en una válida moviendo un solo fósforo.

• Diseño Experimental: Los participantes fueron asignados aleatoriamente a una de dos condiciones entre sujetos:
  • Condición Igual: Los cinco problemas compartían el mismo tipo de transformación subyacente (por ejemplo, cambiar un número o un operador), permitiendo que la estructura descubierta se reutilizara.
  • Condición Diferente: Cada problema requería un tipo de transformación distinto, impidiendo la reutilización de un insight estructural específico.
• Procedimiento: Los participantes resolvieron problemas en línea mientras verbalizaban sus pensamientos. El audio se grabó continuamente. Los ensayos se categorizaron en tres fases relativas al rendimiento: pre-éxito (intentos incorrectos), primer-éxito (la primera solución correcta, que sirve como marcador operacional para la reestructuración) y post-éxito (ensayos correctos subsiguientes).
• Pipeline de Análisis de Datos:
  • Rendimiento: La precisión y los tiempos de respuesta se analizaron utilizando modelos de efectos mixtos.
  • Salida de Discurso: El audio se segmentó para calcular la densidad del discurso (proporción de tiempo hablando) y la velocidad del discurso (palabras por segundo).
  • Contenido Semántico: Las enunciaciones se incrustaron utilizando el modelo text-embedding-3-large. Se entrenaron clasificadores de regresión logística para distinguir ensayos basados en la corrección, la fase y la condición experimental.
  • Movimientos de Razonamiento: Un modelo de lenguaje grande (GPT-5.1) anotó las enunciaciones en siete categorías mutuamente excluyentes: Propuesta, Evaluación, Categorización, Reformulación, Afecto, Relleno y Meta y Otros.

Resultados Clave

1. Rendimiento y Transferencia:

   • Los participantes en la Condición Igual mostraron una mejora significativamente mayor tanto en precisión como en velocidad a través de los ensayos en comparación con la Condición Diferente.
   • Después del primer éxito, los participantes en la Condición Igual resolvieron problemas subsiguientes con un 83.7% de precisión y tiempos de respuesta más rápidos (media de 89.9 s) en comparación con la Condición Diferente (44.0% de precisión, media de 179.0 s). Esto confirma que la estructura descubierta se transfirió con éxito solo cuando los tipos de problema se repetían.

2. Firmas Verbales del Primer Éxito:

   • Aumento del Discurso: En el ensayo de primer éxito, los participantes hablaron más (mayor densidad del discurso) y más rápido que en los ensayos pre-éxito, independientemente de la condición experimental.
   • Cambio Semántico: El discurso en los ensayos correctos fue distinguible de los ensayos incorrectos basándose en el contenido semántico. Además, el discurso en el ensayo de primer éxito difirió semánticamente de los ensayos pre-éxito en ambas condiciones.
   • Estrechamiento de la Búsqueda: En el momento del primer éxito, los participantes consideraron menos movimientos candidatos distintos en ambas condiciones, lo que sugiere un estrechamiento del espacio de búsqueda.

3. Firmas Verbales de la Transferencia (Post-Éxito):

   • Divergencia de Condiciones: Crucialmente, los cambios en los patrones de discurso después del primer éxito se observaron solo en la Condición Igual.
   • Aumento Continuo del Discurso: En la Condición Igual, los participantes continuaron hablando más y más rápido en los ensayos post-éxito en comparación con el ensayo de primer éxito. En la Condición Diferente, los patrones de discurso se estabilizaron después del primer éxito.
   • Emergencia de la Categorización: Los participantes en la Condición Igual aumentaron significativamente la frecuencia de enunciaciones de Categorización (nombrar explícitamente el tipo de problema o notar la similitud con problemas anteriores) después del primer éxito. Esto no ocurrió en la Condición Diferente.
   • Propuestas Refinadas: En la Condición Igual, los participantes redujeron aún más el número de movimientos candidatos distintos considerados después del primer éxito, mientras que aquellos en la Condición Diferente no lo hicieron.

Contribuciones Clave

• Análisis Escalable del Insight: El estudio demuestra la viabilidad de utilizar el reconocimiento automático de voz y el procesamiento del lenguaje natural para analizar protocolos de pensar en voz alta a gran escala, avanzando más allá de las métricas simples de precisión para capturar la dinámica del razonamiento.
• Marcadores Verbales de la Transferencia: El artículo identifica firmas verbales específicas que distinguen la mera mejora del rendimiento de la transferencia genuina. Específicamente, la capacidad de categorizar espontáneamente un problema y el aumento continuo de la densidad y la velocidad del discurso son características distintivas de insights transferibles.
• Accesibilidad del Insight: Los hallazgos sugieren que, aunque los precursores del insight pueden ser difíciles de articular, la comprensión estructural resultante se vuelve cada vez más accesible para el informe verbal a medida que se reutiliza.

Significado y Afirmaciones
Los autores afirman que la reestructuración exitosa en la resolución de problemas hace más que mejorar el rendimiento en la tarea; altera fundamentalmente cómo las personas hablan sobre un problema. El estudio postula que la característica distintiva de un insight transferible es su accesibilidad para el informe verbal. Cuando un solucionador se encuentra con un tipo de problema que reutiliza una estructura descubierta, no solo lo resuelve más rápido, sino que también cambia su estrategia de razonamiento para incluir una categorización explícita y un proceso de búsqueda más enfocado.

El artículo se mantiene modesto en cuanto a su alcance, reconociendo que la aritmética con fósforos es un paradigma restringido y que el primer éxito sirve como un proxy para la reestructuración en lugar de una medida directa de los momentos subjetivos de "Eureka". Los autores sugieren que el trabajo futuro podría combinar estos análisis de discurso con calificaciones subjetivas del insight para validar aún más el vínculo entre las firmas verbales y la experiencia interna de la reestructuración. En última instancia, el trabajo argumenta que lo que las personas dicen mientras resuelven problemas revela patrones de éxito y transferencia que los datos de rendimiento por sí solos no pueden capturar.