AI-assisted Script Management for Requirements Elicitation Interviews
Este artículo presenta y evalúa un flujo de trabajo de gestión de guiones asistido por IA para entrevistas de elicitación de requisitos, demostrando mediante un estudio cuasiexperimental que supera a los enfoques de solo capacitación al generar guiones de mayor calidad, permitir un cuestionamiento de seguimiento más profundo y producir modelos de objetivos más refinados a pesar de cubrir menos temas.
Artículo original bajo licencia CC BY 4.0 (http://creativecommons.org/licenses/by/4.0/). Esta es una explicación generada por IA del artículo a continuación. No ha sido escrita ni avalada por los autores. Para mayor precisión técnica, consulte el artículo original. Leer descargo de responsabilidad completo
Imagina que eres un detective intentando resolver un misterio, pero en lugar de una escena del crimen, estás entrevistando a un testigo para averiguar qué necesita de un nuevo videojuego o de una aplicación de compras. En el mundo de la ingeniería de software, este trabajo de detective se llama "elicitación de requisitos". El objetivo es hacer las preguntas adecuadas para descubrir exactamente lo que el usuario quiere antes de que los programadores comiencen a construir. Si pierdes una pista o haces la pregunta equivocada, el producto final podría ser defectuoso, confuso o simplemente inútil.
Para hacer esto bien, los entrevistadores suelen preparar un "guion": una lista de preguntas diseñadas para cubrir todos los aspectos importantes. Pero aquí está la parte difícil: las conversaciones reales son desordenadas. El testigo puede desviarse por un tema secundario, o el detective puede ponerse tan nervioso que olvida hacer la pregunta más importante. Es un acto de equilibrio entre ceñirse al plan y escuchar lo que la persona está diciendo realmente. Durante mucho tiempo, los expertos han intentado entrenar a los humanos para que mejoren en esto, pero ¿y si pudiéramos darle al detective un asistente inteligente e invisible que le susurre pistas al oído mientras habla? Esa es la gran pregunta que explora este artículo: ¿Puede la inteligencia artificial (IA) ayudar a los humanos a hacer mejores preguntas y obtener mejores respuestas durante estas entrevistas?
Los investigadores de la Universidad Carnegie Mellon decidieron probar esto construyendo un "copiloto" digital para los entrevistadores. Crearon un sistema de dos pasos. Primero, la IA actúa como un planificador, leyendo los objetivos de negocio generales de una empresa (como "hacer que la gente vea más videos") y convirtiéndolos en una lista inteligente de preguntas de entrevista. Segundo, durante la entrevista real, la IA actúa como un asistente en vivo. Escucha la conversación, rastrea qué preguntas de la lista se han realizado y aparece en la pantalla con sugerencias de preguntas de seguimiento si el entrevistador se queda atascado o necesita profundizar más.
Para ver si esto funcionaba, organizaron un enfrentamiento entre dos grupos de entrevistadores. Un grupo era un conjunto de estudiantes de posgrado inteligentes que habían tomado una clase sobre cómo entrevistar personas (el grupo de "Solo Entrenamiento"). El otro grupo era un grupo similar de estudiantes que no tenían un entrenamiento especial, pero que contaban con el copiloto de IA para ayudarlos (el grupo "Asistido por IA"). Era como comparar a un detective veterano que conoce todas las reglas contra un detective novato que tiene un GPS superinteligente y una guía de referencia.
Los resultados fueron sorprendentes y demostraron que la IA no solo ayudó, sino que cambió todo el estilo de la entrevista. Los guiones generados por la IA fueron de mucha mayor calidad, obteniendo 92.8 de 100 en comparación con los 74.8 de los escritos por humanos. Pero la verdadera magia ocurrió durante las entrevistas. Los entrevistadores asistidos por IA no intentaron apresurarse para completar una larga lista de temas. En su lugar, se concentraron en menos temas pero profundizaron mucho más. Hicieron aproximadamente 3.4 preguntas de seguimiento por cada tema que discutieron, mientras que los humanos entrenados solo hicieron 1.15.
Piénsalo como excavar en busca de un tesoro. Los humanos entrenados eran como personas con una red amplia, lanzándola sobre un área enorme y atrapando algunos peces de muchos lugares diferentes. Los entrevistadores asistidos por IA eran como personas con un único hoyo profundo; se quedaron en un solo lugar y cavaron hacia abajo, descubriendo un "tesoro" mucho más detallado y específico (lo que los investigadores llaman "requisitos de bajo nivel"). Debido a que cavaron más profundo, el mapa final de lo que los usuarios querían era más detallado y útil.
Sin embargo, el artículo tiene cuidado de no decir que la IA es una varita mágica que lo arregla todo. Los investigadores encontraron que las sugerencias de "preguntas de seguimiento" de la IA no siempre eran perfectas; los entrevistadores a menudo ignoraban las palabras específicas que la IA sugería porque las sentían un poco estancadas o lentas. En cambio, el verdadero superpoder de la IA era el "rastreador de temas". Era como un tablero de control amigable que le decía al entrevistador: "Oye, aún no has preguntado sobre la pantalla de inicio de sesión" o "Has estado hablando de pagos por un tiempo, ¿tal vez deberías profundizar aquí?". Los entrevistadores amaron esta función, calificándola como la parte más útil del sistema.
Entonces, ¿cuál es la conclusión? El estudio sugiere que darle a una persona sin entrenamiento un asistente inteligente de IA puede producir, de hecho, mejores resultados que darle a una persona entrenada ningún tipo de ayuda. La IA ayudó a los entrevistadores a mantenerse enfocados, a hacer más preguntas de seguimiento y a descubrir detalles más profundos sobre lo que los usuarios realmente necesitan. Pero también demostró que la IA no es un reemplazo para el juicio humano; los mejores resultados se obtuvieron cuando la IA se encargó del trabajo pesado de rastrear y planificar, mientras que el entrevistador humano utilizó ese apoyo para tener una conversación más natural y profunda. No se trata de que la IA haga el trabajo por ti; se trata de que la IA sostenga la linterna para que puedas ver las pistas con más claridad.
¿Ahogado en artículos de tu campo?
Recibe resúmenes diarios de los artículos más novedosos que coincidan con tus palabras clave de investigación — con resúmenes técnicos, en tu idioma.