Integrated Validation Framework for Educational Module Development (IVF-EMD): A Systematic Evidence Synthesis of Validation Practices and Methodological Gaps
Este estudio sintetiza la evidencia de 51 estudios de desarrollo educativo para revelar una fragmentación metodológica significativa en las prácticas de validación actuales, lo que conduce a la propuesta del Marco de Validación Integrada para el Desarrollo de Módulos Educativos (IVF-EMD, por sus siglas en inglés) como una arquitectura integral de cuatro dominios que reimagina la validación como un proceso progresivo e iterativo de construcción de evidencia.
Artículo original bajo licencia CC BY 4.0 (https://creativecommons.org/licenses/by/4.0/). Esta es una explicación generada por IA del artículo a continuación. No ha sido escrita ni avalada por los autores. Para mayor precisión técnica, consulte el artículo original. Leer descargo de responsabilidad completo
Los módulos educativos son paquetes estructurados de materiales de aprendizaje que los docentes e instituciones utilizan para guiar a los estudiantes a través de una materia. Ya sea una aplicación digital para aprender un nuevo idioma, una guía impresa para comprender la historia local o un conjunto de actividades para una clase de ciencias, estas herramientas están diseñadas para resolver problemas educativos específicos. Antes de que un módulo se lance para su uso generalizado, los desarrolladores deben demostrar que funciona. Este proceso, conocido como validación, consiste en comprobar que el contenido es preciso, que tiene sentido para las personas que lo utilizarán y que realmente ayuda a los estudiantes a aprender. Durante décadas, los investigadores han dependido de planos establecidos, como el modelo ADDIE, para organizar la creación de estas herramientas. Estos planos indican a los desarrolladores el orden en el que deben construir un producto: primero analizar la necesidad, luego diseñar la solución, después crearla y, finalmente, probarla. Sin embargo, ha surgido una brecha entre el plan para construir un producto y la prueba de que el producto es bueno. Si bien los planos nos dicen cómo construir un módulo, no siempre garantizan que cada paso de la prueba esté conectado, dejando a los desarrolladores con piezas de evidencia que no forman un cuadro completo.
Un equipo de investigadores de la Universidad de Malaya se propuso comprender exactamente cómo se está recopilando actualmente esta prueba. Realizaron una revisión sistemática, que es un método de recopilación y análisis cuidadoso de muchos estudios diferentes para encontrar el panorama general. Examinaron 51 estudios separados que describían la creación y prueba de módulos educativos. Su objetivo no era inventar nuevas formas de probar estas herramientas, sino ver cómo se estaban utilizando los métodos existentes y dónde residían las brechas. Buscaron nueve tipos específicos de evidencia que los investigadores suelen recopilar: comenzando con un análisis de necesidades para ver si el módulo es necesario, obtener opiniones de expertos, verificar la precisión del contenido, preguntar a los usuarios si parece claro, realizar pequeñas pruebas piloto, comprobar si las pruebas son consistentes, ver si es fácil de usar, observar cómo funciona en un aula real y, finalmente, medir si realmente mejora los resultados de aprendizaje.
Los investigadores descubrieron que el campo está lleno de buenas intenciones pero sufre de una falta de conexión. Casi todos los estudios que revisaron, el 98 por ciento, comenzaron identificando una necesidad para el módulo. Una gran mayoría, aproximadamente el 78 por ciento, también involucró a expertos para revisar el diseño, y el 72 por ciento verificó que el contenido fuera preciso. Estos pasos iniciales fueron muy comunes. Sin embargo, a medida que el proceso avanzaba, la evidencia comenzaba a desmoronarse. Menos estudios verificaron si el módulo era fácil de usar para los estudiantes, e incluso menos realizaron las pequeñas pruebas piloto o comprobaron si las mediciones eran consistentes. La caída más significativa ocurrió cuando los investigadores intentaron demostrar que el módulo funcionaba en un aula real y realmente mejoraba el aprendizaje. Aunque muchos estudios afirmaban haber realizado estos pasos finales, a menudo lo hacían sin haber completado los controles previos. Cuando los investigadores buscaron estudios que hubieran realizado los nueve pasos de manera conectada, encontraron solo cuatro. Esto significa que menos del 8 por ciento de los estudios proporcionaron una cadena completa de evidencia desde la idea inicial hasta el resultado final.
El problema central identificado no es que los investigadores estén fallando al probar sus módulos, sino que los están probando de forma fragmentada. Un desarrollador puede tener una revisión de expertos perfecta y una verificación de contenido clara, pero luego saltarse el paso de ver si un estudiante puede realmente usar la herramienta. Otro podría pasar directamente a ver si un módulo funciona en un aula sin haber verificado nunca si el contenido era preciso o si la herramienta era fácil de usar. Esto crea una situación en la que un módulo puede ser declarado "validado" basándose en una sola pieza de evidencia, aun cuando falte el panorama completo. Los investigadores argumentan que la validación no debe verse como una lista de verificación donde simplemente se marcan casillas. En cambio, debe verse como un proceso de construcción de un caso, donde cada pieza de evidencia respalda una afirmación específica. Si un desarrollador afirma que su módulo está listo para el aula, necesita evidencia de usabilidad. Si afirma que mejora el aprendizaje, necesita evidencia de efectividad. La práctica actual suele saltarse estos vínculos, lo que difica saber exactamente qué significa un módulo "validado".
Para solucionar esto, los investigadores propusieron una nueva forma de organizar estas comprobaciones, llamada Marco de Validación Integrada para el Desarrollo de Módulos Educativos. Este marco no reemplaza los planos existentes para construir módulos. En su lugar, se sitúa junto a ellos, actuando como un mapa para la evidencia. Agrupa los nueve tipos de comprobaciones en cuatro dominios conectados. El primero es la Validación de Fundamentos, que asegura que existe una necesidad real para el producto. El segundo es la Validación de Diseño, que confirma que los expertos y las verificaciones de contenido respaldan la idea. El tercero es la Validación del Producto, que se centra en si la herramienta terminada es utilizable, consistente y está lista para una prueba. El dominio final es la Validación de Campo, que observa cómo se desempeña la herramienta en un aula real y si logra los resultados de aprendizaje deseados.
Esta nueva estructura enfatiza que estos dominios están conectados y que la evidencia de las etapas posteriores puede informar a las anteriores. Si un módulo falla en un aula real, por ejemplo, podría significar que el diseño era defectuoso o que el contenido no era claro, lo que requiere que los desarrolladores regresen a revisar esos pasos anteriores. El marco sugiere que la cantidad de prueba que un desarrollador necesita debe coincidir con la fuerza de la afirmación que está haciendo. Un prototipo simple podría solo necesitar demostrar que es una buena idea y que se ve bien, mientras que una herramienta destinada al uso nacional necesita pruebas de que funciona en aulas reales. Al organizar la evidencia de esta manera, el marco ayuda a los investigadores y desarrolladores a ser más honestos y precisos sobre lo que sus módulos pueden y no pueden hacer. El estudio concluye que, si bien las herramientas para probar módulos educativos existen, el campo necesita un mejor sistema para conectar estas piezas, asegurando que el producto final esté respaldado por una historia de evidencia completa y coherente.
¿Ahogado en artículos de tu campo?
Recibe resúmenes diarios de los artículos más novedosos que coincidan con tus palabras clave de investigación — con resúmenes técnicos, en tu idioma.