Calibración de Evaluaciones Multidimensionales con Datos Faltantes Estructurales: Una Aplicación de un Modelo IRT de...

Área de la Ciencia:

• Medición Educativa
• Psicometría
• Teoría de Respuesta al Ítem

Sus antecedentes:

• Los constructos educativos son cada vez más complejos, lo que requiere mediciones tanto a nivel general como de subdominio.
• Los métodos actuales a menudo requieren grandes bancos de ítems o informan puntuaciones por separado, lo que limita la evaluación práctica.
• Es deseable pero desafiante la presentación simultánea de puntuaciones generales y de subdominios.

Objetivo del estudio:

• Proponer y evaluar un modelo de teoría de respuesta al ítem jerárquica de múltiples grupos (HO-IRT) con datos faltantes estructurales para la presentación simultánea de puntuaciones.
• Investigar un escenario de aplicación novedoso utilizando un diseño NEAT (Norte, Este, Sur, Oeste) con pruebas de anclaje representativas y no representativas.
• Explorar la recuperación de parámetros de los modelos HO-IRT al usar una prueba de anclaje no representativa.

Principales métodos:

• Se utilizó un modelo HO-IRT de múltiples grupos con datos faltantes estructurales.
• Se empleó un diseño NEAT con pruebas de anclaje representativas y no representativas.
• Se realizaron simulaciones de Monte Carlo para evaluar la recuperación de parámetros y el Error Cuadrático Medio (RMSE).
• Se abordaron los datos faltantes utilizando un enfoque de máxima verosimilitud de información completa.

Principales resultados:

• El estudio demostró que una prueba de anclaje no representativa puede producir un RMSE comparable a una prueba de anclaje representativa.
• Se encontró que la recuperación de parámetros es robusta incluso con una correlación moderada entre los factores de orden superior e inferior.
• El modelo HO-IRT propuesto controla eficazmente la longitud de la evaluación mientras informa puntuaciones generales y de subdominios.

Conclusiones:

• Los modelos HO-IRT de múltiples grupos ofrecen una solución viable para la presentación simultánea de puntuaciones generales y de subdominios para constructos educativos complejos.
• El uso de pruebas de anclaje no representativas en un diseño NEAT es una alternativa práctica cuando las definiciones de constructos evolucionan.
• Este enfoque mejora la eficiencia en la medición educativa sin comprometer la precisión de las puntuaciones.