El Impacto del Desplazamiento Multidireccional de Parámetros de Ítems en los Coeficientes de Escalamiento de IRT y las Estimaciones de Proficiencia

Resumen El desplazamiento de parámetros de ítems (DPI) ocurre cuando los valores de los parámetros de ítems cambian de su valor original a lo largo del tiempo. El DPI puede representar una amenaza seria para la equidad y validez de las interpretaciones de puntajes de pruebas, especialmente cuando el objetivo de la evaluación es medir el crecimiento o la mejora. En este estudio, examinamos el efecto del DPI multidireccional (es decir, algunos ítems se vuelven más difíciles mientras que otros se vuelven más fáciles) en el procedimiento de vinculación y las estimaciones de proficiencia reescaladas. Se investigó el impacto de diferentes combinaciones de ítems de vinculación con varios DPI multidireccionales en el procedimiento de equiparación de pruebas para tres métodos de escalamiento (promedio-promedio, promedio-sigma y método TCC) a través de una serie de estudios de simulación. Se observó que el DPI multidireccional tuvo un efecto sustantivo en los puntajes de los examinados y en las clasificaciones de nivel de logro bajo algunas de las condiciones estudiadas. La elección del método de vinculación tuvo un efecto directo en los resultados, al igual que el patrón de DPI. Notas 1 Se eligió el método EAP porque a menudo se utiliza en evaluaciones a gran escala y para evitar los problemas asociados con el método de estimación de máxima verosimilitud (MLE) (por ejemplo, falta de estimaciones con ciertos patrones de respuesta (todos los ítems correctos/incorretos)). El método EAP tiende a resultar en errores estándar reducidos y las estimaciones de proficiencia se reducen ligeramente hacia el valor medio. Sin embargo, la elección del método de estimación no afectará el estudio, ya que el estudio utiliza consistentemente el EAP a lo largo del mismo.