Un marco para la evaluación y el uso de la puntuación automatizada

Se proporciona un marco para la evaluación y el uso de la puntuación automatizada de tareas de respuesta construida que implica tanto la evaluación de la puntuación automatizada como pautas para la implementación y el mantenimiento en el contexto de tecnologías en constante evolución. Se discuten dentro del marco las consideraciones sobre los problemas de validez y los desafíos asociados con la puntuación automatizada. Se ofrece la concordancia entre la capacidad de puntuación y el propósito de la evaluación, el acuerdo entre las puntuaciones humanas y automatizadas, la consideración de asociaciones con medidas independientes, la generalizabilidad de las puntuaciones automatizadas tal como se implementan en la práctica operativa a través de diferentes tareas y formularios de prueba, y el impacto y las consecuencias para la población y subgrupos como evidencia integral que apoya el uso de la puntuación automatizada. Se proporcionan pautas específicas de evaluación para utilizar la puntuación automatizada como complemento de la puntuación humana para pruebas utilizadas con fines de alta presión. Estas pautas están destinadas a ser generalizables a nuevos sistemas de puntuación automatizada y a medida que los sistemas existentes cambian con el tiempo.