測定可能なものの管理：自動採点システムのゲーム行動への感受性の定量化

構成回答項目の自動採点方法が州の評価で広く採用され、より重要な運用設定で使用されるようになるにつれて、それらのゲーム行動に対する感受性を調査し管理することが重要です。本稿では、構成に無関係な回答行動が自動構成回答採点にどのように影響を与えるかに関連する研究のレビューを提供し、運用開始前にリスクの程度を評価する必要があるという文献のギャップに対処することを目指しています。ゲームに対する感受性を評価するための一般的な枠組みを提案し、Automated Student Assessment Prize（ASAP）Challengeのオープンソース短答採点エンジンを使用した初期の実証を示します。