Noten und Testergebnisse: Berücksichtigung beobachteter Unterschiede

Warum unterscheiden sich Noten und Testergebnisse oft? In diesem Artikel wird ein Rahmen möglicher Unterschiede vorgeschlagen. Eine Annäherung an den Rahmen wurde mit Daten von 8.454 Schulabschgängern aus der National Education Longitudinal Study getestet. Individuelle und Gruppenunterschiede in der Leistung von Noten gegenüber Tests wurden erheblich verringert, indem beide Maßnahmen auf ähnliche akademische Fächer konzentriert wurden, Variation in der Bewertung und Unzuverlässigkeit korrigiert wurden und Lehrerrankings sowie weitere Informationen über die Schüler hinzugefügt wurden. Die gleichzeitige Vorhersage des Durchschnitts in der High School wurde daher von 0,62 auf 0,90 erhöht; die differentiell abgeschätzte Vorhersage in acht Untergruppen wurde auf 0,02 Notenpunkte reduziert. Die Variation in der Bewertung war eine Hauptquelle der Diskrepanz zwischen Noten und Testergebnissen. Weitere Hauptquellen waren Lehrerrankings und das schulische Engagement, ein vielversprechendes Organisationsprinzip zur Erklärung des Schülererfolgs. Engagement wurde durch drei Arten beobachtbaren Verhaltens definiert: Nutzung von schulischen Fähigkeiten, Initiative zeigen und konkurrierende Aktivitäten vermeiden. Während die Gruppen in ihrem durchschnittlichen Erfolg variierten, war die Gruppenleistung in der Regel ähnlich bei Noten und Tests. Wichtige Faktoren beim Erfolg waren ähnlich strukturiert und von Gruppe zu Gruppe ähnlich verbunden. Unterschiede zwischen Noten und Tests verleihen diesen Maßnahmen komplementäre Stärken in hochriskanten Bewertungen. Wenn artefaktuelle Unterschiede zwischen den beiden Maßnahmen nicht korrigiert werden, sind gängige statistische Schätzungen von Validität und Fairness unangemessen konservativ.