Vorabtestung von Fragebögen: Inhaltsanalysen der gleichzeitigen verbalen Protokolle der Befragten

Konventionelle Methoden zur Vorabtestung von Fragebögen konzentrieren sich darauf, direkt Fragefehler zu identifizieren, wie z.B. eine mehrdeutige Frage. Dieses Papier schlägt eine neue Methode vor, die die kognitiven Schwierigkeiten der Befragten identifiziert, während sie Antworten auf Umfragen formulieren. Es umfasst eine Inhaltsanalyse von gleichzeitigen verbalen Protokollen, die während der Vorabtestinterviews erfasst wurden. Die Wirksamkeit der Methodik wird mit Vorabtests mehrerer Versionen derselben Umfrage verdeutlicht. Die Ergebnisse werden verwendet, um zu veranschaulichen, wie diese Methode diagnostische Informationen über Probleme und Verbesserungen von Fragebögen liefert. Anschließend werden die Ergebnisse mit den Ergebnissen der beobachtenden Überwachung durch Manager verglichen. Die Erkenntnisse deuten darauf hin, dass eine Vorabtestmethodik für Fragebögen, die die kognitiven Schwierigkeiten der Befragten quantifiziert, eine nützliche Ergänzung zur Identifizierung und "Verbesserung" defekter Fragen darstellt.