Vergleich von US-Panel-Anbietern für Online-Umfragen

HINTERGRUND: Trotz der zunehmenden Nutzung von Panelumfragen ist wenig über die Unterschiede in der Datenqualität zwischen den Panels bekannt. ZIEL: Ziel dieser Studie war es, Panelumfrageunternehmen und deren Befragte basierend auf (1) der Schnelligkeit der Antworten der Panelisten, (2) der Zuverlässigkeit der demografischen Informationen, die sie selbst berichten, und (3) der Verallgemeinerbarkeit der Merkmale der Panelisten auf die US-amerikanische Allgemeinbevölkerung zu charakterisieren. Ein sekundäres Ziel war es, mehrere Aspekte hervorzuheben, die bei der Auswahl eines Panelanbieters zu berücksichtigen sind. METHODEN: Wir rekrutierten eine Stichprobe von US-Erwachsenen von 7 Panelanbietern unter Verwendung identischer Quoten und Online-Umfragen. Alle Anbieter erfüllten die vordefinierten Einschlusskriterien. Die Panels wurden basierend darauf verglichen, wie lange die Befragten benötigten, um die Umfrage ab dem Zeitpunkt der ursprünglichen Einladung abzuschließen. Um die Identität der Befragten zu validieren, untersuchte diese Studie den Anteil der zustimmenden Befragten, die die technischen Kriterien nicht erfüllten, die Screening-Fragen nicht beantworteten und uneinheitliche Antworten gaben. Schließlich wurden die Merkmale der Befragten mit den US-Volkszählungsdaten und den Merkmalen anderer Panels verglichen. ERGEBNISSE: Bei den 7 Panelanbietern antworteten 2% bis 9% der Panelisten innerhalb von 2 Tagen nach der Einladung; jedoch scheiterten etwa 20% der Befragten am Screening, hauptsächlich aufgrund der Uneinheitlichkeit zwischen dem selbstberichteten Geburtsdatum und dem Geburtsdatum in den Panel-Eintragsdaten. Obwohl die geografischen Merkmale weitgehend mit den Schätzungen der US-Volkszählung übereinstimmten, war jede Stichprobe in Bezug auf Erwachsene, die nicht die High School abgeschlossen haben und/oder ein Jahreseinkommen von weniger als US 15.000 hatten, unterrepräsentiert. Außer bei 1 Anbieter überschneiden sich die Proben der Panelanbieter um etwa 20% (d.h. 1 von 5 Befragten nahm über 2 oder mehr Panelanbieter teil). SCHLUSSFOLGERUNGEN: Die Ergebnisse dieses direkten Vergleichs liefern potenzielle Benchmarkwerte in der Panelqualität. Die zu berücksichtigenden Aspekte bei der Auswahl von Panelanbietern umfassen Reaktionsfähigkeit, das Versagen bei der Aufrechterhaltung der soziodemografischen Vielfalt und validierter Daten sowie mögliche Überschneidungen zwischen den Panels.