https://frosthead.com

Umfragen sind immer noch so genau wie vor 75 Jahren

Hier ist eine umstrittene Idee: Umfragen sind so genau wie nie zuvor und in gewisser Weise genauer. Das mag angesichts der jüngsten epischen Wahlkatastrophen (siehe: die US-Präsidentschaftswahlen 2016, die britischen Parlamentswahlen 2015 und das Brexit-Votum 2016 in Großbritannien) so verlaufen, aber das ist das Fazit einer neuen Studie, berichtet Nicola Davis von The Guardian .

Um zu beurteilen, ob die Umfragen im Laufe der Zeit ihr Mojo verloren haben, untersuchten die Forscher 30.000 Wählerumfragen, die in einem Zeitraum von 75 Jahren für 351 Parlamentswahlen in 45 Nationen durchgeführt wurden. Laut einer Pressemitteilung stellten sie fest, dass sich die Genauigkeit der Umfragen über die Jahrzehnte nicht wesentlich geändert hat und die problematischen Umfragen der letzten Jahre im Einklang mit historischen Umfragen stehen.

"Wir stellen fest, dass die jüngste Durchführung von Umfragen im Gegensatz zur herkömmlichen Meinung nicht ungewöhnlich war", schreiben die Autoren Will Jennings von der University of Southampton und Christopher Wlezien von der University of Texas in Austin in der Studie, die diese Woche im veröffentlicht wurde die Zeitschrift Nature Human Behavior . "Obwohl die Umfragebranche vor einer Reihe erheblicher Herausforderungen steht, finden wir letztendlich keine Beweise, die die Behauptungen einer Krise in Bezug auf die Genauigkeit der Umfrage stützen."

Davis berichtet, dass die Forscher die Daten aufgeschlüsselt und 286 Wahlen untersucht haben, bei denen die Umfragen mindestens 200 Tage vor der Abstimmung begannen. In diesem Szenario verringerte sich der mittlere absolute Fehler (der absolute Wert der Differenz zwischen dem prognostizierten Wert und dem tatsächlichen Wert) von ungefähr 4 Prozentpunkten, die weit entfernt waren, auf ungefähr 3 Prozentpunkte an 50 Tagen auf nur ungefähr 2 Prozentpunkte am Vorabend der Wahl.

Bei den Umfragen zur letzten Wahlwoche in 220 nationalen Wahlen in 32 Ländern, die 75 Jahre zurückreichen, stellte man fest, dass die Fehlerquote mit 2 Prozent ziemlich konstant war.

Betrachtet man nur die elf Nationen, die über den gesamten Zeitraum regelmäßig Umfragen durchgeführt haben, so ergab die Untersuchung, dass sich die Umfragen geringfügig verbessert hatten und die Fehlerquoten mit der Zeit abnahmen. Die Studie isolierte auch die jüngsten Umfragen, wobei Umfragen und Wahlen zwischen 2015 und 2017 in 11 Ländern, einschließlich den USA und Großbritannien, untersucht wurden. Diese Analyse zeigt, dass die Umfragen keine Apokalypse aufweisen - die Umfragen stimmen mit den historischen Genauigkeitsraten überein.

„Es ist eines dieser Indizien, dass wir möchten, dass mehr Menschen sich dessen bewusst werden, weil wir wissen, dass es nicht schlimmer wird und es kein besonders neues Problem ist, aber natürlich ist die öffentliche Wahrnehmung oft, dass es so ist. ”Anthony Wells, Direktor des Datenanalyse-Unternehmens YouGov, der nicht an der Studie beteiligt war, sagt Davis. „Ich denke, das liegt daran, dass sich die Leute an die jüngsten Fehler deutlich stärker erinnern als an die Fehler von vor langer Zeit. Es gibt berühmte Fehler der Nachkriegs-USA - [der] 'Dewey besiegt Truman' Wahl und die Umfragen haben es dann falsch gemacht, oder [in Großbritannien] die Wahl von 1970 oder die Wahl von 1992. “

Dies widerspricht natürlich der herkömmlichen Weisheit. Tatsächlich berichtet Adam Rogers von Wired, dass die American Association for Public Opinion Research einen 50-seitigen Post-Mortem-Bericht über die Wahlen 2016 in den USA herausgegeben und in einem Bericht über 2015-Umfragen in Großbritannien festgestellt hat, dass die Umfragen aufgrund niedriger Rücklaufquoten und niedriger Verbraucher falsch liefen Festnetz aufgeben.

Aber die Daten sagen etwas anderes. Jennings sagt Rogers, dass die Wahlen 2016 nicht das Cluster waren, von dem viele glauben, dass es das war. „Die tatsächlichen nationalen Meinungsumfragen waren nicht außergewöhnlich falsch. Sie stimmten mit den Arten von Fehlern überein, die wir historisch gesehen haben “, sagt er. "Historisch gesehen halten technisch fortgeschrittene Gesellschaften diese Methoden für perfekt, wenn sie natürlich fehlerbehaftet sind."

Tatsächlich spiegelten die Umfragen 2016 das Wahlergebnis wider, da die Kandidatin Hillary Clinton die Volksabstimmung mit mehreren Millionen Stimmzetteln gewann. Meinungsumfragen berücksichtigen nicht die Komplikationen des einzigartigen Wahlkollegiums der Vereinigten Staaten.

Laut der Pressemitteilung behaupten die Forscher nicht, dass die Umfragen nicht vor Herausforderungen stehen, sondern dass sich die Umfrageunternehmen diesen Herausforderungen bislang gestellt haben. Das bedeutet nicht, dass die Genauigkeit erhalten bleibt. Rogers weist darauf hin, dass die Rücklaufquote bei Telefonumfragen bei rund 2000 etwa einem Drittel lag, heute jedoch nur noch jeder zehnte Anruf angenommen wird, was bedeutet, dass die Umfragen weniger zufällig und weniger repräsentativ geworden sind. Internet-Polling hat ähnliche Vorurteile. Das bedeutet nicht, dass Umfrageteilnehmer keine genauen Umfragen aus den Daten erstellen können, sondern lediglich statistische Anpassungen vornehmen müssen. "Meinungsforscher haben ständig Probleme mit dem Wechsel der Wähler und der Technologie", sagt Jennings gegenüber Rodgers. „Nicht viele von ihnen sind selbstgefällig. Aber es ist beruhigend, dass es nicht schlimmer wird. “

Aber wir sollten wirklich eine Umfrage darüber machen.

Umfragen sind immer noch so genau wie vor 75 Jahren