Wie „richtige“ Antworten der Befragten die Ergebnisse der Umfrage bis zur Unkenntlichkeit verfälschen können

Bei der Durchführung einer Studie wird großer Wert auf die Datenerhebung gelegt, sodass die Antworten der Befragten bei der Erhebung a priori als richtig akzeptiert werden und der auf diesen Antworten basierende Bericht objektiv ist. Allerdings kommt es häufig vor, dass eine genauere Betrachtung einzelner Antworten offensichtliche Missverständnisse der Befragten hinsichtlich der Formulierung der Umfrage oder der Anweisungen zu den Fragen aufdeckt.

1. Missverständnis von Fachbegriffen oder bestimmten Wörtern. Bei der Zusammenstellung einer Umfrage lohnt es sich zu berücksichtigen, für welche Befragtengruppen sie gedacht ist: Alter und Status der Umfrageteilnehmer, ob sie in Großstädten oder abgelegenen Dörfern leben usw. Bei der Verwendung spezieller Begriffe und unterschiedlicher Umgangssprache ist Vorsicht geboten – möglicherweise verstehen es nicht alle Befragten oder nicht alle auf die gleiche Weise. Oft führen solche Missverständnisse jedoch nicht dazu, dass der Befragte die Umfrage abbricht (was natürlich unerwünscht wäre), sondern er antwortet nach dem Zufallsprinzip (was aufgrund der Datenverzerrung noch unerwünschter ist).

2. Missverständnis der Frage. Viele Forscher sind davon überzeugt, dass jeder Befragte zu jedem Thema eine eindeutige und klar formulierte Meinung hat. Das ist nicht so. Manchmal fällt es den Umfrageteilnehmern schwer, die Frage zu beantworten, da sie noch nie über das Thema als Ganzes oder aus dieser Perspektive nachgedacht haben. Diese Schwierigkeit kann dazu führen, dass der Befragte die Umfrage abbricht oder völlig uninformativ antwortet. Helfen Sie den Umfrageteilnehmern bei der Beantwortung, indem Sie die Frage klarer formulieren und verschiedene Antwortoptionen anbieten.

Wie „richtige“ Antworten der Befragten die Ergebnisse der Umfrage bis zur Unkenntlichkeit verfälschen könnenQuelle: news.sportbox.ru

3. Unverständnis der Umfrageanweisungen oder einzelner Fragen. Wie der Rest des Fragebogens sollte auch der Wortlaut der Anweisungen an alle Gruppen der vorgesehenen Befragten angepasst werden. Versuchen Sie, eine große Anzahl von Fragen zu vermeiden, bei denen Sie eine bestimmte Anzahl von Antworten markieren müssen („Markieren Sie die drei wichtigsten ...“) oder legen Sie bei allen solchen Fragen fest, dass die gleiche Anzahl von Antworten markiert werden muss. Es lohnt sich auch, komplexe Fragetypen (Matrizen, Ranking etc.) zu reduzieren und durch einfachere zu ersetzen. Wenn Sie der Meinung sind, dass die Befragten den Fragebogen über ein Mobiltelefon beantworten können, versuchen Sie, die Umfragestruktur noch weiter zu vereinfachen.

4. Missverständnis der Bewertungsskala. Erklären Sie den Befragten anhand der Bewertungsskala im Fragebogen deren Bedeutung, auch wenn sie Ihnen offensichtlich erscheint. Beispielsweise wird die übliche Skala von 1 bis 5 meist in Analogie zum Schulnotensystem verstanden, manchmal bewerten die Befragten jedoch auch „1“ und schreiben ihr damit den Wert des ersten Platzes zu. Bei verbalen Skalen ist es besser, subjektive Kriterien zu vermeiden. Beispielsweise ist die Skala „nie – selten – manchmal – oft“ sehr subjektiv. Stattdessen lohnt es sich, konkrete Werte vorzuschlagen („einmal im Monat“ etc.).

5. Verallgemeinernde positive und durchschnittliche Schätzungen. Die Tendenz der Befragten zu allgemein positiven Bewertungen stört beispielsweise häufig bei Befragungen von Softwarenutzern und anderen ähnlichen Studien. Wenn der Benutzer im Großen und Ganzen mit Ihrem Programm zufrieden ist, fällt es ihm schwer, es in Teile zu zerlegen und sein persönliches Konto, eine neue funktionale Lösung usw. separat zu bewerten. Höchstwahrscheinlich wird er überall eine hohe Punktzahl erzielen. Ja, der Bericht über die Ergebnisse der Umfrage wird sehr positiv aussehen, aber die Ergebnisse werden keine realistische Einschätzung der Situation zulassen.
Durchschnittliche Bewertungen stören beispielsweise bei einer 360-Grad-Personalbeurteilung oft. Mitarbeiter tendieren dazu, für alle Kompetenzen eine durchschnittliche Bewertung abzugeben: Wenn die Einstellung gegenüber einem Kollegen positiv ist, werden Sie in den Ergebnissen überschätzte Werte für den gesamten Fragebogen sehen, wenn es Spannungen mit einem Kollegen gibt, dann sogar seine offensichtlich starken Führungsqualitäten unterschätzt.

In beiden Fällen ist es sinnvoll, die Antwortmöglichkeiten sorgfältig auszuarbeiten und die üblichen Skalen durch ausführliche verbale Antworten für jede einzelne Frage zu ersetzen.

6. Manipulation von Meinungen. Dieser Punkt unterscheidet sich von den vorherigen darin, dass die Forscher die Befragten bewusst zu Antworten drängen, die für sie für einen „erfolgreichen“ Bericht von Vorteil sind. Häufige Manipulationsmethoden sind die Illusion der Wahl und die Fokussierung auf positive Eigenschaften. Typischerweise denken Manager, die positive Umfrageergebnisse studieren, nicht über die richtige Interpretation der Daten nach. Es lohnt sich jedoch, einen objektiven Blick auf den Fragebogen selbst zu werfen: Was ist seine Logik, hat der Fragebogen eine bestimmte Linie, sind die positiven und negativen Antworten gleichmäßig verteilt. Eine weitere gängige Technik zum „Strecken“ von Daten ist das Ersetzen von Konzepten. Wenn beispielsweise die Mehrheit der Mitarbeiter das neue Anreizprogramm als „zufriedenstellend“ bewertet, könnte aus dem Bericht hervorgehen, dass „die Mehrheit der Mitarbeiter des Unternehmens mit dem neuen Anreizprogramm zufrieden sind“.

Source: habr.com

Kommentar hinzufügen