umfragen_nonresponse_fehler

Unterschiede

Hier werden die Unterschiede zwischen zwei Versionen angezeigt.

Link zu dieser Vergleichsansicht

Beide Seiten der vorigen Revision Vorhergehende Überarbeitung
Nächste Überarbeitung
Vorhergehende Überarbeitung
umfragen_nonresponse_fehler [2024/03/11 15:42] – [Hat die Art der Befragten einen Einfluss auf die Nonresponse?] c.hauptumfragen_nonresponse_fehler [2024/03/13 12:31] (aktuell) – [Liste der Queerwiki-Einträge] c.haupt
Zeile 79: Zeile 79:
 (Whelan 2015 – Sample characteristics, Target population type, Economic conditions, National/ country specifics, Technological environment, Neighborhood, Socio-demographic characteristics, Other (SE) …\\ (Whelan 2015 – Sample characteristics, Target population type, Economic conditions, National/ country specifics, Technological environment, Neighborhood, Socio-demographic characteristics, Other (SE) …\\
 \\ \\
 +===== Hat das Thema einen Einfluss auf die Umfrageteilnahme? =====
 +
 +Schauen wir zunächst ganz naiv hin, muss uns die Menschenkenntnis verraten, dass die meisten Menschen bei einem Thema, das sie wichtig oder interessant finden, eher motiviert sind, an einer Umfrage teilzunehmen. Das Umfragethema sollte also schnell ersichtlich sein und so interessant wie möglich dargestellt werden. \\
 +**Die Vertrauenswürdigkeit der entsprechenden Studienergebnisse hierzu ist als hoch einzustufen.**\\
 +Allerdings sind manche Themen ziemlich sensibel, zum Beispiel, weil sie kulturell schambehaftet sind oder sogar nach eventuellen Straftaten fragen, wie zum Beispiel zum Drogenkonsum. In diesem Fall ist zu erwarten, dass die Response-Rate sinkt.\\
 +**Die Vertrauenswürdigkeit in die Ergebnisse der einschlägigen Studien  ist ebenfalls als hoch einzustufen.**\\
 +(Edwards 2009 – Questionnaire topic)\\
 +\\
 +===== Was hat Vertraulichkeit mit der Response-Rate zu tun? =====
 +
 +Gerade, wenn ein Umfragethema sensible Daten erfragt, muss besonders auf die Vertraulichkeit geachtet und diese auch kommuniziert werden.\\
 +Als ein Negativbeispiel in den letzten Jahren fiel der Autorin eine kommerzielle Umfrage zum Thema „Queere Erfahrungen im Gesundheitswesen“ auf. Die Erstellenden hatten sich nicht einmal die Mühe gemacht, ihre Umfrageseite mit einem Impressum und einer Datenschutzerklärung zu versehen.\\
 +Wird das Datenschutzkonzept erfolgreich kommuniziert, kann meist ein erheblicher Teil der eigentlich zu erwartenden hohen Nonresponse vermindert werden.\\ 
 +Die Vertrauenswürdigkeit der relevanten Studienergebnisse zu diesen Massnahmen ist als hoch einzustufen. \\(Edwards 2009, Singer 1995 – Anonymity/ Confidentiality/ Data Security)\\
 +\\
 +===== Hat die Art der Auftraggebenden einen Einfluss auf die Response-Rate? =====
 +
 +Vertraulichkeit hat auch etwas mit Vertrauen zu tun. Ob es nur daran liegt, wissen wir nicht, aber tendenziell schneiden Umfragen, die von Universitäten durchgeführt werden, bezüglich Nonresponse besser ab als solche, die von Regierungen oder Firmen in Auftrag gegeben wurden. \\
 +**Die Vertrauenswürdigkeit der einschlägigen Studienergebnisse  ist als moderat einzustufen.** \\
 +(Edwards 2009, Cehovin 2020 – Sponsorship/ Researcher)\\
 +\\
 +===== Beeinflussen Belohnungen die Response-Rate? =====
 +
 +Um den Survey Burden abzufedern, werden bei Umfragen häufig Belohnungen verteilt. Belohnungen können die Rücklaufquote tatsächlich verbessern, wobei der Effekt mit zunehmendem Wert nur noch geringfügig grösser wird. Es stellte sich dabei heraus, dass selbst kleine bedingungslose Geschenke wirksamer sind als solche, die erst bei Abgabe des Fragebogens herausgegeben werden. Es hat sich ausserdem erwiesen, dass geldwerte Belohnungen (wie Geld, Einkaufsgutschein) besser wirken als nicht-monetäre Belohnungen (wie Gegenstände, Lottoscheine).\\ 
 +**Die Vertrauenswürdigkeit der relevanten Studien ist als hoch einzustufen.** \\
 +(Schneck 2013, Caporaso 2014, Mercer 2015 – Incentives)\\
 +\\
 +===== Bringt es etwas, einen kürzeren Fragebogen zu gestalten oder diesen anderweitig anzupassen? =====
 +
 +Tatsächlich verbessert sich die Response-Rate bei kürzeren Fragebogen. Wichtig ist hier zu beachten, dass es nicht allein um die Anzahl der Seiten geht, sondern dass wir die Anzahl der Fragen betrachten müssen. Ausserdem müssen wir betrachten, wie die Fragen aufgebaut sind. Handelt es sich nur um etwas zum Ankreuzen (geschlossene Fragen) oder ist es erforderlich, selbst Text zu erstellen (offene Fragen)? Offene Fragen können zwar in manchen Fällen die Datenqualität positiv beeinflussen, allerdings dauert es länger, sie zu bearbeiten, und es erfordert mehr „Hirnschmalz“ als simples Multiple Choice. \\
 +Von Vorteil ist auch, wenn der Text gut lesbar (weisser Hintergrund) und die Bearbeitung insgesamt so benutzerfreundlich wie möglich ist. So empfiehlt sich bei web-basierten Umfragen eine Optimierung für mobile Geräte. \\
 +**Die Vertrauenswürdigkeit der Studien ist hoch.**\\
 +(Mavletova 2015, Nakash 2006, Edwards 2009 – Format of questions, Questionnaire format, Survey burden)\\
 +\\
 +===== Fazit: Beurteilung der Studien- und Datenqualität =====
 +
 +Gerade bei kommerziellen Umfragen erhalten wir selten eine Auskunft darüber, wie viele Menschen sie nicht beantwortet haben, und wir wissen selten, wie die Stichproben zustande kamen. Bei vielen Meinungsforschungsinstituten ist das sogar eine Art Betriebsgeheimnis. Hier ist also grundsätzlich Vorsicht geboten, bevor wir daraus allgemeingültige Rückschlüsse ziehen.\\
 +Für wissenschaftliche Arbeiten hingegen sollte sowohl die Methode zur Auswahl der Befragten unter „Methoden“ als auch die Rücklaufquote unter „Ergebnisse“ vermerkt sein. Fehlen diese Auskünfte, müssen wir ebenfalls bei der Bewertung vorsichtig sein. Wenn es um sensible Daten geht, ist auch die item nonresponse interessant.\\
 +Wenn wir uns anschauen wollen, wie sorgfältig eine Umfrage durchgeführt wurde, können wir also nicht nur die Response-Rate betrachten, sondern uns auch fragen, ob mit den genannten Massnahmen versucht wurde, das Ergebnis zu verbessern.\\
 +\\
 +\\
 +**//Autorinnen: Corinna Wintzer, Claudia Haupt (Coautorin)//**\\
 +\\
 +\\
 +==== Liste der QueerWiki-Einträge ====
 +[[:inhaltsverzeichnis|Übersicht über alle Artikel]]
 +
  • umfragen_nonresponse_fehler.1710168155.txt.gz
  • Zuletzt geändert: 2024/03/11 15:42
  • von c.haupt