Unterschiede

Hier werden die Unterschiede zwischen zwei Versionen angezeigt.

--- umfragen_nonresponse_fehler [2024/03/11 15:29] – [Beeinflusst eine Einladung die Response-Rate?] c.haupt
+++ umfragen_nonresponse_fehler [2024/03/13 12:31] (aktuell) – [Liste der Queerwiki-Einträge] c.haupt
@@ Zeile 57: / Zeile 57: @@
 (Nakash 2006, Van Gelder 2019, Yammarino 1991 – Intervention: Follow-up/ reminders)\\
 \\
+===== Hat es einen Einfluss, wer das Interview führt und wo die Umfrage stattfindet? =====
+Sobald eine Umfrage in einem Gespräch stattfindet, egal ob am Telefon oder persönlich, müssen wir zwischenmenschliche Effekte berücksichtigen. Daher hat es sich als nützlich erwiesen, Menschen, die für eine Umfrage die Interviews führen, zu trainieren. Sie müssen lernen, die Fragen so zu stellen, dass jedes Interview einheitlich ist und ihre persönliche Meinung nicht die Antworten beeinflusst. Zudem werden sie es mit mehr oder weniger motivierten und mehr oder weniger umgänglichen Befragten zu tun haben, sodass sie lernen müssen, Menschen zur Kooperation zu bewegen. \\
+**Die Zuverlässigkeit der Studien, die einen günstigen Einfluss guter Interviewführung auf Nonresponse belegen, ist als moderat einzustufen.**\\
+(Daikeler 2020 – Intervention: Interviewer experience, Interviewer socio-demographic characteristics)\\
+\\
+Ebenfalls nicht ganz ohne ist die Frage, wo das Interview stattfindet bzw. in welchem Rahmen der Fragebogen verteilt wird. Logischerweise sollte ein persönliches Gespräch für eine geringere item nonresponse auch persönlich bleiben.
+Die britischen NATSAL-Studien, wo es im Sexualität ging, lösten das Problem zum Beispiel, indem eine Person die Fragen stellte, die Befragten ihre Antworten aber computergestützt eingaben, sodass andere Menschen im Haushalt nicht lauschen konnten. \\
+**Die Vertrauenswürdigkeit der entsprechenden Studienergebnisse  für solche Massnahmen ist insgesamt als moderat einzustufen.**
+(Natsal-3 – Interviewer expectations)\\
+\\
+Bei Fragebogen ist es hingegen von Vorteil, wenn sie im Rahmen einer Veranstaltung verteilt werden. Es erfolgt dann nicht nur eine persönliche Einladung, sondern es besteht auch eine gewisse positive Beeinflussung, weil wir dann Menschen sehen, die ihre Fragebogen ausfüllen.\\
+**Die Vertrauenswürdigkeit der Studienergebnisse zu Massnahmen, die das Setting einer Umfrage betreffen und Nonresonse-Fehler minimieren, ist als moderat einzustufen.** \\
+(Yarger 2013 – Survey setting)\\
+\\
+===== Hat die Art der Befragten einen Einfluss auf die Nonresponse? =====
+Bei manchen Internetumfragen ist es sehr auffällig, dass sie quasi nur von jungen, gut ausgebildeten Menschen ausgefüllt wurden. Tatsächlich scheinen in den meisten Umfragen gut ausgebildete Menschen überrepräsentiert.\\
+Außerdem beeinflusst die Zielgruppe, ob die Rücklaufquote höher oder niedriger ist. Die Allgemeinbevölkerung und Menschen mit komplexen Berufen (wie zum Beispiel Ärzt:innen) sind meist weniger auskunftsfreudig als Patient:innen oder Studierende. \\
+**Die Vertrauenswürdigkeit der Studienergebnisse zu diesen Effekten ist niedrig.** \\
+(Whelan 2015 – Sample characteristics, Target population type, Economic conditions, National/ country specifics, Technological environment, Neighborhood, Socio-demographic characteristics, Other (SE) …\\
+\\
+===== Hat das Thema einen Einfluss auf die Umfrageteilnahme? =====
+Schauen wir zunächst ganz naiv hin, muss uns die Menschenkenntnis verraten, dass die meisten Menschen bei einem Thema, das sie wichtig oder interessant finden, eher motiviert sind, an einer Umfrage teilzunehmen. Das Umfragethema sollte also schnell ersichtlich sein und so interessant wie möglich dargestellt werden. \\
+**Die Vertrauenswürdigkeit der entsprechenden Studienergebnisse hierzu ist als hoch einzustufen.**\\
+Allerdings sind manche Themen ziemlich sensibel, zum Beispiel, weil sie kulturell schambehaftet sind oder sogar nach eventuellen Straftaten fragen, wie zum Beispiel zum Drogenkonsum. In diesem Fall ist zu erwarten, dass die Response-Rate sinkt.\\
+**Die Vertrauenswürdigkeit in die Ergebnisse der einschlägigen Studien  ist ebenfalls als hoch einzustufen.**\\
+(Edwards 2009 – Questionnaire topic)\\
+\\
+===== Was hat Vertraulichkeit mit der Response-Rate zu tun? =====
+Gerade, wenn ein Umfragethema sensible Daten erfragt, muss besonders auf die Vertraulichkeit geachtet und diese auch kommuniziert werden.\\
+Als ein Negativbeispiel in den letzten Jahren fiel der Autorin eine kommerzielle Umfrage zum Thema „Queere Erfahrungen im Gesundheitswesen“ auf. Die Erstellenden hatten sich nicht einmal die Mühe gemacht, ihre Umfrageseite mit einem Impressum und einer Datenschutzerklärung zu versehen.\\
+Wird das Datenschutzkonzept erfolgreich kommuniziert, kann meist ein erheblicher Teil der eigentlich zu erwartenden hohen Nonresponse vermindert werden.\\
+Die Vertrauenswürdigkeit der relevanten Studienergebnisse zu diesen Massnahmen ist als hoch einzustufen. \\(Edwards 2009, Singer 1995 – Anonymity/ Confidentiality/ Data Security)\\
+\\
+===== Hat die Art der Auftraggebenden einen Einfluss auf die Response-Rate? =====
+Vertraulichkeit hat auch etwas mit Vertrauen zu tun. Ob es nur daran liegt, wissen wir nicht, aber tendenziell schneiden Umfragen, die von Universitäten durchgeführt werden, bezüglich Nonresponse besser ab als solche, die von Regierungen oder Firmen in Auftrag gegeben wurden. \\
+**Die Vertrauenswürdigkeit der einschlägigen Studienergebnisse  ist als moderat einzustufen.** \\
+(Edwards 2009, Cehovin 2020 – Sponsorship/ Researcher)\\
+\\
+===== Beeinflussen Belohnungen die Response-Rate? =====
+Um den Survey Burden abzufedern, werden bei Umfragen häufig Belohnungen verteilt. Belohnungen können die Rücklaufquote tatsächlich verbessern, wobei der Effekt mit zunehmendem Wert nur noch geringfügig grösser wird. Es stellte sich dabei heraus, dass selbst kleine bedingungslose Geschenke wirksamer sind als solche, die erst bei Abgabe des Fragebogens herausgegeben werden. Es hat sich ausserdem erwiesen, dass geldwerte Belohnungen (wie Geld, Einkaufsgutschein) besser wirken als nicht-monetäre Belohnungen (wie Gegenstände, Lottoscheine).\\
+**Die Vertrauenswürdigkeit der relevanten Studien ist als hoch einzustufen.** \\
+(Schneck 2013, Caporaso 2014, Mercer 2015 – Incentives)\\
+\\
+===== Bringt es etwas, einen kürzeren Fragebogen zu gestalten oder diesen anderweitig anzupassen? =====
+Tatsächlich verbessert sich die Response-Rate bei kürzeren Fragebogen. Wichtig ist hier zu beachten, dass es nicht allein um die Anzahl der Seiten geht, sondern dass wir die Anzahl der Fragen betrachten müssen. Ausserdem müssen wir betrachten, wie die Fragen aufgebaut sind. Handelt es sich nur um etwas zum Ankreuzen (geschlossene Fragen) oder ist es erforderlich, selbst Text zu erstellen (offene Fragen)? Offene Fragen können zwar in manchen Fällen die Datenqualität positiv beeinflussen, allerdings dauert es länger, sie zu bearbeiten, und es erfordert mehr „Hirnschmalz“ als simples Multiple Choice. \\
+Von Vorteil ist auch, wenn der Text gut lesbar (weisser Hintergrund) und die Bearbeitung insgesamt so benutzerfreundlich wie möglich ist. So empfiehlt sich bei web-basierten Umfragen eine Optimierung für mobile Geräte. \\
+**Die Vertrauenswürdigkeit der Studien ist hoch.**\\
+(Mavletova 2015, Nakash 2006, Edwards 2009 – Format of questions, Questionnaire format, Survey burden)\\
+\\
+===== Fazit: Beurteilung der Studien- und Datenqualität =====
+Gerade bei kommerziellen Umfragen erhalten wir selten eine Auskunft darüber, wie viele Menschen sie nicht beantwortet haben, und wir wissen selten, wie die Stichproben zustande kamen. Bei vielen Meinungsforschungsinstituten ist das sogar eine Art Betriebsgeheimnis. Hier ist also grundsätzlich Vorsicht geboten, bevor wir daraus allgemeingültige Rückschlüsse ziehen.\\
+Für wissenschaftliche Arbeiten hingegen sollte sowohl die Methode zur Auswahl der Befragten unter „Methoden“ als auch die Rücklaufquote unter „Ergebnisse“ vermerkt sein. Fehlen diese Auskünfte, müssen wir ebenfalls bei der Bewertung vorsichtig sein. Wenn es um sensible Daten geht, ist auch die item nonresponse interessant.\\
+Wenn wir uns anschauen wollen, wie sorgfältig eine Umfrage durchgeführt wurde, können wir also nicht nur die Response-Rate betrachten, sondern uns auch fragen, ob mit den genannten Massnahmen versucht wurde, das Ergebnis zu verbessern.\\
+\\
+\\
+**//Autorinnen: Corinna Wintzer, Claudia Haupt (Coautorin)//**\\
+\\
+\\
+==== Liste der QueerWiki-Einträge ====
+[[:inhaltsverzeichnis|Übersicht über alle Artikel]]