Ist bei der Messung von Präferenzen das Ausmaß des Frageformulierungseffekts themenabhängig?

Das habe ich gerade in einer Umfrage zur Legalisierung von Abtreibungen gelesen:

Die Antworten hingen stark von der Frageformulierung ab.

Aber ich habe auch Fälle gesehen, in denen die Frageformulierung weitgehend irrelevant war. Solange es keine absichtlichen „leitenden“ Phrasen oder allgemeine Fehler wie Mehrdeutigkeiten gibt, werden die Befragten auf Fragen mit ähnlichem Inhalt wahrscheinlich ähnlich antworten.

Meine Vermutung, basierend auf persönlichen Erfahrungen in Nicht-Umfragekontexten, wäre, dass in Themen, in denen Menschen bereits eine starke Haltung zu dem Thema gebildet haben, eine Formulierung, die mit bestehenden Einstellungen übereinstimmt, mehr Zustimmung hervorrufen wird, und eine Formulierung, die Ablehnung impliziert, wird zu mehr Zustimmung führen mehr Uneinigkeit. Aber in Fällen, in denen die Leute noch keine Einstellungen haben, ist die Formulierung der Frage nicht so wichtig. Aber das ist wirklich nur eine Vermutung, ich habe noch nie Daten darüber gesehen.

Gibt es einen guten wissenschaftlichen Überblick über die Faktoren, die die Beziehung zwischen dem Fragethema, dem Befragten (sei es seine Einstellungen oder andere Merkmale) und der Wahrscheinlichkeit bestimmen, dass eine unterschiedliche Formulierung der Frage zu einer unterschiedlichen Antwort führt?

Die meisten der Tags, an die ich dachte, waren auf der Website nicht vorhanden: [Psychometry] und [confounding-variables] zum Beispiel. Wenn diese Art von Frage ontopisch ist, kann sie vielleicht jemand erstellen.
"Psychometrie" ist ein Synonym für Messung , aber "Psychometrie" wäre ein gutes alternatives Synonym zum Hinzufügen. Deine Frage ist hier sicherlich on-topic! Ich habe einige vorhandene Tags hinzugefügt, um die Klassifizierung zu erleichtern.

Antworten (1)

Selbstberichtsmethodik war eines meiner Prüfungsthemen als Doktorandin der Sozial- und Persönlichkeitspsychologie, daher habe ich eine Menge Referenzen zu bieten, aber ich gestehe, dass ich die meisten nicht sehr gründlich gelesen habe (wenn überhaupt). ), und ich habe vergessen, wo genau ich einiges davon gelesen habe. Es ist auch wirklich ein sehr breites Thema, daher werde ich nicht die meisten auflisten, von denen ich weiß, dass sie hier relevant sein könnten, aber ich kann wahrscheinlich auf Anfrage mehr zu bestimmten Unterthemen anbieten.

Zwischen Befragtenmerkmalen und Antwortverzerrungen bestehen sehr viele Beziehungen, die vom Erhebungsdesign abhängen. Es wäre praktisch unvorstellbar, wenn das jeweilige Thema für einige von ihnen nicht ein moderierender Faktor wäre. Insbesondere die soziale Erwünschtheit ist eine Form der Verzerrung, die stark vom Umfragedesign, den Teilnehmermerkmalen und dem Studienthema abhängt. Wikipedia bietet eine ziemlich gute Zusammenfassung auf Intro-Ebene:

Die Tendenz stellt ein ernsthaftes Problem dar, Forschung mit Selbstauskünften, insbesondere Fragebögen, durchzuführen . Diese Verzerrung stört die Interpretation durchschnittlicher Tendenzen sowie individueller Unterschiede.

Themen , bei denen das sozial erwünschte Antworten (SDR) von besonderer Bedeutung ist, sind Selbstberichte über Fähigkeiten, Persönlichkeit, Sexualverhalten und Drogenkonsum . Wenn die Befragten zum Beispiel mit der Frage „Wie oft masturbieren Sie?“ konfrontiert werden, können Befragte durch das gesellschaftliche Tabu gegen Masturbation unter Druck gesetzt werden und entweder die Häufigkeit zu niedrig angeben oder die Beantwortung der Frage vermeiden. Daher dürften die mittleren Selbstbefriedigungsraten, die aus Umfragen zur Selbstauskunft abgeleitet werden, stark unterschätzt werden.

Bei der Frage „Nehmen Sie Drogen/ illegale Substanzen?“ Der Befragte kann durch die Tatsache beeinflusst werden, dass kontrollierte Substanzen, einschließlich des häufiger verwendeten Marihuanas, im Allgemeinen illegal sind . Die Befragten fühlen sich möglicherweise unter Druck gesetzt, jeglichen Drogenkonsum zu leugnen oder zu rationalisieren, z. B. „Ich rauche Marihuana nur, wenn meine Freunde in der Nähe sind.“ Die Voreingenommenheit kann auch Berichte über die Anzahl der Sexualpartner beeinflussen . Tatsächlich kann die Voreingenommenheit für verschiedene Untergruppen in entgegengesetzte Richtungen wirken : Während Männer dazu neigen, die Zahlen aufzublähen, neigen Frauen dazu, ihre zu unterschätzen. In beiden Fällen sind die mittleren Berichte beider Gruppen wahrscheinlich durch die Verzerrung der sozialen Erwünschtheit verzerrt.

Andere Themen, die empfindlich auf soziale Erwünschtheit reagieren:

  • Persönliches Einkommen und Einkommen, oft überhöht, wenn es niedrig ist, und deflationiert, wenn es hoch ist.
  • Gefühle von geringem Selbstwert und/oder Ohnmacht, die oft geleugnet werden.
  • Ausscheidungsfunktionen, oft unbequem angegangen, wenn überhaupt diskutiert.
  • Einhaltung medizinischer Dosierungspläne, oft überhöht.
  • Religion, die oft entweder vermieden oder unbequem angegangen wird.
  • Patriotismus, entweder aufgeblasen oder, wenn er geleugnet wird, aus Angst vor dem Urteil der anderen Partei.
  • Bigotterie und Intoleranz werden oft geleugnet, auch wenn sie beim Responder vorhanden sind.
  • Geistige Errungenschaften, oft aufgeblasen.
  • Physisches Erscheinungsbild, entweder aufgepumpt oder entleert
  • Akte echter oder eingebildeter körperlicher Gewalt, die oft geleugnet werden.
  • Indikatoren für Nächstenliebe oder "Wohlwollen", oft überhöht.
  • Illegale Handlungen, oft geleugnet.
    [Betonung hinzugefügt.]

Eine vertretbare Ausnahme zum vorletzten findet sich bei Smith (1987): Menschen reagieren weniger großzügig und negativer auf „Wohlfahrt“ als auf „arm“.

Wikipedia erwähnt eine von vielen Maßnahmen für sozial erwünschte Reaktionen, merkt aber an:

Das Hauptproblem bei SDR-Skalen ist, dass sie Stil mit Inhalt verwechseln. Schließlich unterscheiden sich Menschen tatsächlich darin, inwieweit sie wünschenswerte Eigenschaften besitzen (z. B. Nonnen versus Kriminelle).

Ein weiteres Problem ist die potenzielle Mehrdimensionalität der Verzerrung der sozialen Erwünschtheit. Manches entsteht durch bewusst trügerisches Reagieren; eine andere Art entsteht aus unbewusster Selbsttäuschung. Das Ausmaß jeder dieser Arten von Verzerrungen durch soziale Erwünschtheit kann unterschiedlich von individuellen Unterschieden bei den Befragten und dem Thema und der Formulierung der Frage abhängen.

Wikipedia gibt auch einen kurzen Überblick über andere Antwortstile , einschließlich des extremen Antwortstils, der sich auf demografische (Song, 2007) und Persönlichkeitsfaktoren (Hamilton, 1968) bezieht. Eine entgegengesetzte Art von Stil, die Tendenz zu neutralen Antworten / „Weiß nicht“-Antworten, kann durch persönliche Unsicherheit, Schwierigkeiten bei der Aufgabe oder die Sensibilität des Themas verursacht werden (Coombs & Coombs, 1976), so dass dies ziemlich vollständig zu sein scheint Beispiel für eine Art Verzerrung, die von allen drei Faktoren abhängt. Ein anderer dieser Reaktionsstile, Duldung (und umgekehrt), ist eine ziemlich interessante Persönlichkeitsvariable für sich (Couch & Keniston, 1960); sein Einfluss kann begrenzt werden, indem das Format "stimme zu vs. stimme nicht zu" vermieden wird, aber dies kann in der Einstellungsforschung schwieriger sein als in einigen anderen Themen.

Darunter erwähnt Wikipedia, dass Anonymität, Vertraulichkeit und neutralisierte Verwaltung die Voreingenommenheit der sozialen Erwünschtheit verringern können, so dass in diesem Sinne kontextuelle Faktoren außerhalb der Frage selbst die Voreingenommenheit beeinflussen können, insbesondere wenn das Urteil anderer (z. B. Eltern, Kollegen, Arbeitgeber, Gesetz) vorliegt Vollstreckung) ist besorgniserregend (z. B. Kinder autoritärer Eltern, Freunde urteilender Menschen, Stellenbewerber, denen Persönlichkeitstests bevorstehen, Bewährungshelfer und frühere Verurteilte).

Ein besonders guter Übersichtsartikel, den ich zur Hand habe ( Schwarz, 1999 ), behandelt Fragen der „Frageformulierung, des Formats und des Kontexts“, einschließlich:

  • Mehrdeutigkeit, Unklarheit und Wortreichtum
  • Open-Ended Response (siehe auch Geer, 1988) vs. Frequency Reporting und Item Rating
  • Aktuelle Subjektivität, Bedarf an Expertise und Zeitabhängigkeit

Da dieser Artikel selbst eine Rezension ist, können Sie darin auch viele andere Referenzen finden. Ein weiterer Übersichtsartikel, der andere hier interessieren könnte, bezieht sich auf Fragen der Erhebungsmessung auf kognitive Probleme wie Gedächtnis, Verständnis und Schema-Priming (Jobe & Mingay, 1991), von denen ich leicht erkennen konnte, dass sie in bestimmten Kontexten und für bestimmte Personen mehr oder weniger relevant sind in einer Weise, die davon abhängen würde, wie eine Frage formuliert ist. Auch hier ein weiterer riesiger Referenzabschnitt, der nach weiteren Einzelheiten durchsucht werden muss. Noch eine Rezension ( Nisbett & Wilson, 1977) bezieht sich speziell auf Fehler (nicht unbedingt systematische Verzerrungen) in selbst berichteten Informationen über mentale Prozesse aufgrund begrenzter Selbstwahrnehmung / Einsicht und des Einflusses früherer Theorien oder Plausibilitätsbeurteilungen. Gutes Material, um es hier anzusprechen, wenn ich das so sagen darf!

Verweise

Coombs, CH, & Coombs, LC (1976). Mehrdeutigkeit des Items „Weiß nicht“ oder Unsicherheit des Befragten?. Public Opinion Quarterly, 40 (4), 497–514.

Couch, A., & Keniston, K. (1960). Jasager und Neinsager: Zustimmende Antwort als Persönlichkeitsvariable festgelegt. Journal of Abnormal and Social Psychology, 60 (2), 151–174.

Geer, JG (1988). Was messen offene Fragen? Public Opinion Quarterly, 52 (3), 365–367.

Hamilton, DL (1968). Persönlichkeitsattribute, die mit extremem Reaktionsstil verbunden sind. Psychological Bulletin, 69 (3), 192–203.

Jobe, JB, & Mingay, DJ (1991). Kognitions- und Umfragemessung: Geschichte und Überblick. Angewandte kognitive Psychologie, 5 (3), 175–192.

Nisbett, RE, & Wilson, TD (1977). Erzählen mehr, als wir wissen können: Verbale Berichte über mentale Prozesse. Psychological Review, 84 (3), 231–259. Online verfügbar, URL: http://www.apologeticsinthechurch.com/uploads/7/4/5/6/7456646/nisbettwilson.pdf . Abgerufen am 5. Februar 2014.

Schwarz, N. (1999). Selbstberichte: Wie die Fragen die Antworten prägen. Amerikanischer Psychologe, 54 (2), 93–105. Online verfügbar, URL: https://edit.ethz.ch/oat/education/material/material_06_07/material_empirical_methods_06_07/American_Psychologist_Self-Reports.pdf .

Smith, TW (1987). Das, was wir Wohlfahrt mit einem anderen Namen nennen, würde süßer riechen: Eine Analyse der Auswirkungen der Frageformulierung auf die Antwortmuster. Public Opinion Quarterly, 51 (1), 75–83.

Lied, X.-Y. (2007). Analyse von Multisample-Strukturgleichungsmodellen mit Anwendungen auf Lebensqualitätsdaten. In S.-Y. Lee (Hrsg.), Handbook of Latent Variable and Related Models , S. 279–302. Nordholland.