Experimentelles Forschungsdesign: S04

Seminar #28538 im Modul Methoden: Wissenschaftstheoretische Grundlagen, Datenerhebung und Statistik, Sommersemester 2024

Marko Bachl

Freie Universität Berlin

03. 05. 2024

Herzlich Willkommen

Agenda

  1. Check-in

  2. Experimentaldesigns

  3. Manipulation und Stimulus

  4. Aufgaben bis zur nächsten Woche

Check-in

Folien der heutigen Sitzung

Experimentaldesigns

Within- und Between-Subjects-Design

(Koch et al., 2019, Abb. 5.1)

Einfaktorielles Design

Generisches Maskulinum Gender-Stern*
1 2

Mehrfaktorielles Design (2 x 2)

Generisches Maskulinum Gender-Stern*
Foto eines Manns 1 2
Foto einer Frau 3 4

Mehrfaktorielles Design (2 x 5)

Generisches Maskulinum Gender-Stern*
Foto eines Manns 1 2
Foto einer Frau 3 4
Foto einer Gruppe 5 6
Foto ohne Menschen 7 8
Kein Foto 9 10

Mehrfaktorielles Design (3 x 5)

Generisches Maskulinum Gender-Stern* Gender-Doppelpunkt:
Foto eines Manns 1 2 11
Foto einer Frau 3 4 12
Foto einer Gruppe 5 6 13
Foto ohne Menschen 7 8 14
Kein Foto 9 10 15

Haupt- und Interaktionseffekte

  • aV: Gedanklicher Einbezug von Frauen
  • Haupteffekt des Fotos
Generisches Maskulinum Gender-Stern*
Foto eines Manns – –
Foto einer Frau + +

Haupt- und Interaktionseffekte

  • aV: Gedanklicher Einbezug von Frauen
  • Haupteffekt der Sprache
Generisches Maskulinum Gender-Stern*
Foto eines Manns – +
Foto einer Frau – +

Haupt- und Interaktionseffekte

  • aV: Gedanklicher Einbezug von Frauen
  • Haupteffekt von Foto und Sprache
Generisches Maskulinum Gender-Stern*
Foto eines Manns – +
Foto einer Frau + ++

Haupt- und Interaktionseffekte

  • aV: Gedanklicher Einbezug von Frauen
  • Interaktionseffekt von Foto und Sprache (Verstärkung)
Generisches Maskulinum Gender-Stern*
Foto eines Manns – +
Foto einer Frau + +++

Haupt- und Interaktionseffekte

  • aV: Gedanklicher Einbezug von Frauen
  • Interaktionseffekt von Foto und Sprache (Abschwächung)
Generisches Maskulinum Gender-Stern*
Foto eines Manns – +
Foto einer Frau + +

Haupt- und Interaktionseffekte

  • aV: Gedanklicher Einbezug von Frauen
  • Einfaktorielles Design mit gemessenem Moderator
  • Interaktionseffekt von Foto und binäres Gender der Versuchsperson (VPN)
Generisches Maskulinum Gender-Stern*
VPN: Mann – –
VPN: Frau – +

Eine Frage der Power

  • Power: Wahrscheinlichkeit, einen Effekt zu finden, wenn er existiert
    • Stärke des wahren Effekts (je stärker, desto mehr Power)
    • Stichprobengröße und Zahl der Beobachtungen (je größer, desto mehr Power)
    • Präzision der Messung (je präziser, desto mehr Power)
    • Signifikanzniveau (je niedriger, desto mehr Power)
  • Muss bei Studienplanung berücksichtigt werden
  • Auch eine Frage der Forschungsethik

Studienplanung und Power

(Cohen, 1992, Table 2)

Für unsere Studien

  • Einfaktorielles Design mit 2 Gruppen
  • Haupteffekte, ggf. einfach zu messender, zweistufiger Moderator
  • Kleine bis mittlere Effekte
  • Mit \(n > 200\) hoffentlich zufriedenstellende Power

Fragen?

Manipulation und Stimulus

Manipulation und Stimulus

  • Manipulation: Aktive Variation der unabhängigen Variablen durch Forschende
    • Instruktionsbasierte Manipulation (z.B. Essay schreiben ➡️ Emotionen)
    • Umweltbasierte Manipulation (z.B. Störgeräusche ➡️ Konzentration)
    • Soziale Manipulation (z.B. Social Media Kommentare ➡️ Meinungsklima)
    • Stimulusbasierte Manipulation (häufigste Form in Kommunikationswissenschaft)
  • Stimulus: Wird den Versuchspersonen präsentiert

Praktische Überlegungen

  • Überlegen Sie zuerst, welche theoretische Ursache \(X\) Sie für den Effekt auf \(Y\) untersuchen wollen.
    • Manchmal direkte Entsprechung (z.B. Wahrnehmung eines Logos als grün), manchmal zunächst nur auf konzeptioneller Ebene erkennbar (z.B. Issue Fatigue)
  • Überlegen Sie dann, wie Sie \(X\) manipulieren können.
    • Manchmal direkt umsetzbar (z.B. Farbe des Logos), manchmal indirekte Manipulation (z.B. zwei Themen, die [hoffentlich] mit unterschiedlicher starker Issue Fatigue assoziiert sind)
    • Manchmal sauber manipulierbar (z.B. Farbe des Logos), manchmal ändern sich viele Eigenschaften des Stimulus (z.B. unterschiedliche Themen)

Stichworte für die Diskussion

  • externe und interne Validität
  • Konfundierung
  • ethische Aspekte
  • praktische Durchführbarkeit (innerhalb Online-Befragung)

Fragen?

Aufgaben bis zur nächsten Woche

Aufgaben bis zur nächsten Woche

Aufgaben

  • Entwicklung der Stimuli für die geplante Studie mit einfaktoriellem Zwei-Gruppen-Design. Bitte gestalten Sie die Stimuli so, dass sie in einer gemeinsamen Befragung des gesamten Kurses integriert werden können.
  • Festhalten des Ergebnisses im Wiki der Arbeitsgruppe und Stimulus-Dateien in geteiltem Ordner auf Blackboard bis Montag, 13. Mai, 9 Uhr.
  • Vorstellen der Stimuli in max. 10-minütiger Präsentation

Aktive Teilnahme

  • Koordination der Stimulientwicklung in der Arbeitsgruppe
  • Festhalten des Ergebnisses im Wiki der Arbeitsgruppe und Stimulus-Dateien in geteiltem Ordner auf Blackboard bis Montag, 13. Mai, 9 Uhr.
  • Vorstellen der Stimuli in max. 10-minütiger Präsentation

Fragen?

Aufgaben bis zur nächsten Woche

  • Wenn noch nicht erledigt: Konto auf Soscisurvey anlegen (falls noch nicht vorhanden) und benutzte E-Mail-Adresse an MB senden (für Einladung zum Befragungsprojekt)
  • Wenn noch nicht erledigt: Hochladen der Präsentation zur aktiven Teilnahme auf Blackboard
  • Entwicklung der Stimuli für die geplante Studie

Fragen?

Vielen Dank — bis nächste Woche

Marko Bachl

Literatur

Cohen, J. (1992). A power primer. Psychological Bulletin, 112(1), 155–159. https://doi.org/as7
Koch, T., Peter, C., & Müller, P. (2019). Das Experiment in der Kommunikations- und Medienwissenschaft: Grundlagen, Durchführung und Auswertung experimenteller Forschung. Springer VS. https://doi.org/mqwb