Metaanalyse Flashcards
Was ist die Grundidee der Metaanalyse?
Empirische SPV als Grundlage für die Schätzung des wahren Wertes
Vergleichbarkeit der Studien wichtig
Was ist das Hauptergebnis der Metaanalyse?
Gewichtete mittlere Effektgröße aus den Effektgrößen mehrerer Studien
präzise Schätzung des jeweiligen Populationseffekts
Gewichtet an n
Was sind wichtige Einflussgrößen?
n in Einzelstudien
Methodische Qualität
Inhaltliche Unterschiede
Was ist die praktische Vorgehensweise?
- Literatursuche
- Auswahl relevanter Studien anhand festgelegter Kriterien (verbindlich!)
- Auswahl des Effektgrößenmaßes und Berechnung/Schätzung der Effektgröße für jede relevante Studie
- Überprüfung des Ergebnisses
Wie sucht man geeignete Literatur?
Möglichst umfassende Suche!
* Psychologische Fachdatenbanken
* Manuelle Suche in Zeitschriften
* Rückwärtssuche (Literaturverzeichnis) –> Wer wurde in wichtigen Studien zitiert?
* Vorwärtssuche: Von wem wurden wichtige Artikel später zitiert?
* Direkte Umfrage, Recherche im Internet
Was passiert bei der Auswahl relevanter Studien anhand festgelegter Kriterien?
- Erstellen von Kriterien (inhaltlich und methodisch)
- Vergleich der UVs und AVs
- Kategorisierung nach potenziellen Moderatorvariablen –> evtl. Gewichtung
Wie geht man bei der Auswahl des Effektgrößenmaßes und Berechnung/Schätzung der Effektgröße für jede relevante Studie vor?
Nur eine (aggregierte) Effektgröße pro SP!
* Effektgrößenmaß: fast immer r oder d/g (im Zweifelsfall r, weil generell verwendbar)
* Berechnung aus Rohdaten und Signifikanztestergebnissen –> Konvertieren alternativer Maße
* An n gewichtete Effektgrößen mitteln und KI bestimmen
Wie überprüft man das Ergebnis?
- Funnel-Plot (Zusammenhang zwischen Effektgröße und n bei einer Metaanalyse) –> Fehlen Größen aufgrund eines Publication Bias?
- Fixed oder Random Effects? –> Psychometrische Metaanalyse
Was sind Fixed Effects?
Es wird angenommen, dass alle Studien aus derselben Population stammen (oder dass zumindest die Effekte der Populationen, aus denen sie kommen, sich nicht unterscheiden)
Was sind Random Effects?
Man geht davon aus, dass in der Metaanalyse unterschiedliche Populationseffekte analysiert werden (realistischer als fixed effects!!)
Lösung: Psychometrische Metaanalyse –> Sind die Populationen homo- oder heterogen? Äpfel-Birnen-Problem
Was macht man bei der Psychometrischen Metaanalyse?
Varianzen anschauen:
1. Varianz der Effektgröße = Varianz der wahren Werte + Fehlervarianz (klassische TT)
2. Innerhalb einer Population gilt: Varianz der Effektgröße - Fehlervarianz = ca. 0
–> sind dann die Varianzen der Effektgrößen der Subgruppen deutlich kleiner als die ursprüngliche Varianz der einen Effektgröße spricht das für eine unzulässige ursprüngliche Zusammenfassung der Studien
Alternatives Random Effects Modell
Was ist die Annahme des Hedges-Olkin-Modells?
Marktführer
Populationsparameter sind normalverteilt um den Superpopulationsparameter herum.
Populationseffekte (wahre Wert) bilden Kontinuum und sind normalverteilt
H-O-Modell
Wie werden die einzelnen Studien gewichtet?
Anhand der Varianz ihrer SPV und der Varianz der Superpopulation
W*i = 1 / Vi + r^2
Vi: Varianz der SPV für Populationsparameter i (Quadrat des SE) –> je größer ni, desto kleiner Vi, desto größer Wi (große SP werden stärker gewichtet)
T^2: Varianz des Superpopulationsparameters –> Je kleiner T^2 desto größer Wi (T^2 = 0, wenn es nur eine Population gibt –> fixed Effects)
Wie geht man beim H-O-Modell vor?
Auf Basis des Superpopulationsparameters T^2 ggf. Aufteilung der Studien in Subgruppen für getrennte Analysen.
Populationsparameter 1 –> Welche MW in einer Population herauskommen ist abh. von n
Superpopulationsparameter –> es kommt immer der gewichtete Wert raus
Was ist die Trim&Fill Methode?
Iteratives nonparametrisches Schätzverfahren zur Korrektur von Publication Bias - im Moment umstritten