Kryzys replikacji w psychologii

Question 1

Deryl Bem i parapsychologia (Journal of personality and social psychology)

Answer 1

• artykuł dotyczący zjawisk paranormalnych
• Bem postanawia dowieść istnienia zjawisk paranormalnych u zwykłych ludzi - przewidywanie przyszłości i przeczuwanie zdarzeń
• 9 eksperymentów nt. zjawiska prekognicji
• jeden z eksperymentów: na ekranie monitora, w dwóch miejscach, pojawiały się zdjecia afektywne - osoba pokazywała, gdzie zdjęcie ma się pokazać

Question 2

Deryl Bem i parapsychologia (Journal of personality and social psychology): wyniki i wnioski

Answer 2

• wyniki: bodźce erotyczne oraz negatywne - lepiej pokazywali
• wnioski: zjawisko prekognicji istnieje
• wersja 2: priming afektywny
• wersja 3: oddtwarzanie bodźców, których mają się uczyć w przyszłości
• nie udało się zreplikować innym badaczom - false positive

Question 3

Deryl Bem i parapsychologia (Journal of personality and social psychology): dlaczego coś nie pykło

Answer 3

• moc obserwowana i moc oczekiwana – prawdopodobieństwo, jaka jest szansa, że uzyskamy wynik istotny statystycznie na jakimś poziomie istotności
• prawdopodobieństwo odrzucenia H0 jest znacznie niższe niż graniczne przyjęte dla błędu publikacyjnego.
• siła efektu jest niewielka – dodając moc efektu widzimy, w ilu eksperymentach może nie wyjść istotny wynik – moc łączna wynosi 6,27 w 6 eksperymentac (na 9) efekt powinien wystąpić, ale 2 lub 3 eksperymenty powinny pokazać, że efekt nie wystąpił [vs Bem twierdził, że we wszystkich udało się wykazać efekt].

Question 4

Skala pozytywnej psychologii - Yong, 2012 (Nature)

Answer 4

• przegląd systematyczny - odsetek badań wykazujących pozytywne efekty
• większa skłonność do wykazywania efektów zgodnych z hipotezami

Question 5

Istota programu badań empirycznych w psychologii: Wojciszke, 2004

Answer 5

• konieczność projektowania serii badań
• seria badań wg. SMAR

Question 6

Replikacje w psychologii społecznej: Makel, Plucker, Hegarty, 2012

Answer 6

• SMAR nie zapewnia, że ktoś sprawdzi co robimy
• replikacje zazwyczaj przez tego samego autora (a to źle)
• wynika to z postulatu kumulatywności wiedzy
• zazwyczaj pubikowane są udane replikacje

Question 7

Rodzaje replikacji

Answer 7

• replikacja literalna (sam autor robi to samo)
• replikacja bezpośrednia (inny badacz robi to samo)
• replikacja konceptualna (wprowadzenie modyfikacji)

Question 8

D. Stapel - chęć bycia docenianym

Answer 8

• im więcej publikujesz tym lepszym twórcą jesteś
• Stapel chciał więcej publikować, więc wymyślał dane, fabrykował i powiększał bazy danych no i miał ogrom publikacji

Question 9

Stapel - co poszło nie tak?

Answer 9

1. Brak niezależnej interwizji
2. niesamodzielność doktorantów, ich wygoda
3. silna pozycja władzy
4. zbyt ładne wyniki badań
5. nie było przyjęte do wtedy dzielenie się surowymi wynikami badań

Question 10

Nicolas Gueguen

Answer 10

• mężczyźni noszący futeral na gitarę atrakcyjniejsi, kobiety z cycami oraz w wysokich obcasach skuteczniejsze w wywieraniu wpływu społecznego, kolor czerwony zwiększał szansę na podwózkę
• produkował rocznie ok. 10 badań, ogromne próby i brak współautorów
• najpierw sie tłumaczył, ale nie chciał pokazać baz danych - okazało się, ze dawał swoim studentom badania do przeprowadzenia jako HW, oni wymyślali dane a on to potem publikował

Question 11

Jak sprawić, zeby wyniki były bardziej istotne ;pp

Answer 11

• dwie zmienne zależne
• dodanie 10 obserwacji więcej
• kontrola płci
• usunięcie (lub nie) jednego z warunków

Question 12

Prawo wielkich liczb

Answer 12

• duże próby redukują szansę uzyskiwania przypadkowych zależności
• efekt może nie istnieć, a może się ukazać przy pewnej grupie