VL25 Open Science Flashcards
Was ist “Open Science” und welche Aspekte und Prinzipien umfasst es?
Open Science ist ein Ansatz, der darauf abzielt, wissenschaftliche Forschung transparenter, zugänglicher und reproduzierbarer zu gestalten. Die Grundprinzipien von Open Science umfassen Transparenz, Reproduzierbarkeit, Wiederverwendbarkeit und offene Kommunikation. Auf individueller Ebene bedeuten diese Prinzipien, dass alle Abläufe und Ergebnisse einer Studie transparent dokumentiert und der Wissenschaftsgemeinschaft zur Verfügung gestellt werden. Auf institutioneller Ebene beinhaltet Open Science strukturelle Veränderungen, die transparentes Handeln erleichtern und fördern.
Was sind Replikationsstudien und warum sind sie wichtig?
Replikationsstudien sind Untersuchungen, die darauf abzielen, die Ergebnisse früherer Studien zu überprüfen, indem sie diese Studien unter ähnlichen Bedingungen (je nachdem ob es eine direkte oder eine konzeptuelle Replikation ist) wiederholen. Sie sind wichtig, weil sie helfen, die Zuverlässigkeit und Gültigkeit wissenschaftlicher Befunde zu bestätigen. Replikationen tragen dazu bei, wissenschaftliche Behauptungen durch wiederholte Bestätigung zu untermauern und die Glaubwürdigkeit von Forschungsergebnissen zu stärken
Was unterscheidet direkte und konzeptuelle Replikation?
Direkte Replikationen versuchen, eine Studie so genau wie möglich nach denselben Methoden und unter denselben Bedingungen wie die Originalstudie zu wiederholen (exakt aber nie möglich).
Konzeptuelle Replikationen hingegen testen dieselbe Hypothese wie die Originalstudie, verwenden aber unterschiedliche Methoden oder Bedingungen.
Während direkte Replikationen die Robustheit der ursprünglichen Ergebnisse überprüfen, untersuchen konzeptuelle Replikationen die Generalisierbarkeit der Ergebnisse auf andere Kontexte und Methoden.
Es ist jedoch eher ein Kontinuum als eine kategoriale Unterscheidung
Was ist der Publication Bias und welche Folgen hat er?
Publication Bias bezeichnet die Tendenz, dass Studien mit positiven oder signifikanten Ergebnissen häufiger veröffentlicht werden als solche mit negativen oder nicht signifikanten Ergebnissen. Dies kann dazu führen, dass das wissenschaftliche Literaturbild verzerrt wird, da nicht alle durchgeführten Studien gleichermaßen berücksichtigt werden. Dadurch wird das Verständnis des tatsächlichen Forschungsstands verfälscht und es können falsche Schlussfolgerungen über die Wirksamkeit oder Gültigkeit von Theorien oder Interventionen gezogen werden .
Was versteht man unter p-Hacking und HARKing?
p-Hacking bezeichnet die Praxis, Daten so lange zu analysieren oder zu manipulieren, bis statistisch signifikante Ergebnisse erzielt werden.
• inadäquater Umgang mit Ausreißern
• Selektives berichten von Ergebnissen und abhängigen Variablen
• So lange Daten erheben bis ein Unterschied signifikant ist
HARKing (Hypothesizing After the Results are Known) bedeutet, dass Hypothesen erst nach Betrachtung der Ergebnisse formuliert und dann fälschlicherweise als ursprünglich vor der Datenerhebung aufgestellt dargestellt werden. Beide Praktiken können zu verzerrten und unzuverlässigen Forschungsergebnissen führen und die Integrität wissenschaftlicher Arbeit untergraben .
Welche Aspekte kennzeichnen einen transparenten Forschungsprozess nach Open Science Prinzipien?
Ein transparenter Forschungsprozess nach den Prinzipien von Open Science umfasst mehrere Aspekte, darunter:
• Präregistrierung von Hypothesen, Studiendesign und Analyseplänen: Studiendesign, Hypothesen und Analyseplan werden öffentlich spezifiziert und registriert, bevor die Datenerhebung beginnt.
• Registered Reports: Schon vor der Datenerhebung werden Hypothesen, geplante Methoden und vorgeschlagene Datenanalysen von Fachzeitschriften begutachtet und ggf. zur vorläufigen Veröffentlichung angenommen.
• Open Lab Notebook: Ein digitales Notizbuch, in dem die Planung, Durchführung und Auswertung von wissenschaftlichen Experimenten dokumentiert wird. Das Open Lab Notebook dient als organisatorisches Werkzeug, als Erinnerungshilfe und kann eine Rolle beim Schutz des geistigen Eigentums spielen.
• Open data: Wissenschaftler:innen veröffentlichen ihre Daten, die von anderen genutzt, weiterverbreitet und weiterverwendet werden dürfen.
• Open Materials: Materialien einer Studie (z.B. Fragebögen, Stimuli, Aufgaben) werden veröffentlicht, so dass andere Wissenschaftler:innen diese verwenden und die Studie replizieren können.
• Open Access: Literatur, die digital, online, kostenlos und frei von den meisten Urheberrechts- und Lizenzbeschränkungen ist.
• Open analyse code: Veröffentlichung sauberer, kommentierter und ausführbarer Analyseskripte (SPSS, R, Python,…). Diese umfassen alle Schritte von der Bereinigung der Rohdaten bis hin zu den inferenzstatistischen Analysen,Visualisierungen, Computersimulationen etc.
Was ist ein Registered Report und worin unterscheidet sich dieser von konventionellen Forschungsartikeln?
Ein Registered Report ist ein neues Artikelformat, bei dem Hypothesen, Methoden und geplante Analysen vor der Datenerhebung von Fachzeitschriften begutachtet und zur Veröffentlichung angenommen werden. Kommt häufig bei ambivalenter Datenlage vor. Es unterscheidet sich von konventionellen Forschungsartikeln, bei denen die Begutachtung erst nach der Datenerhebung und Analyse erfolgt. Registered Reports sollen das Risiko von Publication Bias, p-Hacking und HARKing reduzieren, da die Studienmethoden und -analysen bereits im Voraus festgelegt und begutachtet werden. Veröffentlichung unabhängig von Signifikanz der Befunde.
Was versteht man unter einer Präregistrierung? Welche fragwürdigen Forschungspraktiken werden dadurch vermieden?
Präregistrierung bedeutet, dass die Ziele, Hypothesen, Ausschlusskriterien sowie geplante und explorative Analysen einer Studie vor Beginn der Datenerhebung dokumentiert und archiviert werden. Diese Praxis hilft, fragwürdige Forschungspraktiken wie p-Hacking und HARKing zu vermeiden, da die Analysen im Voraus festgelegt und nicht nachträglich angepasst werden können, um signifikante Ergebnisse zu erzielen. Dadurch wird die Transparenz und Integrität der Forschung erhöht .
