Bewerten von Literatur

Question 1

Was versteht man unter Reproduzierbarkeit?

Answer 1

Reproduzierbarkeit bedeutet, dass identische Schritte mit den gleichen Daten das gleiche Ergebnis liefern. Es ist eine technische Perspektive auf Nachvollziehbarkeit.

Question 2

Was sind allgemeine Kriterien zur Beurteilung von Literatur?

Answer 2

Qualität der Journale (Peer-Review, vertrauenswürdige Quelle)
Nachvollziehbarkeit der Studie
Relevanz der Ergebnisse
Angemessenheit der Methodenwahl
Korrektes methodisches Vorgehen
Aktualität und Angemessenheit der Literatur
Theoretische Fundierung
Ethisch korrektes Vorgehen

Question 3

Was ist Peer Review und wie läuft es ab?

Answer 3

Peer Review ist ein Prozess, bei dem Experten die Qualität eines wissenschaftlichen Manuskripts bewerten. Es umfasst:

1. Einreichung des Manuskripts
2. Kritische Begutachtung durch 2-5 Wissenschaftler
3. Entscheidung durch den Editor: Accept, Revise and resubmit, oder Reject

Question 4

Welche Vor- und Nachteile hat das Peer Review-Verfahren?

Answer 4

Vorteile:
Selbstorganisierte Qualitätskontrolle
Expertenwissen und hilfreiches Feedback
Ausgleich individueller Schwächen durch mehrere Reviewer

Nachteile:
Dauert lange
Wenige verfügbare Experten
Mögliche Interessenskonflikte
Anonymität kann zu unkonstruktiven Gutachten führen

Question 5

Was ist Open Peer Review?

Answer 5

Open Peer Review ist ein transparenter Peer-Review-Prozess, bei dem der gesamte Prozess dokumentiert und veröffentlicht wird, um die Entwicklung des Manuskripts nachvollziehbar zu machen.

Question 6

Was ist der Impact Factor und welche Probleme hat er?

Answer 6

Der Impact Factor misst die durchschnittliche Anzahl von Zitationen eines Artikels in einem Journal. Probleme:

Kann durch wenige stark zitierte Artikel verzerrt werden
Vergleichbarkeit zwischen Disziplinen schwierig
Kein Qualitätsmerkmal für einzelne Artikel

Question 7

Was ist der h-Index und welche Probleme gibt es damit?

Answer 7

Der h-Index misst die Produktivität und Zitationswirkung eines Wissenschaftlers, indem er die Anzahl der Publikationen zählt, die mindestens h-mal zitiert wurden. Probleme:

Konfundiert mit Karrierealter
Kann durch Selbstzitate oder Zitationskartelle manipuliert werden

Question 8

Was ist eine Retraction?

Answer 8

Eine Retraction ist das Zurückziehen eines veröffentlichten Artikels aufgrund von Fehlern bei der Datenerhebung, -auswertung oder weil der Artikel wissentlich Plagiate oder gefälschte Daten enthält.

Question 9

Was sind Predatory Journals?

Answer 9

Predatory Journals veröffentlichen Forschungsergebnisse gegen eine Gebühr ohne eine angemessene Qualitätsprüfung durch Peer Reviews. Diese Journale sind oft schwer von seriösen Quellen zu unterscheiden.

Question 10

Warum ist der Impact Factor kein zuverlässiges Qualitätsmerkmal?

Answer 10

Weil er durch wenige stark zitierte Artikel verzerrt werden kann und spezifische Inhalte weniger oft zitiert werden, was den IF einer Zeitschrift ungenau macht.

Question 11

Kann Peer Review die Qualität einer wissenschaftlichen Arbeit garantieren?

Answer 11

Nein, Peer Review bietet keine 100%ige Sicherheit, dass eine Quelle inhaltlich korrekt ist. Es erhöht jedoch die Wahrscheinlichkeit, dass die Arbeit legitime Methoden verwendet und ernst genommen wird.

Question 12

Welche Aspekte sollte man bei der Bewertung von Quellen nach Peer Review berücksichtigen?

Answer 12

Wer sind die Autoren?
Sind die Autoren Experten im Thema?
Gibt es Interessenskonflikte?
Wo wurde die Arbeit publiziert?
Ist der Journal Impact Factor relevant?

Question 13

Was ist Retraction Watch?

Answer 13

Retraction Watch ist eine Plattform, die Informationen über zurückgezogene wissenschaftliche Artikel bietet und die Hintergründe dieser Retractions aufarbeitet.

Question 14

Was ist das Kardinalproblem von Predatory Journals?

Answer 14

Sie untergraben die wissenschaftliche Integrität, indem sie Forschungsergebnisse ohne angemessene Überprüfung veröffentlichen, was die Verbreitung von fehlerhaften oder gefälschten Ergebnissen fördert.

Question 15

Warum sollte man bei der Literaturrecherche auf vertrauenswürdige Literaturdatenbanken setzen?

Answer 15

Vertrauenswürdige Datenbanken wie EBSCOHost bieten geprüfte Inhalte, die durch Peer Review validiert sind, und vermeiden die Aufnahme unseriöser Quellen wie Predatory Journals.

Question 16

Wie beeinflusst wirtschaftlicher Druck die Qualität wissenschaftlicher Veröffentlichungen?

Answer 16

Wirtschaftlicher Druck kann zu einer Priorisierung von Quantität über Qualität führen, insbesondere bei Verlagen, die hohe Profite erzielen, was die Verbreitung von minderwertiger oder fehlerhafter Forschung fördert.

Question 17

Warum sollte man bei neuen wissenschaftlichen Zeitschriften vorsichtig sein?

Answer 17

Neue Zeitschriften können unseriös sein, insbesondere wenn unklare Herausgeber, mangelnde Peer Reviews oder Predatory Practices vorliegen. Es ist wichtig, den Verlag und die Qualität der Zeitschrift sorgfältig zu prüfen.

Question 18

Was war der “Surgisphere”-Skandal?

Answer 18

Der “Surgisphere”-Skandal betraf eine Studie zu Hydroxychloroquin bei COVID-19-Patienten, die zurückgezogen wurde, weil die Autoren die zugrunde liegenden Rohdaten nicht bereitstellen konnten, was die Integrität der Studie in Frage stellte.

Question 19

Welche Auswirkungen haben Retractions auf die wissenschaftliche Gemeinschaft?

Answer 19

Retractions können das Vertrauen in die Wissenschaft untergraben, insbesondere wenn die zurückgezogenen Arbeiten weiterhin zitiert oder genutzt werden, was die Verbreitung von fehlerhaften Informationen fördert.

Question 20

Was ist der Kardashian-Index?

Answer 20

Der Kardashian-Index ist ein scherzhafter Index, der das Verhältnis der Social-Media-Follower eines Wissenschaftlers zu seinen Zitationen berechnet, um anzuzeigen, ob der öffentliche Einfluss des Wissenschaftlers möglicherweise übertrieben ist.

Question 21

Warum ist Reproduzierbarkeit in der Forschung wichtig?

Answer 21

Reproduzierbarkeit ist entscheidend, weil sie sicherstellt, dass die Ergebnisse einer Studie nicht zufällig oder fehlerhaft sind. Wenn andere Forscher die gleichen Ergebnisse unter den gleichen Bedingungen erzielen können, wird die Zuverlässigkeit und Glaubwürdigkeit der Studie erhöht.

Question 22

Was ist der Unterschied zwischen Reproduzierbarkeit und Replizierbarkeit?

Answer 22

Reproduzierbarkeit bedeutet, dass identische Daten und Methoden die gleichen Ergebnisse liefern. Replizierbarkeit hingegen bezieht sich darauf, dass andere Forscher ähnliche Ergebnisse erzielen können, wenn sie die Studie unter ähnlichen, aber nicht identischen Bedingungen durchführen.

Question 23

Welche ethischen Kriterien müssen bei wissenschaftlichen Studien beachtet werden?

Answer 23

Risiko-Nutzen-Abwägung
Freiwilligkeit der Teilnahme
Einhaltung ethischer Standards
Zustimmung durch die Ethikkommission
Transparente Berichterstattung

Question 24

Was versteht man unter Reaktivität in Experimenten?

Answer 24

Reaktivität tritt auf, wenn die Messung selbst das Verhalten der Versuchspersonen beeinflusst. Dies kann zu verfälschten Ergebnissen führen, da das gemessene Verhalten möglicherweise nicht repräsentativ für das tatsächliche Verhalten ist.

Question 25

Was ist eine Konfundierung und warum ist sie problematisch?

Answer 25

Konfundierung liegt vor, wenn eine Störvariable das Ergebnis eines Experiments beeinflusst und es schwierig macht, die Wirkung der unabhängigen Variablen klar zu erkennen. Sie kann die Validität der Studie erheblich beeinträchtigen.

Question 26

Was versteht man unter der Validität eines Experiments?

Answer 26

Validität bezieht sich darauf, ob ein Experiment tatsächlich das misst, was es zu messen vorgibt. Ein Experiment ist valide, wenn die Schlussfolgerungen, die aus den Ergebnissen gezogen werden, tatsächlich gerechtfertigt sind.

Question 27

Was ist der Unterschied zwischen Single-blind und Double-blind Peer Review?

Answer 27

Single-blind: Die Gutachter kennen die Identität der Autoren, aber die Autoren kennen die Gutachter nicht.
Double-blind: Weder die Gutachter noch die Autoren kennen die Identität des jeweils anderen, um Vorurteile zu minimieren.

Question 28

Warum ist die Teststärke (Power) in Experimenten wichtig?

Answer 28

Die Teststärke gibt an, wie wahrscheinlich es ist, einen tatsächlichen Effekt zu finden, wenn dieser existiert. Eine zu geringe Teststärke kann dazu führen, dass wahre Effekte nicht entdeckt werden (falsch-negative Ergebnisse).

Question 29

Welche möglichen Fehlerquellen gibt es im Peer Review-Prozess?

Answer 29

Subjektivität und Bias der Gutachter
Interessenskonflikte
Zeitdruck und unzureichende Expertise
Möglichkeit für persönliche oder institutionelle Netzwerke, die Bewertung zu beeinflussen

Question 30

Was bietet die Retraction Watch Datenbank?

Answer 30

Die Retraction Watch Datenbank bietet eine durchsuchbare Sammlung von zurückgezogenen wissenschaftlichen Artikeln, die Gründe für die Retractions und andere relevante Informationen enthält. Sie dient der Transparenz und hilft, die Integrität der Wissenschaft zu wahren.

Question 31

Warum ist es schwierig, Forschungsartikel allein anhand des Impact Factors zu bewerten?

Answer 31

Der Impact Factor bewertet nur die Häufigkeit von Zitationen in einer Zeitschrift, nicht jedoch die Qualität oder den wissenschaftlichen Wert einzelner Artikel. Einige hochzitierte Artikel können von geringer Qualität sein oder kontroverse Themen behandeln, die die Zitationen erhöhen.

Question 32

Welche Probleme treten bei der Rücknahme (Retraction) von Artikeln häufig auf?

Answer 32

Zurückgezogene Artikel werden weiterhin zitiert
Mangelnde Bekanntmachung der Retraction
Verzögerungen im Retraction-Prozess
Negative Auswirkungen auf das Vertrauen in die Wissenschaft

Question 33

Was ist der Nutzen von Open Data und Open Code in der Wissenschaft?

Answer 33

Open Data und Open Code fördern Transparenz und Reproduzierbarkeit, indem sie es anderen Forschern ermöglichen, die Ergebnisse einer Studie zu überprüfen und nachzuvollziehen. Dies trägt zur Vertrauenswürdigkeit und Integrität der Forschung bei.

Question 34

Welche Kriterien sollten bei der Auswahl von Fachzeitschriften berücksichtigt werden?

Answer 34

Renommee und Hierarchie der Zeitschrift
Qualität des Peer-Review-Prozesses
Impact Factor und andere Messwerte
Zielgruppe und Relevanz für das eigene Forschungsfeld
Transparenz und ethische Standards der Zeitschrift

Question 35

Welche Risiken birgt Fake Science für die wissenschaftliche Gemeinschaft?

Answer 35

Fake Science untergräbt das Vertrauen in wissenschaftliche Ergebnisse, fördert die Verbreitung von falschen Informationen und kann die öffentliche Wahrnehmung der Wissenschaft negativ beeinflussen. Dies kann langfristig zu Misstrauen gegenüber wissenschaftlichen Erkenntnissen führen.

Question 36

Warum nutzen Forscher Preprints, und welche Vorteile bieten sie?

Answer 36

Preprints ermöglichen es Forschern, ihre Ergebnisse schnell zu verbreiten und Feedback aus der wissenschaftlichen Gemeinschaft zu erhalten, bevor die formale Peer-Review abgeschlossen ist. Dies beschleunigt den wissenschaftlichen Diskurs und kann zu Verbesserungen vor der endgültigen Veröffentlichung führen.

Question 37

Wie beeinflusst der Publikationsdruck die wissenschaftliche Forschung?

Answer 37

Publikationsdruck kann Forscher dazu verleiten, minderwertige oder unethische Forschung zu betreiben, um ihre Veröffentlichungsquote zu erhöhen. Dies führt zu einer Überflutung des Marktes mit irrelevanten oder fehlerhaften Studien und kann die Qualität der Wissenschaft insgesamt verringern.

Question 38

Publikationsdruck kann Forscher dazu verleiten, minderwertige oder unethische Forschung zu betreiben, um ihre Veröffentlichungsquote zu erhöhen. Dies führt zu einer Überflutung des Marktes mit irrelevanten oder fehlerhaften Studien und kann die Qualität der Wissenschaft insgesamt verringern.

Answer 38

Anzeichen für Predatory Journals sind:

Hohe Gebühren ohne Peer Review
Unprofessionelle Webseiten
Fehlende Transparenz über Herausgeber und Gutachter
Aggressive Werbung für Einreichungen
Aufnahme in Beall’s List oder ähnliche Warnlisten

Question 39

Wie kann der Impact Factor von Zeitschriften verzerrt werden?

Answer 39

Wenige, aber stark zitierte Artikel können den Impact Factor unverhältnismäßig erhöhen. Auch kontroverse Themen, die viel diskutiert werden, können den IF steigern, obwohl die Qualität der Artikel möglicherweise nicht hoch ist.

Question 40

Zusammenfassung

Answer 40

Artikel bewerten zunächst nach Qualität des Inhalts; Peer-Review; Herkunft (AutorInnen, Verlag)

Vorsicht bei neuen Zeitschriften (Wer ist der Verlag? Wer sind die Herausgeber? Wer ist auf dem Board der Reviewer?)

Retraction als Möglichkeit der Selbstkorrektur der Wissenschaft (in der Praxis funktioniert das leider oft nicht so gut)

Aber leider fallen manchmal auch seriöse Wissenschaftler auf dubiose Quellen rein

EBSCO-Datenbank überprüft die Seriösität; MitarbeiterInnen dort können informiert werden bei Verdachtsmomenten

Problem für öffentliche Wahrnehmung: Fake News, Fake Science, Misstrauen der Wissenschaft