Large Scale Assessments Flashcards
Wofür steht IEA? Worum handelt es sich dabei?
International Association for the Evaluation of Educational Achievement
Zusammenschluss unabhängiger Wissenschaftler*innen, die internationale Vergleichsstudien durchführen
Wie sah es vor der Wiedervereinigung mit deutscher Beteiligung an internationalen Schulleistungsstudien aus?
Zwichen 1970 und 1990 nahm keiner der deutschen Staaten an Vergleichsstudien teil.
Wann begann das Zeitalter der ausgereiften Large Scale Assessments?
ab den 1990ern
Welche Faktoren des Bildungssystems werden in der TIMSS-Studie untersucht?
Bildungssystem mit seinem intendierten Curriculum, über Fragebögen, die von Experten ausgefüllt wurden
Schulen und Klassenzimmer mit deren Implementiertem Curriculum durch Schulleiter- und Lehrerfragebögen
SuS mit dem erreichten Curriculum über Leistungstests und Fragebögen
Wofür steht TIMSS?
Trends in International Mathematics and Science Study, davor auch Third International Mathematics and Science Study
Wer führt TIMSS durch?
IEA
Was wird bei TIMSS überprüft?
Kompetenzen in Mathematik und den Naturwissenschaften
Welche SuS werden bei TIMSS betrachtet? Welche deutschen Kohorten nehmen Teil?
TIMSS betrachtet POP1 - Ende Primarstufe, POP2-Ende Pflichtschulzeit und POP 3: Ende Sekundarstufe. Seit 2007 nimmt Deutschland mit POP 1 teil, zuvor einmal in 1995 mit 2 und 3
In welchen Intervallen wird TIMSS durchgeführt?
alle 4 Jahre
Wofür steht PIRLS / IGLU?
Progress in International Reading Literacy Study / Internationale Grundschul-Lese-Untersuchung
Wer führt IGLU/PIRLS durch?
IEA
Was wird bei IGLU/PIRLS überprüft?
Lesekompetenz von Viertklässlern
In welchen Intervallen wird IGLU/PIRLS durchgeführt?
5 Jahre
Wofür steht ICILS?
International Computer and Information Literacy Study
Wer führt ICILS durch?
IEA
Was wird bei ICILS abgeprüft?
Computer- und Informationsbezogene Kompetenzen von Achtklässlern
In welchen Intervallen wird ICILS durchgeführt?
2013,2018,2023 - 5 Jahre
Wofür steht PISA?
Programme for International Student Assessment
Wer führt PISA durch?
OECD (Organization for Economic Co-Operation and Development)
Was wird bei PISA geprüft?
Kompetenzen in Lesen, Mathematik, NaWi sowie in Matheschwerpunktjahren Problemlösen
Was ist die Zielgruppe von PISA?
15-jährige, in DE zusätzlich Neuntklässler
Wann wird PISA durchgeführt?
Alle 3 Jahre, 2000,2003…2021
Was ist “Education at a Glance”/”Bildung auf einen Blick”?
OECD Bericht jährlich seit 1996 über Bildungsindikatoren - systematische Darstellung amtlicher Statistiken
Was ist “Bildung in Deutschland”/”Der Bildungsbericht”?
DE, für KMK und BMBF von unabhängigen Wissenschaftler*innen erstellt - Zusammenfassung von Bildungsindikatoren in DE z.B. Zahl der Wiederholer
Was ist “IQB-Bildungstrend”/früher “IQB-Ländervergleich”?
Studie zur Überprüfung der Bildungsstandards in den einzelnen Ländern
Was ist NEPS?
Nationales Bildungspanel/National Education Panel Study
Welche Studie wird von NEPS durchgeführt?
“Bildungsverläufe in Deutschland”
Wie ist NEPS strukturiert?
Interdisziplinäres Expertennetzwerk mit fast 200 Forschenden und über 30 Unis bzw Forschungseinrichtungen
Welche Bereiche betrachtet NEPS?
Verschiedene Etappen der Bildungslaufbahn, die bestimmte Säulen wie Kompetenzentwicklungen, Lernumwelten, Bildungsentscheidungen, Migrationshintergrund, Bildungsrenditen kreuzen
ABBILDUNG
Hier am besten mal die NEPS Grafik zu Kohorten ansehen, Folie 18
Wichtig: Start in allen Bereichen, damit Ergebnisse nicht erst in 25 Jahren, Erwachsenenkohorte bestand schon vorher
Warum sind bei NEPs die Stichproben in Klasse 5,9, Studienanfang und Erwachsene größer als die bei Neugeborenen und Kindergarten?
Um verschiedene Schulformen, Studiengänge und Berufswege abbilden zu können
Kalsse 5 6.800, Klasse 9 13.500, Uni 16.500, Erwachsene 13.000
Welche Faustregel gilt bei der allgemein verwendeten Regel der Messung von Kompetenzen in Punkten mit dem Mittelwert von 500 Punkten?
30-40 Punkte entsprechen in etwa einem Lernjahr
Was ist die international gängige Art der Skalierung von Schulleistungstests? Was ist die zugrundeliegenede Annahme?
Probabilistische Testtheorie - ermöglicht Persnenfähigkeit und Aufgabenschwierigkeit mit einer Skala darzustellen
Annahme: je höher Personenfähigkeit, desto wahrscheinlicher kann SuS Aufgabe lösen
Diagramm S. 22 ansehen
Warum können manche Aufgabenkurven nicht bei 0 liegen? MC Testfragen haben zumindest eine kombinatorisch bedingte Lösungswahrscheinlichkeit
Was sind Ausschlusskriterien für die Teilnahme an internationalen Schulleistungsstudien?
Von der nationalen Stichprobe können Schulen behinderter Schüler sowie sehr kleine Schulen nach bestimmten Regeln ausgeschlossen werden.
Einzelne Kinder können aus körperlichen oder geistigen Gründen ausgeschlossen werden
Ausgenommen werden können auch Kinder, die weniger als ein Jahr lang in der Testssprache unterrichtet wurden
Bei mehr ausschluss als einem bestimmten Schwellenwert, wird dies vermerkt in den Studienergebnissen
Wofür stehen ME, SE, SD in Perzentilbändergrafiken?
M - Mittelwert
SE- Standardfehler
SD - Standardabweichung
Woraus ergibt sich die Konfidenz für den Mittelwert?
M +- 2*SE
Wofür steht der Kasten um bestimmte Perzentilbänder?
Meist für Länder, die keinen signifikanten Unterschied des Mittelwerts zu Deutschland aufweisen
Was sagt die Breite des Perzentilbands im internationalen Vergleich aus?
Je breiter, desto heterogener die nationale Schülergruppe
Was sind wichtige Strukturelemente der IEA?
IEA Chair - Oberster Posten
Executive Director - Verantwortet die Schulleistungsstudien
International Coordinating Center - Boston
DPC - IEA Niederlassung in Hamburg
National Research Coordinators für jedes Land
Organisation IGLU?
Wissenschaftiche Leitung, Projektleitung, Wissenschaftliches Konsortium, Kooptierte Mitglieder
Was fällt bei den Staaten, die an IGLU 2016 teilgenommen haben, auf?
Es muss sich nicht um Staaten handeln, haben unterschiedliche Regionen unterschiedliche Schulsysteme macht das Sinn, wird in DE aber nicht gemacht.
Es gibt ein Nord-Süd Ungleichgewicht, Afrika und Südamerika sind quasi nicht vertreten
Welche Faktoren beeinflussen die Leistungsergebnisse?
Soziales und kulturelles Kapital
Bildungspolitische und äußere Rahmenbedingungen
Schulinterne Bedingungen: - Lehrer, Klasse, Unterricht
SuS
Elterliches Erziehungs- und Unterstützungsverhalten
Welche Arten von Kontextfragebögen gibt es?
Elternfragebögen zu Elternmerkmalen und Schülermerkmalen
Schülerfragebögen zu schülermerkmalen, Elternmerkmalen und Unterrichtsmerkmalen
Schülerteilnahmelisten zu Infos über SuS vom Lehrer,
Lehrerfragebögen zu Unterricht und Rahmenbedingungen
Schulfragebögen zu Unterricht und Rahmenbedingungen
Wie sind die Themenfelder in PISA vertreten?
Schwerpunktfach 50%, andere beiden je 25%
Was ist für die Beobachtung der Kompetenzentwicklung über verschiedene PISA Erhebungsjahre hinweg wichtig?
Für Betrachtung einer bestimmten Kompetenzentwicklung, muss das Startjahr diese Kompetenz als Schwerpunkt haben
Welche Staaten nehmen an PISA teil?
Nicht nur OECD Staaten, über diese ist aber am Ende der Bericht
Südamerika ist vertreten, Afrika nicht
Wer ist in DE für PISA verantwortlich?
Das Zentrum für internationale Bildungsvergleichsstudien, Zusammenschluss dreier bestehender Institutionen
