DE: Diagnostik von Lernprozessen & -ergebnissen Flashcards
Definition Schulleistungstests
Schulleistungstests sind Verfahren der pädagogischen Diagnostik, mit deren Hilfe Ergebnisse geplanter und an Curricula orientierter Lernvorgänge möglichst objektiv, zuverlässig und gültig gemessen und durch Lehrende oder Beratende ausgewertet, interpretiert und für pädagogisches Handeln nutzbar gemacht werden können.
Arten von Schulleistungstests
- fomelle SLT: bezugsgruppen- oder sozialnormorientiert; standardisiert (z.B. PISA, TIMMS, VERA, …)
- informelle SLT: sozialer oder kriterialer Bezug; nicht normiert (existieren eigl. nicht, da es test sein sollten, die den Gütekriterien perfekt entsprechen, aber nicht zentral erstellt werden – schafft keine Lehrkraft in der Praxis)
- informelle Tests: Schriftliche, mündliche und alternative Verfahren; schlechte Gütekriterien-Erfüllung (z.B. Exen, Schulaufgaben, Ausfragen, …)
Konstruktion normorientierter Schulleistungstests
1. Analyse der Lehrpläne (inhaltliche Validität)
2. Aufgabenkonstruktion (Aufgabentypen, Hilfsmittel, Schwierigkeit,…)
3. Vorerprobung an wenigen Fällen (Aufgaben verständlich?)
4. Testdurchführung an einer kleine Stichprobe (200-400 Schüler)
5. Aufgaben- und Testanalyse mit den Daten der ersten Stichprobe (Schwierigkeit und Trennschärfe ermitteln)
6. Testvalidierung (Validität prüfen, Reliabilitätskoeff. berechnen)
7. Testeichung an einer repräsentativen
Stichprobe
Einsatzmöglichkeiten sozialnormorientierter Schulleistungstests
- Vergleich des Leistungsstandes der ganzen Klasse mit der Eichstichprobe
- Überprüfung des eigenen Benotungssystems durch den Vergleich mit Testwertklassen
- Objektivierungsmöglichkeit bei Schulart- oder Kurswechsel
- Einsatz zur Lehr- und Lernsteuerung
- Einsatz zur Unterrichtsdifferenzierung (äußere Differenzierung: Einteilung in Leistungsgruppen)
Konstruktionsphasen bei kriteriumsorientierten Tests
1. Abgrenzung der Unterrichtseinheit, die geprüft werden soll
2. Curriculare Analyse: repräsentativen Überblick an Aufgaben auswählen
3. Aufgabenkonstruktion
4. Aufgabenanalyse
5. Einstufung der Ergebnisse (was bedeuten 20 erreichte Punkte?)
Beispiele für formelle Schulleistungstests
- Hamburger Schulleistungstest für 4. und 5. Klassen, HST 4/5 (Mehrfächertest9
- HAT 9 für 2. Halbjahr der 9. Klasse: zur Beratung über Laufbahn nach der Schule (Mehrfächertest)
- RT9+: Ende der 9. Klasse bzw. Anfang der 10. Klasse in Haupt- und Realschule (Rechentest)
- WLST (Würzburger Lesestrategie-Wissenstest): für die Klassen 7-12 (Lesetest)
- Westermann Rechtschreibtest 6+ (WRT 6+): Rechtschreibtest für 6. und 7. Klassen
Formate informeller Tests
- Performanz (Referate, Weitsprung…)
- lange Antworten (Essay, Aufsatz…)
- kurze Antworten: frei oder gebunden; falls gebunden: richtig/falsch oder Mehrfachwahl oder Zuordnung
Lerntagebuch: Merkmale
- soll die Handelnden dazu anhalten, die eigene Praxis zu erkunden, zu überprüfen und möglicherweise zu verändern
- Selbstbeobachtung
- systematisch/standardisiert
- geschlossene und offene Antworten möglich
- kontinuierliche, zeitnahe Erhebung der eingesetzten Strategien und Emotionen
- Diagnoseinstrument & Intervention
Lerntagebuch: mögliche Prompts
Kognitive Prompts
* Was weißt du bereits über dieses Thema?
* Zu welchem Thema / in welchem Bereich möchtest du mehr erfahren?
* Welche Lernstrategie / welches Vorgehen willst du zur Bearbeitung der Aufgaben anwenden?
Motivational-volitionale Prompts
* Wie hast du es geschafft, mit der Aufgabe zu beginnen?
* Wie konntest du dich gegen Ablenkung abschirmen?
* Was hat dir beim Lernen besonders viel Spaß gemacht?
* Mit was bist du besonders zufrieden?
Metakognitive Prompts
* Wie hast du deinen Lernprozess geplant?
* Hast du alles erreicht, was du erreichen wolltest?
* Bist du beim Lernen abgeschweift? Kannst du sagen, was der Auslöser war?
* Welches Vorgehen / welche Lernstrategie hat besonders gut funktioniert?
* Was willst du beim nächsten Lernen genauso machen? Was anders?
* Welche Inhalte hast du sehr gut verstanden? Welche Inhalte hast du noch nicht (so gut) verstanden?
Lerntagebuch: diagnostische Güte
- Hohe Objektivität: schriftliche, standardisierte Möglichkeit, seinen Lernprozess zu dokumentieren
- Hohe Validität (gute Vorhersagen): alle Phasen des Lernprozesses und die eingesetzten Lernstrategien (auch internale) sind diagnostizierbar
- Reliabilität schwer beurteilbar
Lerntagebuch: Empirie
- Mayr 1997: Das Lerntagebuch fördert im Gegensatz zum traditionellen „Prüfungslernen“ das langfristige Behalten von Inhalten, also das bedeutsame und anwendungsorientierte Lernen
- Holzäpfel et al. 2007: Durch die Spezifizierung von Prompts im Lerntagebuch werden mehr Elaborationen und mehr Organisationsstrategien angewendet
Funktionen schriftlicher Prüfungen
- Lehrzielkontrolle
- Dokumentation des Leistungsstands des Prüflings
- Dokumentation des Lehrerfolgs des Lehrenden
- Entscheiden über Vorrücken in Bildungsinstitutionen
Schriftliche Prüfungen: Gütekriterien
- hohe Durchführungsobjektivität (alle erhalten dieselben Aufgaben)
- Probleme mit Auswertungobjektivität (z.B. Eells 1995: Dieselbe LK bewertet dieselbe Prüfung zu verschiedenen Zeiten unterschiedlich) und mit Interpretationsobjektivität (klasseninternes Bezugssystem statt kriterialer Maßstab)
- Validitätsprobleme wegen mangelnder Auswertungskriterien, des Einflusses des Vorwissens & des klasseninternen Bezugssystems
- Reliabilität nicht wirklich überprüft
Verbesserung der Güte von schriftl. Prüfungen
vor der Durchführung:
- Hohe curriculare Validität anstreben => Orientierung der Aufgaben am Lehrplan
- Lehrstoff nach Themengebieten oder Lehrzielen strukturieren => Lehrzieltaxonomie von Bloom (Wissen, Verstehen, Anwenden)
- Festlegung der Aufgabenformate: Mischung aus offenen (Prüfen von Zusammenhangswissen) und geschlossene Aufgaben (Ausblenden von anderen Wissenskomplexen, höhere Gütekriterien)
nach der Durchführung
- Prüfen, welche Items nicht funktioniert haben
- Bewertung nach den vorher festgelegten Kriterien, nicht am Leistungsstand der Klasse
- Bei wiederholtem Einsatz des gleichen Testmaterials Reliabilität ermitteln und Validitätsindikatoren sammeln
Mündliche Prüfungen: Merkmale
- Interaktivität: steter Austausch von Botschaften
- Adaptivität: Möglichkeit, Frageverhalten anzupassen
- Einflussfaktoren der Kommunikationssituation sind von Bedeutung, unterliegt verschiedenen Einflüssen der sozialen Wahrnehmung => Sondersituation
