Sitzung 10 (Prüfungen) Flashcards
Welche Gründe gibt es für ein schlechtes Prüfungsergebnis?(5)
- Schüler*innen folgen dem Unterricht nicht mit der nötigen Aufmerksamkeit oder bereiten sich nicht mit der nötigen Sorgfalt auf Prüfung vor (muss nicht zwingend auf mangelnden Willen zurückzuführen sein)
- Geprüfte Kompetenzen wurden im vorangegangenen Unterricht nicht effektiv genug vermittelt.
- Prüfung war unglücklich angelegt und/oder wurde auf ungünstige Weise durchgeführt.
- Schüler*innen sind durch die Ansprüche eines Faches überfordert.
- ungeeignete Messinstrumente
Welche Fragen sollte man sich nach einer durchgeführten Prüfung stellen?(5)
- Gibt es viele Fehler bestimmter Art?
- Haben die Aufgaben eine angemessene Schwierigkeit und Trennschärfe?
- wurde Lernziel von SuS erreicht?
- gibt es auffällige Leistungsveränderungen bei einzelnen SuS/ der ganzen Klasse?
- war die geforderte Mindestkompetenz angemessen?
Welche Fehlerarten gibt es?(5)
- Wahrnehmungsfehler
- Missverständnisse/ Verwechslungen
- Flüchtigkeitsfehler
- Wissensfehler
- Verständnisfehler
–> wenn sich bestimmte Fehlerarten häufen, kann dies an der Prüfung oder dem Unterricht liegen
Welchen Mehrwert haben die Analysen von Aufgaben nach einer durchfgeführten Prüfung?
- Ansatz für Maßnahmen im Unterricht
- Sensibilisierung für LK: welche Aufgabenstellungen sind angemessen
- Repertoire von angemessenen Aufgaben kann erarbeitet werden
Was drück die Itemschwierigkeit aus? Wie ist sie jeweils mathematisch definiert?
= wie schwer oder leicht Aufgabe ist
Zustimmungsrate = Anteil an Personen, die Item i richtig löst:
p(i) = R(i) / N(i)
R(i) ist Anteil richtiger Antworten
N(i) ist Gesamtzahl der Antworten
Für Aufgaben, in denen mehr als ein Punkt erreicht werden kann, berechnet sich die Itemschwierigkeit:
p(i) = xbar / x(max)
xbar = Mittelwert des Items
Was bedeutet bei der Itemschwierigkeit ein Wert von 0 bzw. 1?
bei 0 ist R(i) auch 0, also hat niemand Aufgabe richtig gelöst
bei 1 haben alle Aufgabe richtig gelöst
Welche Itemschwierigkeit ist optimal?
p = .5 (Aufgaben nicht zu leicht oder zu schwer)
Test sollte breite Streuung der Itemschwierigkeit umfassen (.2 bis .8), damit nach oben und unten differenziert werden kann
Was können LKs mit der Itemschwierigkeit überprüfen? Was ist der Nutzen?
Nutzen: Abgleich der erwarteten mit der tatsächlichen Schwierigkeit
extrem leichte Aufgaben: war SuS Aufgabe schon bekannt oder wurde Lernziel von allen erreicht?
extrem schwere Aufgaben: schlecht gestellte Aufgabe oder Wissens-/ Verständnislücken?
Was ist die Definition der Trennschärfe? Was ermöglicht sie?
Trennschärfe = Ausmaß in dem ein Item das Gesamtergebnis des Tests repräsentiert
- sie ermöglicht eine Einschätzung, wie gut ein Item zw. Personen mit hoher und niedriger Fähigkeitsausprägung trennt
(d.h. Items mit geringer Trennschärfe werden von Personen unabhägig von ihrem Fähigkeitsgrad gelöst)
Wie wird die Trennschärfe bestimmt?
über die sog. Item-Gesamt-Korrelation
r(it) = r (X(i), X(Gesamt-i))
X(i) : Antwort von Item i
X(Gesamt-i) : Testwert der Person auf allen anderen Items außer i
Wie reagieren LKs oft auf zu schwierige Prüfungen? Und wie kann dem Abhilfe geschaffen werden?
mit nachsichtiger Benotung, aber zukünftige Probleme sind dadurch nicht ausgeschlossen
durch Prüfungs- und Aufgabenanalyse können die Messinstrumente verbessert werden
Was ist die mittlere Item-Gesamt-Korrelation?
= ein Index für die Reliabilität (interne Konsistenz) eines Tests (Cronbachs α =
bezeichnet das Ausmaß, in dem die Aufgaben bzw. Fragen einer Skala miteinander in Beziehung stehen)
Wo liegt der Wertebereich der Trennschärfe? Und wie kann diese interpretiert werden?
zwischen -1 und 1
Interpretation:
- hohe positive TS: Item erfasst etwas ähnliches wie der Gesamttest
- TS nahe Null: Lösungsverhalten bei Item hat nichts mit Antwortverhalten bei restlichen Aufgaben zu tun
- negative TS: Aufgabe wird von fähigen Personen mit geringerer Wahrscheinlichkeit gelöst –> kann darauf hinweisen, dass in der Aufgabe Fehler ist/ mehrdeutig gestellt
Welche Trennschärfen sind erwünscht?
hohe Trennschärfen >.4
Inwieweit hängen Trennschärfe und Schwierigkeit zusammen?
- je schwieriger oder leichter, desto geringer ist die Trennschärfe
- je mehr Personen Item lösen (oder nicht) desto geringer wird Variabilität der Antworten –> Item kann nicht mehr stark mit dem Gesamtwert kovariieren
