Evaluation Flashcards
Nenne und Definiere die 4 Faktoren von Messqualität
Objektivität - Unhabhängigkeit vom Betrachter
Reliabilität
Wann wird im Wasserfallmodell getestet
Ein mal, nach der Implementierung
Wie wird im V-Modell getestet?
Komponentenweise von Einzelfunktionen bis zum Gesamtsystem
Wie wird im Spiralmodell getestet?
In jedem Durchlauf
Welche Phasen und Stakeholder beinhaltet das Spiralmodell?
Requirements (User und Designer)
Scene Analysis (Designer)
Interface Design (Designer und System Developer)
Implementation (System Developer)
Integration and Test (User + System Developer)
Welche Maßstäbe für Messqualität gibt es?
Objektivität (Reproduzierbarkeit)
Reliabilität (Fehlerfreiheit)
Validität (Misst das was ich messen will)
Was ist Face Validity?
Plausibilität, dass das gemessen wurde was ich messen wollte
Was ist interne Validität?
Testergebnis kann eindeutig auf die Hypothese bezogen werden
Was ist externe Validität?
Übertragbarkeit des Testergebnisses auf andere Personen, Situationen und Zeitpunkte
Welche Kriterien für Nutzerorientierte Tests gibt es?
Testökonomie
Nützlichkeit
Verhältnismäßigkeit
Fälschungssicherheit
Was charakterisiert eine Hypothese
Annahme über Fakten, generalisierbar, falzifizierbar
klare Beziehung zwischen Variablen
Vorteile / Nachteile Qualitative Evaluation
+ Subtile und Unbekannte Effekte können Entdeckt werden
+ Ganzheitliches Bild
- Generalisierbarkeit schwierig
- Zeit- und Kostenintensiv
- Kleinere, oft nicht repräsentative Stichprobe
Vorteile / Nachteile Quantitative Evaluation
+ Generalisierbare, vergleichbare und reproduzierbare Ergebnisse
+ geringe Kosten
+ Größere, repräsentativere Stichproben
- Nur bekannte Fakten können überprüft werden
- Nimmt nur Ausschnitte auf
Welche Skalenniveaus kennen wir?
Nominal: Namen
Ordinal: Namen mit Reihenfolge
Intervall: Werte mit Reihenfolge und Abstand
Ratio: alles + Nullpunkt
Bedeutung: manifest vs latent
direkt, indirekt messbar
Signifikanztest:
Misst die Wahrscheinlichkeit dass die gemessene Stichprobe der gleichen Verteilung wie die angenommene Verteilung der Grundgesamtheit folgt
Auf welchen Achsen kann man Testmethoden klassifizieren?
Theoretische Basis vs. Einfachheit der Messung
Was ist ein vertikaler Prototyp?
Ein Prototyp der ein einzelnes Feature in seiner ganzen Funktionalität abbildet (Storyboard)
Was ist ein horizontaler Prototyp?
Ein Prototyp der das Gesamtsystem mit geringem Funktionsumfang abbildet. (Funktionale Beta eines Programmfeatures)
Unterschied Summative vs Formative Evalution
alles auf einmal vs iterativ
