Kap. |0 - Usability testing Flashcards
Nevn to måter BH-testing er likt eksperimentelt design og to måter det skiller seg fra det.
Likt:
- Bruker kvantitative metrikker som måling av oppg.performance og tid
- Kontrollerte omgivelser med direkte observasjon - veldig kontrollert og målrettet
Skiller seg fra:
- Mer en del av utviklingen fremfor forskning
- i exp: generalisering/ikke generalisering, mens i BH-T: finne feil og bestemme hva/når skal rettes
- SKRIV MER HER FRA BOKA, S. 255
Hvilke business-faktorer driver ofte omfanget av BH-testing?
Tid, økonomi, ressurser, hurtighet
Hva bør komme først av brukerbasert test eller ekspertbasert test - hvorfor?
Ekspertbasert test kommer alltid først, fordi man da kan finne åpenbare feil gjennom strukturert inspeksjon (forvirrende ordlegging, misvisende layput etc). Brukerbasert test kan heller brukeren konsentrere seg om oppgaven som er gitt fremfor å bli distrahert av dårlig språk og forvirrende utseende.
Hva er en manuell sjekk i en automatisert BH-test?
Fordi et system ikke fanger opp ting som dårlig ordlegging, inkonsistent grensesnitt etc. Kan for eksempel sjekke om et bilde har alternativ bildetekst (), men ikke om denne teksten er klar og tydelig. Ofte sier systemet ifra når en slik manuell inspeksjon er nødvendig.
Hva er forskjellen på formativ og summativ BH-test?
Formativ = Lo-Fi; eksplorerende, teste tidlige designideer. Mye kommunikasjon mellom tester og bruker, Fokus på mottakelsen av grensesnittet fremfor hvor godt en oppgave kan utføres.
Summativ = Hi-Fi; mer formelt, målet er å evaluere effektiviteten, oppgavenivåmålinger, metrikker etc.
Hva er praktisk ståsted; hvilke businessfaktorer pleier å avgjøre hvor mange deltakere som deltar i BH-testing?
Drives av tid man har igjen, penger og tilgjengelige deltakere. Spør heller “hvor mange deltakere har vi råd til/tid til/mulighet til å få?” fremfor “Hvor mange trenger vi?”.
Hva er tre kvaliteter for en god oppgave i en oppgaveliste
- Må ikke være åpen for tolkning.
- Oppgaven bør tilsvare en oppgave man ofte kommer til å utføre med grensesnittet.
- Ikke lag oppgaver som brukeren allerede kan vite svaret på (“Finn ut hvem kongen i Norge er” etc).
Hvorfor kan det være utfordrende å utnytte brukerens personlige opplysninger i BH-testing?
Logistikk; Krever tillatelse fra brukeren, hvordan kvitter man seg med dataen (brenn alle spor?), må kanskje gjennom et review-board. s. 269.
Om de samles inn, brukes de ikke som del av oppgavene.
Hva er de tre vanligste kvantitative målingene i BH-testing?
Tid- og oppgaveperformance samt brukertilfredshet.
Hva er “Thinking aloud”-protokollen og brukes den mest under formativ eller summativ testing?
Betyr at brukeren snakker mens den utfører oppgavene, forklarer hva den gjør, hva den synes etc. Vanligst i formativ testing.
Kan gi veldig nyttig feedback, men kulturel bakgrunn kan begrense hvor mye de sier. Ofte kan det være bias for time-performance - løsning: reflection session i etterkant.
Hva er en reflection session?
Fordi oppgaven tar lengre tid jo mer de prater, kan det være lurere å se videoopptak rett etter oppgaven er utført og kommentere hva man gjør og hva man synes da. Dette er en reflection session.
Hvilke tre ting må man minne deltakerne om før de starter en BH-test?
1) At de kan trekke seg til enhver tid
2) Tidsbegrensninger
3) Om de får betalt eller ikke
Hvorfor bør du ikke gi noe identifiserende informasjon om deltakerne i den endelige rapporten?
Etikk.. Se boka.
Hva er to gode grunner til å bruke Wizard of Oz-tilnærming i testing?
Testing av konsepter uten å bygge dem fordi
1) Billigere
2) Mindre ressurskrevende
Hva skiller en teknologiprobe fra en kultur-probe?
- Kulturprobe: lære noe om mennesker, gruppen og livsstil
- Teknologiprobe: Prøver å lære noe om menneskene ved å eksponere dem for probe.
