Kap. 2 - Experimental research

Question 1

Hva er de tre typene behavioral research?

Answer 1

Deskriptiv, relational og experimental investigation

Question 2

Hva kjennetegner deskriptiv investigation?

Answer 2

Observasjon, surveys, fokusgrupper. Skal konstruere en eksakt beskrivelse av det som skjer - ingen tolkning

Question 3

Hva kjennetegner relational investigation?

Answer 3

Identifisere relasjoner mellom flere faktorer. X endrer seg når Y endrer seg. Kan bruke en korrelasjonsanalyse for å se om det er en sammenheng mellom X og Y - gir IKKE opphav til å bestemme årsaken til det observerte resultatet

Question 4

Hva kjennetegner experimental investigation?

Answer 4

Muliggjør identifikasjon av casual relations. Forteller hvordan noe skjer og noen ganger hvorfor. Gjør at forskere kan manipulere måten vi gjør forskning på og oppnår ønsket resultat

Question 5

Hva er en hypotese?

Answer 5

Et presist problem-statement som kan testes direkte gjennom empirisk undersøkelse. Mindre og mer konsist enn en “teori”

Question 6

Hva er en nullhypotese?

Answer 6

Beskriver en antatt virkelighet. I forskning prøver man å avvise denne oppfattelsen til fordel for en alternativ hypotese. Disse to bør være motsetninger til hverandre

Question 7

Hva er en alternativ hypotese?

Answer 7

En hypotese som er stilt opp som en motsetning til nullhypotesen (som er den vi ønsker å motbevise)

Question 8

Hva er en avhengig variabel?

Answer 8

En variabel som forskeren er interessert i å finne ut av. Denne variablen påvirkes av uavhengig variabel.

H: Individers utdanning (uavhengig variabel) påvirker stemmegivning (avhengig variabel).

H2: Ingen forskjell mellom rullemeny og pop-up-meny (uavh. var) i tid (avh.var) når man skal lokalisere sider.

Question 9

Hva er en uavhengig variabel?

Answer 9

Variabel som er uavhengig av deltakerens utførelse. Den kan kontrolleres av forsker.

H: Individers utdanning (uavhengig variabel) påvirker stemmegivning (avhengig variabel).

H2: Ingen forskjell mellom rullemeny og pop-up-meny (uavh. var) i tid (avh.var) når man skal lokalisere sider.

Question 10

Rams opp typiske uavhengige variable i HCI-forskning

Answer 10

Alder, kjønn, erfaring, utdanning etc.

Question 11

Hva er typiske avhengige variable i HCI-forskning?

Answer 11

1) Efficiency (hvor raskt man kan utføre en oppg)
2) Accuracy (tilstander der brukeren/systemet gjør feil)
3) Subjective satisfaction (brukers oppfattede tilfredsstillelse med interaksjonen - likert scale)
4) Ease of learning and retention rate (hvor enkelt det er å lære, og hvorvidt denne kunnskapen sitter over tid)
5) Physical or cognitive demand (hvor lenge man kan interagere før man blir sliten)

Question 12

Hvilke komponenter har vi av et eksperiment?

Answer 12

1) Treatments/conditions - de ulike teknikker, enheter eller prosedyrer som vi vil sammenlikne
2) Units - objektene som får tildelt og skal utføre treatmentsene - i HCI ofte mennesker med ulike karakteristikker
3) Assignment method - Måten units blir tildelt ulike betingelser/treatments

Eksempel: Sammenlikning av hurtighet ved bruk av tre ulike tastaturer.
Treatment = Type tastatur
Unit = Deltakerne
Assignment method = kron eller mynt (fordi de fleste kjenner til standardtastaturet, og derfor må det være tilfeldig)

Question 13

Hvilke andre variable har vi, enn avhengige og uavhengige?

Answer 13

1) Kontrollvariable - det som er konstant
2) Tilfeldige variable - det som varierer tilfeldig
3) confounding variable - noe som påvirker både avhengige og uavhengige variable (variabel C påvirker både A og B)

Eks. til 3 - 100 menn og 100 kvinner tester et legemiddel for forkjørelse. Kvinnene får placebopiller. Flere kvinner enn menn ble syke. Hadde ingen kontrollvariable, og da kan det hende at det fantes en confounding variabel (feks. at menn er mer resistente for sykdommen enn kvinner) som kan ha vært årsaken. Kjønn er confounding med pillebruken.

Question 14

Hvilke to forhold har vi mellom variable?

Answer 14

1) Casual - en variabel er avhengig og blir påvirket av en annen.
2) Correlational - To variable påvirkes av en tredje variabel i samme retning

Question 15

Hva er randomization?

Answer 15

Den tilfeldige tildelingen av betingelser (treatments) til objekter (units). I et totalt randomisert eksperiment vil INGEN kunne forutse hvilken betingelse en unit blir tildelt.

Kron og mynt, trekke ut av hatten, tilfeldighetstabeller etc.

Question 16

Innenfor experimental design, hvilke tre designmetoder har vi? (forelesningen)

Answer 16

1) Correlational design
2) Quasi - experiment design
3) True experiment design

Question 17

Hva karakteriserer correlational design? (ikke-eksperiment)

Answer 17

Brukes for studier som undersøker forholder mellom ulike variable. Manipulerer ikke variabler gjennom eksperiment, men måler heller sammenheng/korrelasjon mellom variabler. Variablene observeres naturlig.

Question 18

Hva karakteriserer quasi-experiment design?

Answer 18

Brukes når randomisering er umulig eller upraktisk. Separerer deltakerne basert på ulike karakteristikker.

Question 19

Hva karakteriserer true experiment design?

Answer 19

Studier der variablene er manipulert og utfallet målt. Unit-tildelingen er randomisert og hypotesen er en cause-and-effect-statement (Y oppstår når X manipuleres).

Eks: Studenter vil huske flere ord fra en ordliste hvis de læres i stillhet fremfor med musikk på øret.

Question 20

Hva er significance testing?

Answer 20

Metode som brukes for å analysere og rapportere eksperimentell forskning. Når en populasjon er stor, og vi kun kan bruke et utvalg av den, må man bruke significancetesting for å finne ut av hvor selvsikre vi er på at resultatet vi fikk kan generaliseres til hele populasjonen.

Er det ikke usikkerhet involvert, kan man trekke konklusjoner direkte, uten signif.testing.

PS! Tror Alma sa mer om dette i forelesningen.

Question 21

Hva er Type I og Type II errors?

Answer 21

Significancetester er utsatt for disse typer errors.

1) Type I error = falsk positiv - muligheten av å forkaste nullhypotesen når den er sann og ikke bør forkastes.
2) Type II error = falsk negativ - muligheten av å ikke forkaste nullhypotesen når den er usann og bør forkastes.

Eks: H: “Denne mannen er skyldig og bør dømmes”
I - Mannen er faktisk kriminell, men frikjennes
II - Mannen er uskyldig, men blir dømt

Question 22

Hvilke begrensninger har man med experimental research?

Answer 22

• Krever veldefinerte og testbare hypoteser
• Krever streng kontroll av faktorer som kan påvirke avhengige variable
• Lab-baserte eksperimenter gir ikke alltid en god representasjon av brukers typiske adferd