Chapter 2 - Experimental research Flashcards
What is descriptive research?
Descriptive investigation:
I descriptive investigation forklarer man en situasjon eller en serie hendelser. X skjer. (s.21)
Eks. observasjon, undersøkelser, fokus grupper and intervjuer.
What is relational research?
Relational investigation
Identifiserer relasjonene mellom flere variabler.
X er relatert til Y . (s.21)
Eks. observasjon, felt studie, undersøkelser
What is experimental research?
Experimental investigation
Identifiserer årsaker til en situasjon eller serie hendelser.
X er årsaken til Y . (s.21)
What is randomization in experimental research? Discuss several examples of randomization methods.
Randomization refers to the random assignment of treatments to the experimental units or participants.
Styrken til eksperimentel forskning er evnen til å finne ut av årsaksammenhenger. Eks. terningkast, Random Digit Table, Soft Ware, kron/mynt. (s.29)
What is a research hypothesis? What are the characteristics of a good research hypothesis?
A hypothesis i s a precise problem statement that can be directly tested through an empirical investigation. En hypotese dekker et mindre skoop enn teori og kan bli undersøkt med et enkelt experiment. En konkret hypotese er grunnmuren til et eksperiment og basisen til statistisk signifikant testing. En forskningshypotsese inneholder en null og alternativ hypotsese.
Nullhypotsen sier at det er ingen forskjell i det eksperimentet handler om, mens den alternative hypotesen sier at det er en forskjell.
En god hypotese inneholder:
- Presis, klart språk.
- Fokusering på et problem som er testbart med 1 eksperiment.
- Vise tydelig hva som er variablene
- Nevner kontroll grupper eller omgivelsene i eksperimentet klart.
What is a dependent variable?
Den avhengige variablen er den variablen som (gjerne) endrer seg og er avhengig av deltakerene og den uavhengige variablen. “Tid” er ofte brukt som en avhengig variabel. (s.25)
efficiensy, ease of learning, kognitive learning, demand, brukbarhet (s.26)
Dependent er avhengig av independent og brukerns adferd.
What is an independent variable?
Den uavhengige variablen er den variablene som ofte blir kontrollert av forskerene og som tydligvis skal påvirke den avhengige. Det er ofte denne som forskningen går ut på. (s.25)
3 kategorier:
Bruker: Alder, utdanning
Kontekst: hjemme, ute
Teknologi: (s.26)
Den uavhengige variablen er uavhengig av brukerens adferd.
What is a significance test? Why do we need to run significance tests?
Significance tests determine how confident we are that the results observed from the sampling population can be generalized to the entire population. Vi trenger de for å gjøre resultatene klarere og for å forhindre feil konklusjoner.
What is a Type 1 error? What is a Type 2 error?
Type 1 error kalles en falsk positiv og betyr at studie sier at nullhypotesen er feil når den egentlig er riktig. En Type 2 error kalles en falsk negativ og betyr at studie sier at nullhypotesen er riktig når den egentlig er feil. Generelt er Type 1 verre enn Type 2. Type 1 er et forsøk på å gjøre produktet bedre, men gjør det verre, mens Type 2 så gjør man ingenting når man burde gjort noe.
Discuss the practical implications of Type 1 errors and Type 2 errors.
Type 1 feil er gjerne verre og man senker derfor p verdien. Det fører til at det er større
sjanse for Type 2 feil (beta), men siden Type 1 feil er verre, så er det gjerne verdt det.
*Which properties should a good research hypothesis have?
Testable: The means for manipulating the variables and measuring the outcome variable must potentially exist
Falsifiable: Must be able to disprove the hypothesis with data
Parsimonious: Should be stated in simplest adequate form
Precise: Should be specific (operationalized)
Useful
Relate to existing theories and/or “point” toward new theories
Lead to studies beyond the present one (often hard to determine in advance) (lecture slides)
En god hypotese inneholder:
- Presis, klart språk.
- Fokusering på et problem som er testbart med 1 eksperiment.
- Vise tydelig hva som er variablene
- Nevner kontroll grupper eller omgivelsene i eksperimentet klart.
*What are the main components of an experiment?
- Treatments, or conditions: the different techniques, devices, or procedures that we want to compare
- Units: the objects to which we apply the experiment treatments. In HCI research, the units are normally human subjects with specific characteristics, such as gender, age, or computing experience
- Assignment method: the way in which the experimental units are assigned different treatments. (lecture slides)(s.27)
*Mention and explain other types of variables apart from IV and DV?
• Control variables What is held constant • Random variables What is allowed to vary randomly • Confounding variable What correlates with the independent + dependent variable (lecture slides)
*Mention two methods of randomization:
Software driven randomization
Random tables
*Mention some of the limitations of experimental research:
- Experimental research requires well-defined, testable hypotheses that consist of a limited number of dependent and independent variables.
- Experimental research requires strict control of factors that may influence the dependent variables.
- Lab-based experiments may not be a good representation of users’ typical interaction behavior.
