3 Validita, reliabilita a chyba merania Flashcards

1
Q

X=T+e

A

T- true score – skutočné skóre
X – raw score - hrubé skóre
E – error – chybové skóre (náhodné)

  • Priemer chybových skóre je nulový
  • Korelácia medzi pravým a chybovým skóre je nulová
  • Korelácie medzi chybami paralelných testov je nulová
How well did you know this?
1
Not at all
2
3
4
5
Perfectly
2
Q

Reliabilita

A
  • Reliabilita vypovedá do akej miery je výsledok meranie určitej
    vlastnosti (IQ, miera depresie, prosociálne správanie) zaťažený
    chybou.
  • Reliabilita vypovedá o vzťahu medzi pravými skóre k rozptylu
    testových skóre
    (Ritomský, 2012)

Reliabilita zodpovedá konzistencii skóre získaných od rovnakej osoby,
keď je opakovane testovaná rovnakým testom v dvoch rôznych
situáciách alebo súborom ekvivalentných položiek (Anastasi & Urbina,
1997).

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
3
Q

Empirické overenie reliability

A

Prečo je nevyhnutné, aby bol test reliabilný?

  • Paralelné formy Vnútorná konzistencia (Split half)
  • Test – retest
  • Zhoda posudzovateľov
How well did you know this?
1
Not at all
2
3
4
5
Perfectly
4
Q

Paralelné testy

A
  • Testy, ktoré obsahujú dve formy
  • Napríklad Test inteletového potenciálu od Říčana, alebo Eysenckove
    osobnostné dotazníky
  • X1=T+E1
  • X2=T+E2
  • T1=T2=T
  • Testy by mali mať rovnaké chybové rozptyly.
  • Merajú obidve verzie naozaj rovnaké psychologické konštrukty?
  • Overenie prostrednícvom korelačného koeficientu.
How well did you know this?
1
Not at all
2
3
4
5
Perfectly
5
Q

Vnútorná konzistencia

A
  • Cronbachova alfa
  • Korelácie položiek medzi sebou – inter-item
  • Korelácia položky so zvyškom testu – item-total
  • Meria test, ktorý používam len jeden konštrukt/schopnosť. Ako
    potom interpretovať výsledky testu

pojebaný vzorec

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
6
Q

Musia mať všetky testy vysokú test- retest
reliability?

A
  • Kedy to nie je želené?
How well did you know this?
1
Not at all
2
3
4
5
Perfectly
7
Q

Zhoda posudzovateľov – Inter-rater reliabilita

A

? nejaké tabuľky

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
8
Q

Zdroje chybovej variancie pri rôznych typoch
reliability

A
  • Test – retest – Čas
  • Alternatívne formy – Obsah testu
  • Split - half – Obsah testu
How well did you know this?
1
Not at all
2
3
4
5
Perfectly
9
Q

Nakoľko sú výsledky psychodiagnostiky
presné?

A
  • Od čoho všetkého to závisí?
  • Reliabilita
  • Validita
  • Normy!!!
  • Examináto
    r
  • Typy noriem – IQ – deviačné skóre, T skóre, Z skóre, Percentilové normy,
    Steny, Staníny a pod.
  • Dôsledky rozhodnutí na základe výsledkov testov – PDW, Stroopov test –
    informácie v príručke a aktuálne výskumy
How well did you know this?
1
Not at all
2
3
4
5
Perfectly
10
Q

Reliabilita a Štandardná chyba merania

A
  • Štandardná chyba merania
    SEM= s𝑑 √1-r
    (odmocnica nad 1 aj r)
  • SEM – štd. chyba merania; sd – štd. odchýlka; r – reliabilita testu
  • Koeficient reliability, však priamo nehovorí o veľkosti chyby merania.
    Veľkosť chyby merania je užitočná v interpretácii presnosti testových
    skóre.
  • Skontrolujte si, či príručky k testom, ktoré používate obsahujú aj tento
    údaj
How well did you know this?
1
Not at all
2
3
4
5
Perfectly
11
Q

Gaussova krivka – Normálne rozloženie

A
  • Ako v diagnostike interpretujete výsledky napríklad WAIS-III?
  • Ako pravdepodobnosť, alebo ako zaradenie do „výkonnostnej
    skupiny“?
How well did you know this?
1
Not at all
2
3
4
5
Perfectly
12
Q

Nakoľko si môžem byť istý/á svojím
rozhodnutím

A
  • Vo viacerých publikáciách sa odporúča uviesť v správach aj intervaly
    spoľahlivosti (napr. 95%), v ktorých sa pravdepodobne skutočné skóre
    nachádza.
  • SEM
  • Presnosť merania naprieč distribúciou
  • Merajú psychologické testy všetky skupiny rovnako presne?
  • Akú validitu majú moje závery ak používam nereliabilné testy bez
    noriem (so starými normami)?
How well did you know this?
1
Not at all
2
3
4
5
Perfectly
13
Q

Validita

A
  • Samotný koncept validity prešiel v priebehu posledných 60 rokov výraznými
    zmenami, ktoré sa odzrkadlili a pretavili do súčasného chápania tohto
    konceptu, ktorý sa zmenil od chápania validity ako ukazovateľa testu (test
    meria to, čo má merať)
  • Dnes sa na validitu nazerá ako na mieru, do akej empirické
    poznatky/dôkazy a teória podporujú konkrétnu interpretáciu testových
    skóre pri doporučenom spôsobe používania testu (AERA, APA, & NCME,
    2014).
  • Validita v tomto poňatí teda nie je vlastnosť testu, ale charakteristika
    významu, ktorý pripíšeme testovému skóre alebo aj výsledkom výskumu.
    Podľa Zumba a Chana (2014, s. 9) validita vypovedá o kvalite záverov, hypotéz, tvrdení, rozhodnutí, ktoré vznikli na základe skóre v teste
How well did you know this?
1
Not at all
2
3
4
5
Perfectly
14
Q

Problémy súvisiace s validitou

A
  • Nedostatočná reprezentácia konštruktu
  • Variabilita irelevantná vzhľadom k meranému konštruktu
How well did you know this?
1
Not at all
2
3
4
5
Perfectly
15
Q

Typy validity alebo je len jedna validita?

A
  • Napriek tomu, že v štandardoch pre testovanie je validita chápaná ako
    jednotiaci konštrukt (existuje len jedna validita) a jednotlivé typy
    validity skôr predstavujú spôsoby a postupy, akým môžu byť
    akumulované poznatky o validite
  • Normatívna interpretácia – porovnávanie výkonu testovanej osoby s
    výkonom v referenčnej populácii.
  • Kriteriálna interpretácia – Kritické skóre na stupnici (napríklad
    MMSE) – rozdiel v interpretácii skóre nad a pod kritickou hodnotou –
    existuje rozdiel vo funkčnej úrovni.
How well did you know this?
1
Not at all
2
3
4
5
Perfectly
16
Q

Evidencia v prospech validity

A

Založená na:
* Obsahu testu
* Vnútornej štruktúre testu
* Vzťahu k iným premenným
* Postupoch reagovania na položky
* Dôsledkoch testovania (zamýšlané aj nezamýšlané)

17
Q

Validita - druhy

A
  • Obsahová validita reflektuje, do akej miery test meria všetky významné
    aspekty meraného konštruktu
  • Kriteriálna validita súvisí s tým, ako výsledky samotného testu korelujú s
    kritériom. (môže byť konkurenčná a prediktívna)
  • Konštruktová validita odzrkadľuje nakoľko test meria to, čo je zamýšľané
    aby meral a nie niečo odlišné (konvergentná a diskriminačná)
  • Inkrementálna a ekologická validita