An II - Diagnostic I. Fidelitatea

Question 1

Ce e fidelitatea?

Answer 1

Masura in care un test masoara corect de fiecare data, fara sa aiba erori.

Question 2

Din ce e format un scor la test?

Answer 2

scorul real si eroarea de masurare

Question 3

Care sunt tipurile de erori?

Answer 3

Erori sistematice - sunt permanente, afecteaza media
Erori nesistematice - sunt accidentale, nu afecteaza medie, ci doar varibilitatea

Question 4

Care ar putea fi surse de eroare?

Answer 4

Continutul / formatul testului
Administrarea testului (mediu, persoana examinata, evaluator)
Cotarea si interpretarea rezultatelor la test

Question 5

Cum pot fi reduse erorile?

Answer 5

Studii pilot
Trainingul examinatorilor
Introducerea datelor
Metode statistice de analiza a datelor prin care pot fi detectate erorile
Utilizarea unor masuratori multiple ale aceluiasi construct

Question 6

Care sunt tipurile de fidelitate?

Answer 6

Omogenitate
- in cadrul itemilor unui test: consistenta interna
- a doua forme paralele: metoda formelor paralele
- timp: test-retest
- evaluator: inter-evaluator

Question 7

Care sunt metodele de calcul a fidelitatii?

Answer 7

Consistenta interna - coeficient de consistenta interna
Test-retest - coeficient de stabilitate
Forme paralele - coeficient de echivalenta
Interevaluatori - coeficient interevaluatori

Question 8

Ce forme poate lua consistenta interna?

Answer 8

Alpha Cronbach - toti itemii testului
Metoda injumatatirii - 2 parti ale testului

Question 9

Ce inseamna fidelitatea pe baza consistentei interne?

Answer 9

Metoda utilizata pentru a determina gradul in care toti itemii unui test masoara aceeasi varibila => un coeficient ridicat inseamna ca se refera la aceeasi variabila
Presupune o singura aplicare
Valori intre 0 si 1

Question 10

Interpretarea coeficientului Alpha Cronbach

Answer 10

<0.5 inacceptabil
0.5 - 0.6 slab
0.6 - 0.7 acceptabil
0.7 - 0.9 bun (pentru teste low-stakes)
>0.9 excelent (pentru teste high-stakes)

Question 11

Cum poate fi interpretat un alpha scazut?

Answer 11

Masoara dimensiuni diferite ale constructului
Itemii neclari
Itemi grei/ usori
Ghicirea raspunsurilor
Numarul mic de itemi

Question 12

Ce implica metoda injumatatirii?

Answer 12

Itemii testului sunt impartiti in 2 si se calculeaza corelatia dintre jumatati

Question 13

Ce implica metoda formelor paralele?

Answer 13

Corelatia scorurilor obtinute din utilizarea a doua forme paralele ale testului
Itemii trebuie sa fie logic izomorfi, sa aiba acelasi nivel de dificultate
Daca formele sunt intr-adevar paralele scorurile subiectului vor fi cat mai aproape de identice

Question 14

Cand se recomanda utilizarea metodei formelor paralele

Answer 14

Metoda potrivita cand se masoara caracterisitici generale ale persoanei

Question 15

Avantajele formelor paralele (2)

Answer 15

Nu permite memorarea raspunsurilor de la primul test
Nu permite cautarea raspunsurilor care nu s-a stiut raspunde

Question 16

Dezavantajele formelor paralele (3)

Answer 16

Necesita consum de timp prin doua administrari
Subiectii se pot plictisi daca testele sunt prea lungi
Este greu de realizat fiind dificila si costisitoare

Question 17

Ce implica metoda test-retest?

Answer 17

Corelatia scorurilor la un test administrat in doua perioade diferite de timp
Coeficienti de fidelitate test-retest au valori mai mari decat formele paralele

Question 18

Dezavantaj al formelor paralele

Answer 18

Solicita 2 administrari ale testului

Question 19

Cand se recomanda utilizarea metodei test retest?

Answer 19

In cazul testelor care masoara constructe relativ stabile in timp. Cu cat timpul administrarii creste, corelatia scade. Intevalul recomandat este de 4 - 8 saptamani.

Question 20

Care sunt factorii care influenteaza calculul stabilitatii?

Answer 20

Intervalul de timp dintre test si retest
Gradul de dificultate al itemilor
Schimbari ale subiectului determinate de prima aplicare

Question 21

Ce implica metoda inter-evaluatori?

Answer 21

Are la baza coeficientul de corelatie intre scorurile pe care mai multi evaluatori le acorda aceluiasi test. Utilizat cand cotarea este subiectiva si scorul e influentat de interpretarea persoanei care face cotarea.

Question 22

Ce tipuri de calcul al fidelitatii se recomanda pentru testele de performanta / viteza?

Answer 22

Performanta - subiectiul are timp suficient pentru completare
- metoda injumatatirii sau consistenta interna
- stabilitatea prin test-retest

Viteza - se asteapta ca subiectii sa nu termine realizarea itemilor
- metoda injumatatirii pentru jumatatile de test cronometrate separat

Question 23

In functie de omogenitatea itemilor ce tip de calcul al fidelitatii e recomandat?

Answer 23

Omogeni - consistenta interna crescuta
Heterogeni - consistenta interna scazuta => test - retest

Question 24

In functie de dinamicitatea itemilor ce tip de calcul al fidelitatii e recomandat?

Answer 24

Test dinamic (anxietate ca stare) - consistenta interna
Test static (inteligenta) - test - retest / forme paralele

Question 25

3 interpretari din practica a fidelitatii

Answer 25

1. Daca sunt luate decizii importante care impart indivizii pe baza unor diferente relativ mici, atunci se cere fidelitate crescuta >0.9
2. Daca sunt luate decizii preliminare, care impart persoanele intr-un numar mic de categorii, pe baza unor diferente individuale mari se accepta si o fidelitate mai scazuta
3. Daca se compara grupuri de persoane se accepta si 0.6 - 0.7. Daca se compara persoane >0.85

Question 26

Ce este intervalul de incredere?

Answer 26

IC = Xobservat +- z*SEm
cu cat e mai mica eroarea standard de masura, cu atat e mai fidel testul

Question 27

Distributia scorurilor in distributia standard

Answer 27

65% - intre +/- 1 std
95% - intre +/- 2 std
99% - intre +/- 3 std