Fidelidade Flashcards

1
Q

Fidelidade

A

consistência dos resultados obtidos pelas mesmas pessoas, mesmo teste (ou equivalente) em diferentes ocasiões

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
2
Q

Na teoria clássica dos testes, o resultado obtido num teste é…

A

resultado verdadeiro + erro de medida (fatores aleatórios)

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
3
Q

O erro de medida é…

A

resultado obtido no teste - resultado verdadeiro

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
4
Q

O resultado verdadeiro é conceptualizado como…

A

o resultado médio que se obteria se se avaliasse o sujeito um número infinito de vezes

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
5
Q

Em estatística, uma observação é…

A

modelo sistemático + erro

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
6
Q

As diferenças entre indivíduos numa amostra de resultados são…

A

diferenças reais na capacidade + diferenças de outros fatores

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
7
Q

Variância total é…

A

variância sistemática + variância erro

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
8
Q

A (…) é aquela que decorre de qualquer condição que seja irrelevante para o objetivo do teste

A

variância erro

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
9
Q

Fontes de variância erro em psicologia (3)

A
  • contexto da avaliação (ambiente, cotador…)
  • indivíduo (flutuações de humor…)
  • próprio instrumento (que influencia os resultados)
How well did you know this?
1
Not at all
2
3
4
5
Perfectly
10
Q

Como se minimiza o erro de medida?

A

Estandardizando as condições do teste (na aplicação e cotação)

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
11
Q

Tipos de fidelidade (5)

A
teste-reteste
de forma paralela
método das metades (split-half)
consistência interna (KR e Cronbach)
do avaliador
How well did you know this?
1
Not at all
2
3
4
5
Perfectly
12
Q

Fidelidade teste-reteste: o que é

A

aplica-se o teste em vários momentos e comparam-se os resultados.

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
13
Q

Fidelidade teste-reteste: fontes de erro

A

amostragem de tempo: flutuações aleatórias do desempenho (seja das condições do teste seja do sujeito)

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
14
Q

Fidelidade teste-reteste: limitações

A

Efeitos de memória e da prática

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
15
Q

Fidelidade teste-reteste: como se calcula

A

através do índice de fidelidade ou do coeficiente de fidelidade (Rxx)

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
16
Q

Índice de fidelidade - como se calcula

A

coeficiente de correlação (de Pearson por ex.) entre os resultados obtidos nos diferentes momentos
s verdadeiro / s resultados

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
17
Q

Coeficiente de fidelidade - como se calcula

A

índice de fidelidade ^2
ou
var. verdadeira / var. resultados(ou total)

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
18
Q

Coeficiente de fidelidade - como se interpreta

A

proporção de variância explicada pelo modelo (quanta da variância total é sistemática)

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
19
Q

Fidelidade de forma paralela - o que é

A

consistência da resposta a diferentes amostras de itens equivalentes

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
20
Q

Fidelidade de forma paralela - limitações (2)

A

Efeitos de prática

dificuldade em criar formas verdadeiramente equivalentes

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
21
Q

Método das metades (split-half) - o que é?

A

Dividir um mesmo teste em 2 metades, calculando um resultado para cada metade como se fossem 2 testes diferentes (e sobre os quais se calcula a fidelidade)

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
22
Q

A fidelidade no método das metades dá-nos…

A

a consistência dos itens na amostra de conteúdo

23
Q

Método das metades - vantagem

A

Contraria o efeito “aquecimento”, fadiga, aborrecimento, prática, etc.

24
Q

Método das metades - desvantagem

A

Tendem a ser longos

25
Fidelidade do método das metades - como se calcula
índice de fidelidade (correlação) com a correção de Spearman-Brown
26
Fidelidade de consistência interna - o que nos dá
dá-nos quão correlacionados entre si estão os itens do instrumento (consistência inter-item)
27
Fidelidade de consistência interna - fontes de erro (2)
- qualidade dos itens (amostragem de conteúdo) | - heterogeneidade do domínio do conteúdo (ex. vocabulário+aritmética)
28
Fidelidade de consistência interna - como se calcula (para itens dicotómicos e para outros)
- itens dicotómicos: fórmula Kuder-Richardson (KR-20) | - outros itens: alfa de Cronbach
29
Fidelidade de consistência interna - como se interpretam os resultados (KR-20 e alfa de Cronbach)
interpretam-se como coeficientes de determinação (proporção de variância sistemática em relação à variância total)
30
Fidelidade do avaliador - o que mede
as diferenças nos resultados consoante diferentes avaliadores/observadores.
31
Fidelidade do avaliador - como minimizar
estandardizando os procedimentos
32
Fidelidade do avaliador - como se calcula
através do Kappa de Cohen, que nos dá a proporção de acordo/concordância entre avaliadores face às suas avaliações acima do qual não foram avaliações ao acaso
33
Kappa de Cohen - fórmula
(acordo observado-acordo ao acaso) / (acordo máximo-acordo ao acaso) ou (p0-pe)/(1-pe)
34
Se é apenas necessária 1 sessão e tenho apenas 1 formato de teste, para avaliar a fidelidade posso recorrer...
ao método das metades ou calculando consistência interna (estabilidade inter-item)
35
Se tenho apenas 1 formato de teste e aplico-o em 2 sessões, estamos a falar da fidelidade...
teste-reteste
36
Se tenho 2 versões equivalentes do teste posso analisar a fidelidade recorrendo...
à forma paralela imediata (se os aplicar numa única sessão) | ou forma paralela com intervalo (se as aplicar em 2 sessões)
37
Diferentes tipos de coeficientes de fidelidade referem-se a diferentes tipos de erro.
Verdadeiro
38
O coeficiente de fidelidade no teste-reteste refere-se a que tipo de variância erro?
Amostragem de tempo
39
O coeficiente de fidelidade na forma alternada imediata refere-se a que tipo de variância erro?
Amostragem de conteúdo
40
O coeficiente de fidelidade na forma alternada retardada refere-se a que tipo de variância erro?
Amostragem de tempo e amostragem de conteúdo
41
O coeficiente de fidelidade no método das metades refere-se a que tipo de variância erro?
Amostragem de conteúdo
42
O coeficiente de fidelidade no Kuder-Richardson e Coeficiente Alfa (consistência interna) refere-se a que tipo de variância erro?
Amostragem de conteúdo e heterogeneidade de conteúdo
43
O coeficiente de fidelidade dos avaliadores refere-se a que tipo de variância erro?
Diferenças entre avaliadores
44
Como se calcula a variância de erro total de medida?
Somando todos os erros de medida de cada tipo de fidelidade (que por sua vez é 1-coeficiente de fidelidade)
45
Como se calcula a variância verdadeira (fidelidade)?
1-variância de erro total de medida
46
Como se interpreta a variância verdadeira?
É a variância verdadeira do teste, estável ao longo do tempo.
47
Como se calcula o erro padrão de medida?
EPM= desvio-padrão x raiz de (1-coeficiente de fidelidade)
48
Quanto maior a variabilidade dos resultados _A_ é o erro padrão de medida. Quanto maior a fidelidade _B_ o erro padrão de medida.
A: maior B: menor
49
Sendo qualquer instrumento de avaliação psicológica impreciso, só devo interpretar resultados que ultrapassem o intervalo dessa imprecisão.
Verdadeiro
50
Para interpretar diferenças de resultados e evitar o ênfase nas pequenas diferenças (típicas de um instrumento impreciso) devemos calcular...
o erro padrão da diferença
51
O erro padrão da diferença é sempre _A_ que o erro padrão de medida
maior (por causa da aditividade dos erros - somamos duas imprecisões de duas medidas diferentes)
52
Como se calcula o erro padrão da diferença?
raiz do quadrado dos 2 erros de padrão de medida
53
O limiar de significância para avaliarmos se as diferenças entre 2 observações são significativas calcula-se...
Erro padrão da diferença x 1,96