Aula 10 Flashcards
Fiabilidade
Avalia em que medida um instrumento ou processo de medição produz o mesmo resultado independentemente da forma e altura em que é aplicado.
A fiabilidade é parte integrante da validade. Para existir validade tem de haver fiabilidade.
O conceito de fiabilidade engloba duas significações habituais:
Consistência interna: os itens que constituem o instrumento apresentam-se como um todo homogéneo. Estima-se pelos métodos de Alfa de Cronbach, KR-20 e o método da bipartição
Estabilidade temporal: refere-se a estavilidade dos resultados obtidos pela mesma amostra em dif momentos de preenchimento do instrumento. Estima-se por um coeficiente de correlação
Qualquer medida, pontuação x, obtida num instrumento por um indivíduo tem sempre duas componentes aditivas.
O verdadeiro score e o erro de medida
Erro de um instrumento
O erro, é a variabilidade observada no processo de mensuração de um instrumento. A ausência de erro é a consistência (termo fundamental para definir o conceito de fiabilidade
Como se obtém o cálculo da fiabilidade?
Obtém-se pela razão entre duas variâncias: a real e a do erro
Quantas fontes de erro podem ser quantificadas?
É possível quantificar 3 fontes de erro:
1. Consistência no conteúdo
2. Estabilidade no tempo
3. Consistência entre observadores (quando usamos pessoas ao invés de instrumentos)
Métodos para cálculo da fiabilidade?
- Consistência interna
- Bipartição
- Reteste com formas paralelas
- Teste-reteste
- Acordo interobservadores
Consistência interna
É o grau de uniformidade ou de coerência existente entre as respostas dos sujeitos a cada um dos itens .
Permite verificar se os itens associados a um determinado fator latente, medem de facto todos a mesma coisa.
Alfa de Cronbach- Consistência interna
É a medida de consistência usada por excelência, permite identificar itens que ameacem a fiabilidade.
Apresentando limitações pode ser substituído por outra medida: ómega de macdonald.
Deve ser usado quando os itens se distribuem por uma escala ordinal.
Os seus valores variam entre 0 e 1. Entende-se que a consistência interna será um tanto maior quanto mais perto do 1 estiver
Critérios de recomendação de fiabilidade estimado pelo alpha e pelo Kr20
> .9 : excelente
.8- .9: boa
.7- .8 : aceitável
.6-.7: questionável
.5-.6: fraca ou pobre
<.5 : inaceitável
(George e Mallery)
De um modo geral, um instrumento é classificado como tendo fiabilidade apropriada quando o alfa ou kr20 é pelo menos .70 (Nunnally)
Limitações do Alfa e do KR20
Número de itens: a fiabilidade de um questionário pode ser aumentada quando mais itens são incluídos o que seria rquivalente ao conceito de diminuir o erro da amostragem com o aumento do tamanho da amostra
Quando o questionário é muito grande o alfa não deve ser utilizado
Ómega de Macdonald
O alfa de Cronbach tem como limitação principal o pressuposto de tau-equivalencia, isto é, assumir que todos os itens contribuem de forma semelhante para o construto.
Quando o princípio de tau é violado, o ómega de macdonald é um estimador de fiabilidade mais preciso .
Baseia-se nos pesos fatoriais, os quais são a soma ponderada das variáveis padronizadas.
Há vários tipos de ómega mas o usado para substituir o alfa é o ws(subscala)- para avaliar a consistência do fator latente ou wt(total)- para avaliar a consistência do instrumento.
O ómega reflete o verdadeiro nível de fiabilidade e não depende do número de itens.
Varia de 0 a 1 e é interpretado da mesma forma que o alfa e o kr20
Para considerar um valor de fiabilidade consideravel, o ómega deve estar entre os .70 e .90.
Especialmente para construtos multidimensionais, o ómega fornece uma estimativa melhor para o score composto