Análise de itens Flashcards
Um bom instrumento depende de… (3)
- bons itens
- nº total de itens
- sequência ou posição dos itens no teste
Análise qualitativa de itens
juizos de especialistas (adequação dos conteúdos à população-alvo, clareza e correção gramatical…)
Análise quantitativa de itens
procedimentos estatísticos
Processo de geração de um instrumento (10)
- planeamento
- item pool
- análise qualitativa
- administração ensaio
- avaliar
- ajustar
- validação cruzada
- estandardização de todo o teste
- administrar a amostra normativa
- publicação da versão final
Processo de geração de um instrumento: planeamento (5)
- construtos
- população-alvo
- método de administração
- formato dos itens e respostas
- procedimentos de cotação
Processo de geração de um instrumento: administrar a amostra normativa
para além de aplicar, obter dados normativos, índices de fidelidade e validade
Processo de geração de um instrumento: validação cruzada
de modo a verificar se as estatísticas dos itens permanecem estáveis em diferentes grupos
Processo de geração de um instrumento: publicação da versão final +… (4)
+ manual de administração e cotação
+ dados de estandardização
+ estudos de fidelidade e validade
+ lista de materiais
Os itens de seleção de resposta podem ser…
dicotómicos ou politómicos
Os itens de construção de resposta são…
de resposta aberta (escrita, oral, desempenho…)
Independentemente do tipo de itens podemos avaliá-los quanto… (3)
- dificuldade
- discriminação (se diferencia indivíduos)
- justiça ou enviesamento dos itens
Índice de dificuldade (p) : como se calcula e interpretação
p=respostas corretas/total de indivíduos
quanto maior o p maior é a probabilidade de acertar
Para podermos comparar o índice de dificuldade entre grupos temos de…
estandardizar para z scores
a máxima diferenciação entre indivíduos no construto que está a ser medido é obtido com um índice de dificuldade de valor…
p=0,50
Testes de potência
responder o mais corretamente possível
Testes de rapidez
responder o mais rapidamente possível
Índices de discriminação: o que é e tipos (2)
é um indicador de como o avaliado se posiciona no construto avaliado pelo teste.
- critérios internos ao teste
- critérios externos
critérios internos ao teste: o que é, vantagem e desvantagem
se acertar aquele item é provável que tenha uma pontuação alta (e vice versa).
+ aumentam a fidelidade do teste
- não é apropriado para avaliar construtos complexos (como inteligência)
critérios externos ao teste: o que é, vantagem e desvantagem
idênticos aos da validação
+ aumentam a validade
- implicam uma medida independente do teste (mais custoso)
Índice de discriminação D: aplicável a… + fórmula
aplicável a itens de resposta dicotómica
D= p(acertos no grupo elevado) - p(acertos no grupo baixo)
O índice de discriminação varia entre… (e interpretação)
-1 e 1
D<0 discriminação em sentido contrário (mais acertos no grupo baixo)
D=0 os itens não discriminam
Alternativamente ao índice de discriminação D, podemos avaliar os itens recorrendo a…
coeficientes de correlação
O enviesamento dos itens significa que..
o item pode ter significados diferentes para diferentes subgrupos da população