TEMA 8. ANÁLISIS DE LOS ÍTEMS. Flashcards
En qué consiste el análisis de los ítems?
En evaluar y examinar los ítems con el objetivo de identificar y reducir los errores y aumentar la fiabilidad del test.
¿Cuál es el método mas usado para anlizar la validez de los ítems?
El método de congruencia en el que se pide a los sujetos que valores en una escala de 3 puntos el grado en el que el ítem está relacionado con la dimensión a medir.
¿Que procedimientos complementarios se usan para analizar los elementos de un test?
Análisis numéricos y cuantitativos, dificultad de los ítems, poder discriminativo, análisis de los distractores, fiabilidad y validez de los ítems.
Juicios de expertos, índice de congruencia.
Qué debemos realizar para llevar a cabo un análisis de ítems?
Disponer de una matriz de datos con las respuestas de los sujetos a cada uno de los ítems.
Forma de 1 y 0.
¿Qué es la dificultad empírica del ítem?
Proporción de sujetos que responden correctamente al ítem.
¿Qué es el poder discriminativo?
Capacidad del ítem para diferenciar a los sujetos con distinto nivel en el rasgo medido.
¿Qué es el funcionamiento diferencial de los ítems?
Si, sujetos de distintos grupos pero con el mismo nivel en el rango, tienen distintas probabilidades de éxito en el ítem.
En qué consiste la dificultad de los ítems?
Es la proporción de sujetos que aciertan el ítem.
Oscila entre 0 y 1.
0 es que ninguno ha respondido bien, ítem difícil.
1 es que todos han respondido bien, ítem fácil.
En qué consiste la discriminación?
Que un ítem discrimine adecuadamente significa que sirve para diferenciar los sujetos preparados de los no preparados.
¿Qué diferentes métodos para estudiar el poder discriminativo existen?
índice de discriminación basado en grupos extremos.
Índices de discriminación basados en la correlación: coeficiente de correlación omega; correlación biserial-puntual; correlación biserial.
Discriminación de los ítems de actitudes.
En qué consiste el índice de discriminación basado en grupos extremos?
Se coge el 27% de los sujetos que más preguntas han acertado, grupo superior, y el 27% de los que menos, grupo inferior.
Se calcula la proporción de respuestas correctas a un determinado ítem de los dos grupos.
Se calcula el índice D.
Oscila entre -1 y 1.
1= todas las personas del grupo superior hayan acertado el ítem y todas las del inferior lo hayan fallado (caso ideal).
0= el item es acertado en ambos grupos (caso peor)
Valores negativos = han acertado más sujetos no competentes que competentes con lo que el ítem no discrimina bien.
En qué consisten los índices de discriminación basados en la correlación?
Si un ítem discrimina bien presentará una correlación positiva.
La discriminación es la correlación entre las puntuaciones de los sujetos en el ítem y las puntuaciones en el test.
La puntuación total en el test ha de calcularse descontando la puntuación del ítem.
¿Qué es la CCI?
La relación entre la probabilidad de acertar un ítem con el nivel de aptitud o rasgo medido.
¿En qué consiste la discriminación en los ítems de actitudes?
No existen respuestas correctas o incorrectas.
Se valora si el sujeto, cuando supera el ítem, cumple la actitud que se está valorando.
Se estudia la correlación entre las puntuaciones obtenidas tanto en el ítem como en el test.
Se calcula la correlación entre ambos y luego podemos usar el coeficiente de correlación de Pearson para obtener el índice de homogeneidad.
Un IH inferior a 0,20 ha de ser eliminado.
Qué factores afectan a la discriminación?
Variabilidad: Cuando la varianza de un ítem es 0 significa que todos han respondido lo mismo por tanto no tiene valor discriminativo.
Dificultad: máximo poder discriminativo cuando su dificultad es media.
Dimensionalidad: debe medir un único concepto.
Fiabilidad.
