Ch. 6: Élaboration de tests et analyse d'items Flashcards
Quelles sont les étapes d’élaboration d’un test? (6)
- Définition de l’objectif du test
- Questions névralgiques relative à la conception préliminaire
- Préparation des items
- Analyse d’items
- Étalonnage et programmation de recherches connexes.
- Préparation du matériel définitif
Quels aspects conceptuels doivent être pris en considération dans les préliminaires (Questions névralgiques)?
Mode d’administration - La longueur - Format d’items - Nombre de scores - Formation des utilisateurs
Que comprend la préparation des items?
Comprend leur formulationet leur révision
Que regardons nous lors de la préparation des items? (anatomie d’un test
- Stimulus auquel repond le participant
- Format de réponse, méthode
- Procédure de cotation
= condition de réponse à l’item
Nommer différents items à choix de réponse?
Échelle de Lickert
Échelle à 5 points
Items à choix multiples ou à vrai ou faux, choix forcés
Comment s’appelle le procédé qui converti le continuum sous forme numérique?
Échelle d’évaluation graphique.
Comment s’appelle le procédé qui évalue un objet selon deux adjectifs contraires?
Différenciateur sémantique.
Quelle sont les cotations de ICR? (items choix de réponse)
- BOnne ou mauvaise réponse
- Système de cotation alternatif et approche pondération
Quels sont les différents items à développement?
-Réponse ouverte, construite, libre
- Essaie, portfolio, projectif
-
Quels sont les problèmes de la cotation des ID (Items à développement)(2)?
- Conceptualisation du système de cotations et l’accord inter-juges
- COtation globale, analytique, cotation par points
Quels sont les avantages des ICR?
Cotation fidèle
Rapide
Les scores totaux sont faciles à calculer
Quels sont les avantages des ID?
Observation du comportement et des processus
Pour explorer des zones inhabituelles (personnalité)
Tests de rendement: pousseraient les étudiants à varier leurs stratégies d’apprentissage
V ou F: La validité des ICR et des ID est équivalente selon les contextes.
Vrai.
Nomme 3 considérations de la formulation d’items.
- Utiliser le bon contenu
- N’induisez pas de réponse
- Allez au plus simple
Quelles sont les suggestions pour la formulation d’items? (3)
- Veuillez à ce que la tâche soit claire.
- Avoir un idée précise et à l’avance des la cotation
- Utiliser un nombre suffisant d’items
Quelles sont les trois étapes de l’analyse d’items?
- Mise à l’essaie (prétest)
- Analyse statistique
- Sélection des items
En quoi consiste la mise à l’essaie informelle?
Échantillon qui commente les items à voix haute.
En quoi consiste la mise à l’essaie formelle?
Administration de nouveaux items de test à des échantillons de répondants.
Quelles sont les 3 approches de la mise à l’essaie formelle?
- Échantillon indépendant (+ courante)
- Ajout (intégration tests existants)
- En continu ( test de rendement)
Que représente la valeur p?
Indice de facilité qui correspons au pourcentage de personnes ayant répondues correctement
Quelle question pose le pouvoir discriminant de litem?
Est-ce que les items ditinguent divers groupes de répondants?
Quelle est la différence entre la méthode externe et la méthode interne?
Pour la m. externe, l’élément de base pour la détermination du groupe est externe au test. vs est interne au test.
C’est quoi le D (r)?
Degré de discrimnation: La différence en pourcentage des personnes qui réussissent l’item dans chacun des groupes «forts» et «faibles».
r = coefficient de corrélation
À quoi sert l’analyse factorielle?
Méthode permettant de démontrer la validité de construit d’un test. Elle porte du les items eux-même durant la conception.
Qu’est-ce que le fonctionnement différentiel des items vise?
Déterminer si des items fonctionnent différemment pour différents groupes de sujets, pour d’autres raisons que des différences mesurables au du trait latent. (ex diff raciales, biaise éthiques..)
À quoi consiste la double validation?
La double validation consiste à soumettre les mêmes items à un échantillon différent de répondants dans le but de constater si ce sont les mêmes items qui sont retenus
C,est quoi le rétrécissement?
Perte de la validité des items.
Quels sont les critères de sélection d’un item?
Le nombre d’items par score (~10) Les valeurs du p La forme de la distribution L’indice de discrimination La relation entre p et D Considérations quant au contenu
Que fait l’étalonnage?
Le concepteur s’affaire à générer des normes. (plan de normalisation, d’étalonnage)
