Cours 4 Flashcards
À quelle question générale (centrale) l’étape de l’élaboration nécessite-t-elle de répondre?
Comment créer un instrument qui est exempt d’erreur de mesure?
Quels sont les objectifs de l’étape de l’élaboration?
- Prévoir les sources d’erreur de manière à les minimiser.
- Construction de l’instrument (il faut avoir de bonnes connaissances en psychométrie).
Quels sont les moyens pour atteindre les objectifs de l’étape d’élaboration?
- Les lectures «psychométriques».
- Inventaire des stratégies déjà employées.
Sur quoi les décisions prises à l’étape de l’élaboration auront-elles une incidence?
Sur l’erreur potentielle et sur les méthodes de détection des erreurs.
De quoi faut-il décider lors de l’élaboration?
- Le type de test
- Le type et le nombre d’items
- Le type de réponses
- Le type d’échelle
- Le type de correction
- Les méthodes d’administration
Quelles sont les types d’erreurs?
L’erreur systématique et aléatoire.
Qu’est-ce que l’erreur systématique?
Quand la même erreur affecte tous les scores de la même manière, dans la même direction. Dans ce cas, la fidélité n’est pas en danger. Puisque tout le monde est affecté également, l’erreur n’est pas considérée comme une source grave d’erreur de mesure.
Qu’est-ce que l’erreur aléatoire?
Quand l’erreur n’affecte pas tous les scores de la même manière. Elle change complètement les relations entre les individus, et on ne sait pas comment ils ont été affecté.
Quelles sont les 4 catégories de l’erreur aléatoire?
- Erreurs lors de la cotation
- Variations dans les procédures d’administration
- Variations dues aux répondants
- Variations en raison du contenu (items)
Quels sont les différentes types de tests (dans quelles catégories les tests peuvent se trouver - que peuvent-ils mesurer)?
- Instruments «normés»
- Instruments «critériés»
- Vitesse
- Puissance
- Individuel
- Groupe
- Papier-crayon
- Performance
- Performance typique
- Performance maximale
Qu’est-ce qu’un instrument «normé»?
Instrument dont l’interprétation des résultats repose sur la comparaison aux résultats compilés auprès d’un échantillon de la population à qui s’adresse l’instrument. On s’intéresse au score de la personne par rapport à celui de l’échantillon.
Qu’est-ce qu’un instrument «critérié»?
Instrument dont l’interprétation des résultats repose sur le fait qu’un seuil critique à été, ou pas, dépassé (ex. note de passage).
Qu’est-ce qu’un test de vitesse?
Tous les items sont faciles et ont un niveau de difficulté égale. On évalue le nombre d’items complétés en X temps ou le temps nécessaire pour compléter tous les items (pour éviter l’effet plafond).
Qu’est-ce que l’effet plafond?
Quand un test n’est pas assez sensible pour mesurer la véritable performance de la personne. La personne obtient le score maximal au test, mais elle mériterait un test plus élevé.
Qu’est-ce qu’un test de puissance?
Les items sont ordonnés du plus facile au plus difficile. Seul le dernier item complété nous informe sur la performance du sujet. On veut vérifier les limites des connaissances ou des habiletés du candidats. On arrête de corriger quand la personne rate un nombre délimité d’items à la suite).
Qu’est-ce qu’un test de performance?
Les personnes soumises au test effectuent une tâche.
Qu’est-ce que la performance typique?
On veut savoir comment la personne est dans la vie de tous les jours, sur une longue période (ex. tests de personnalité).
Qu’est-ce que la performance maximale?
On veut savoir comment la personne est à son meilleure.
Qu’est-ce qu’un item?
Le stimulus qui va susciter la réponse, ce à quoi le bénéficiaire aura à répondre (la «question»).
Quels sont les formats de réponses?
Réponse fermée ou ouverte. Peut être à l’oral ou l’écrit et la réponse n’est pas toujours donnée dans le même mode que la question.
Quelles sont les types d’échelle de mesure selon Steven?
- Nominale
- Ordinale
- À intervalles
- De rapport
Qu’est-ce qu’une échelle nominale?
Les nombres associés aux attributs servent seulement à identifier les personnes.
Qu’est-ce qu’une échelle ordinale?
Les nombres associés aux attributs permettent d’identifier les personnes et de les mettre en ordre de rang.
Qu’est-ce qu’une échelle d’intervalle?
Les nombres associés aux attributs permettent d’identifier les personnes, de les mettre en ordre de rang et ces nombres entretiennent une relation entre eux (additions et soustractions permises). Zéro ne signifie pas l’absence de l’attribut (ex. température).
Qu’est-ce qu’une échelle de rapport?
Les nombres associés aux attributs permettent d’identifier les personnes, de les mettre en ordre de rang et tous les écarts entre les nombres sont équivalents. Zéro signifie l’absence de l’attribut. Multiplications et divisions permises.
Quel type d’échelle est l’échelle de Likert?
Échelle à intervalle. Les ancres supposent un ordonnancement en terme d’intensité du phénomène d’intérêt. Les écarts entre les alternatives adjacentes sont présumés équidistants.
Combien d’ancres (ou choix) doit posséder un instrument?
Un nombre suffisant de choix afin de distinguer les différentes options.
À quoi l’allocation des points est reliée?
Au format de réponses et au type d’échelle.
De quelle façon peut-on coter les tests de rendement/aptitudes?
- 1 point pour une bonne réponse et 0 pour une mauvaise.
- 2 points pour la meilleure réponse, 1 pour la correcte et 0 pour la mauvaise.
- 1 point pour une bonne réponse et -1 pour une mauvaise.
De quelle façon peut-on coter les tests de personnalité, d’intérêts et d’attitudes?
- Vrai ou faux (1 ou 0)
- Aime/neutre/n’aime pas (+1,0,-1)
- Accord/désaccord en 4 ancres
Qu’est-ce qui est important quand on cote les items à réponse ouverte?
Que toutes les réponses soient évaluées de la même façon.
Quels sont les trois types de cotation des items à réponse ouverte?
- Cotation globale
- Cotation analytique
- Qualification par points
Qu’est-ce que la cotation globale?
On donne une impression généralisée de la réponse.
Qu’est-ce que la cotation analytique?
On établit certaines grandes catégories que l’on note.
Qu’est-ce que la qualification par points?
On établit une grille de correction avec des éléments précis à chercher dans la réponse. On définit à l’avance ce qu’est une bonne réponse, une mauvaise réponse, etc. et les points accordés à chacune.
Qu’incluent les méthodes d’administration?
- Les directives aux personnes évaluées
- Les conditions d’administration
- La cotation
À quels critères les items créés doivent-ils répondre?
- L’item doit être conforme à la définition du construit.
- L’item doit réduire au maximum l’erreur de mesure.
- L’item doit utiliser un vocabulaire adapté aux bénéficiaires.
- L’item doit pouvoir se répondre avec l’échelle de mesure utilisée.