Élaboration et fidélité Flashcards
Définis la fiabilité
À quel point mon instrument comporte de l’erreur de mesure
Quelle est l’utilité de l’élaboration dans la fiabilité du test ?
L’élaboration sert à créer un item qui limite au MAX l’erreur de mesure
Il existe 2 types d’erreurs de mesure. Nomme-les
- Erreur systématique
2. Erreur aléatoire
Qu’est-ce que l’erreur systématique ?
Quand la même erreur de mesure affecte tous les scores d’un instrument ou d’une personne, et ce, de la même manière et dans la même direction.
Est-ce que l’erreur systématique met fortement en danger la fiabilité ?
Non. Elle n’est pas considérée comme une source d’erreur grave puisqu’elle affecte tous les scores de la même façon.
Qu’est-ce que l’erreur aléatoire ? Est-elle dangereuse pour la fidélité ?
Une erreur de mesure qui n’affectera pas tous les scores de la même façon.
Elle est très problématique et dangereuse pour la fidélité du test.
Il existe 4 catégories d’erreurs aléatoires.
- Erreurs de cotation
- Variations dans la procédure d’administration
- Variations dues au répondant
- Variations à cause du contenu
Donne un exemple pour chaque catégorie.
- entrevue où on pose les questions et donne le score (++ subjectivité)
- test d’aptitudes intellectuelles en silence vs petit-frère qui gosse
- fatigue lors de la passation
- si les items ont le même niveau de difficulté d’un test parallèle à l’autre
Quelle est la différence entre un test avec instrument normatif (normé) et avec instrument critériée (critérié) ?
Normé : interprétation des résultats selon un échantillon de population normale (ex : indiv a un résultat en percentile par rapport à la courbe populationnelle)
Critérié : interprétation repose sur si les résultats dépassent ou non un seuil critique (ex : note de passage examen)
Quelle est la différence entre un test de vitesse et un test de puissance ?
Vitesse : items facile (ou niv de difficulté égal) à faire le plus rapidement possible. On évalue le nombre d’items répondu/trouvés en X temps.
Puissance : items faciles vers difficiles, où on évalue la limite de connaissances/habiletés de l’individu
Quelle est la différence entre un test de performance typique et un test de performance maximale ?
Typique : comment l’individu est au quotidien / habituellement
Maximale : comment l’individu performe à son meilleur, on cherche à évaluer la meilleure performance possible
Quelle est la différence entre un test papier-crayon et un test de performance ?
Papier-crayon : individus répondent à des items écrits, questionnaire à cocher
Performance : l’individu a une tâche à accomplir et on évalue sa performance à cette tâche.
Quelle est la différence entre un test individuel et un test de groupe ?
Individuels : administration à une personne à la fois (pas de possibilité d’administré à plusieurs à la fois)
Collectifs : administration à plusieurs personnes à la fois possible.
Les test de personnalité / d’intérêts et aptitudes sont-ils des tests de vitesse ou de puissance ?
Aucun des deux.
Donne un exemple de test de performance typique
test de personnalité / expérience professionnelle
Donne un exemple de test de performance maximale
test de rendement, WAIS.
Nomme moi un avantage des tests individuels
Permet plus de souplesse dans le format des items
Nomme moi 3 avantages des tests de groupe
Permet de rejoindre plus de personnes à la fois, plus rapides, correction objective.
Quels sont les deux types d’items ? Donne-moi des exemples des deux.
- À réponses ouvertes : un mot ou + long. Associations verbales, complétion de phrase, développement, stimulus visuel ambigu.
- À réponses fermées : V/F, QCM, Oui/Non, choix forcé, Likert, évaluation graphique sur un continuum.
Il existe 3 avantages à l’utilisation de QCM pour des tests, quels sont-ils ?
- Fidélité de la cotation : les réponses peuvent s’abréger en statistiques, il y a + de fidélité interjuge.
- Optimisation du temps de passation ( + réponses, + vite)
- Optimisation du temps de cotation (facile, rapide à coter, souvent automatique)
Quels sont les 2 avantages des items/questions à développement ?
- Observations des comportements/processus liés au test : non-verbal, motivations, processus menant à la réponse
- Richesse de l’information recueillie : on ne se limite pas à des choix prédéfinis, exploration possible de plus de domaines imprévus dans la génération du test
Quelles sont les 4 types d’échelle ?
Nominale
Ordinale
à Intervalles
de Rapport
Quelles types d’échelles sont les plus utilisées en psychologie ?
Nominale, ordinale, intervalles
Que permet l’échelle nominale ?
Identifier les individus
Que permet l’échelle ordinale ?
Identifier les individus, les placer en ordre de rang
Que permet l’échelle à intervalles ?
Identifier les individus, les placer en ordre de rang et effectuer des additions/soustractions avec les données
Que permet l’échelle de rapport ?
Identifier les individus, les placer en ordre de rang et effectuer des additions/soustractions/multiplication/division avec les données
Quel type d’échelle a un zéro absolu ? ( 0 = absence d’attribut )
Rapport
Pour quel type d’échelle le zéro ne veut pas dire qu’il y a absence d’attribut ?
Intervalles
Que veulent dire les nombres dans l’échelle nominale ?
Nombre = caractéristiques (H = 1), ne peuvent pas être utilisés pour des opérations mathématiques
Que veulent dire les nombres dans l’échelle ordinale ?
Les nombres ont une relation les uns avec les autres, on ne peut pas faire d’opérations mathématiques avec ceux-ci mais on peut les placer en ordre.
Dans une échelle à intervalles, est-ce que l’écart entre les nombres est toujours équivalent ? Et dans une échelle de rapport & ordinale ?
Intervalles = oui Rapport = oui Ordinale = non
L’échelle de Likert est considéré comme appartenant à quel type d’échelle ?
À intervalles (les écarts entre les alternatives sont considérés équivalents)
Quelle est la différence entre un nombre d’ancre pair et impair sur l’échelle de Likert ?
Pair = pas de neutre possible Impair = neutre possible
Dépend de ce que le chercheur obtenir comme données.
De quoi dépend le type de correction choisi ?
Du type d’items (réponses ouvertes ou fermées) et du format de réponses (V/F, développement)
3 types de correction pour les réponses ouvertes ?
- Cotation global de l’évaluateur : jugement subjectif du texte, moins fidèle, moins de structure et moins de reproductibilité.
- Cotation analytique : évaluation selon des critères / des points (ex : originalité dans dissertation)
- Qualification par points : évaluation du texte par rapport à une réponse parfaite formulée au préalable (ex : entrevue)
