Cours 4

Question 1

Différence entre la fiabilité normale et la fiabilité à l’étape d’élaboration

Answer 1

Fiabilité en général
o « Jusqu’à quel point mon instrument comporte-t-il de l’erreur de mesure? »

À l’étape de l’élaboration
o « Comment créer un instrument qui limite au maximum l’erreur de mesure?»

Faire en sorte de voir à l’avance quels seront les erreurs possible pour les anticiper et les réduire au maximum pour avoir des résultats adéquats

Question 2

Objectifs et moyens de l’élaboration

Answer 2

Objectifs
o Prévoir les sources d’erreur de manière à les minimiser
o Construction de l’instrument

Moyens
o Lectures « psychométriques »
o Inventaire des stratégies déjà employées

Les décisions prises auront une incidence sur le niveau d’erreur de mesure et la manière d’évaluer l’étendue de l’erreur

Il faut donc élaborer en faisant des choix éclairés par rapport:
o	au type de test
o	au type et au nombre d’items
o	au type de réponse
o	au type d’échelle
o	à la méthode de cotation
o	à la méthode d’administration

Question 3

Caractéristiques de l’Erreur systématique

Answer 3

a) La même erreur de mesure affecte tous les scores d’un instrument de la même manière, dans la même direction
 Exemple : balance mal calibré qui donne 2g de plus sur chaque mesure  2g toujours constant  fidélité temporelle  très reproductible à travers le temps

b) La même erreur de mesure affecte tous les scores d’une personne de la même manière, dans la même direction
 Ici en lien avec l’individu EX : individu passe un test d’aptitudes intellectuels avec des tests verbaux en francais, mais personne est roumaine  biais

La fiabilité est moins en danger (la mesure peut rester constante et reproductible)

Bien qu’importante et qu’il faille la minimiser, l’erreur systématique n’est pas considérée comme une source grave d’erreur de mesure

Cette erreur n’influence pas la fidélité et reproductibilité du test

Question 4

4 catégories de l’erreur aléatoire

Answer 4

Erreurs lors de la cotation : 2 correcteurs qui ont pas les mêmes critères  scores différents pour le même examen

Variations dans les Procédures d’administration : erreur de type aléatoire  questionnaire en ligne de rendement ou aptitudes intellectuels  personne passe dans sa chambre confo vs. Quelqu’un fait le test dans le metro  condition de passation n’Est pas la même donc influence sur les scores  2 personnes passe le même tests ou 1 personne fait 2 fois le test

Variations dues aux Répondants : Personne reçoit des bonnes nouvelles qui influence son mood, donc pas stable peut influencer

Variation en raison du Contenu : Divergence au niveau des items  examen chap 1 à 4  exam version 1, 5 questions sur chap 1 et exam version 2, 4 questions sur chap 1  peut influencer les scores selon l’étude des étudiants

Question 5

Test instrument normatif

Answer 5

o Instruments dont l’interprétation des résultats repose sur la comparaison aux résultats compilés auprès d’un échantillon de la population à qui s’adresse l’instrument

On situe la norme et qui s’en distingue (Comme un droite de gauss ou les percentiles)
o Exemple : WAIS

Question 6

Test instrument critérié

Answer 6

Instruments dont l’interprétation des résultats repose sur le fait qu’un seuil critique à été, ou non, dépassé

Exemple:
 Examen au baccalauréat en psychologie >50% tu passes
o seuil défini et en dessous ou en-deca, you got it or you don’t

Question 7

Test vitesse

corrections possibles

Answer 7

Tous les items sont faciles et ont un niveau de difficulté égal (sauf lorsque le test est aussi de puissance)

Correction: Le nombre d’items complétés en X temps OU le temps nécessaire pour compléter tous les items.

Exemple:
 Test de vitesse de traitement où l’on coche tous les « T » sur une page remplie de lettres

En présence de plusieurs questions qui sont simples et il faut y répondre le plus rapidement possible

Question 8

Test puissance

Answer 8

Objectif: Vérifier les limites des connaissances ou des habiletés du candidat

Les items sont ordonnés du plus facile au plus difficile

Peut inclure un temps limite

Exemple:
 Test des blocs de la WAIS

Vérifie le niveau de connaissance/aptitude d’un individu  facile à difficile avec une limite de temps

Le tests de personnalité ou d’Aptitudes professionnels n’est pas qualifier comme un tets de puissance ou de vitesse

Question 9

Test performance typique

Answer 9

Comment la personne est-elle dans la vie de tous les jours ?

Vise à mesurer le niveau habituel

Exemple:
 Test de personnalité

On veut quelque chose de stable à travers la vie de la personne  on mesure la performance typique de la personne

Question 10

Test performance maximale

Answer 10

comment l’individu performe à son maximum

Comment la personne est-elle à son mieux?

Vise à mesurer la meilleure performance possible
o Exemple:
 Test de rendement

Question 11

Test papier-crayon

Answer 11

Les personnes qui passent le test répondent à des items écrits

Exemple:
 Questionnaire « Test de personnalité »

Pas nécessairement papier-crayon, se définit par le fait qu’on répondu à des items écrits  peut être fait par ordinateur aussi

Question 12

Test performance

Answer 12

Les personnes soumises au test effectuent une tâche

Exemple:
 WAIS

On fait des tâches comme peser sur un bouton

Attention, on réfère au résultat obtenu à tout test comme « la performance au test ».

Question 13

Test individuel

Answer 13

Instruments conçus pour être administrés à une personne à la fois

ne peuvent PAS être administrés en groupe

Il faut vraiment pas que ca soit en groupe, mais 1 on

Exemple:
 Rorschach

Question 14

Test groupe

Answer 14

Instruments conçus pour être administrés à plusieurs individus à la fois

Peuvent être administrés à une personne lorsque les circonstances le dictent et lorsque le « manuel » décrit comment le faire

peut-être en groupe mais pas nécessairement obligatoire

Exemple:
 SAT

Question 15

Qu’est-ce qu’un item?

Answer 15

C’Est l’amorce auquel l’individu doit réagir

o Le stimulus auquel répond le participant
o C’est « la question »
o Peut être écrit ou oral

Question 16

Quels sont les formats de réponses

Answer 16

réponse fermée (ou à choix de réponses)
	: choix de réponse  on lui donne le choix
	Exemples
•	Vrai ou faux
•	Échelle Likert
•	Échelle d’évaluation graphique (Positif à négatif)
•	Choix réponses
•	Choix forcé

réponse ouverte (ou à développement)
	l’individu génère lui-même à partir de l’amorce
	Exemples
•	Exemples
•	Associations verbales
•	Compléter une phrase
•	Stimulus visuel ambigu (rorschach)
•	Question à développement dans un examen

Question 17

Qu’est-ce que la grille de cotation

Answer 17

correction négative, comment on corrige, caractéristiques de passation de l’item

Question 18

Avantages d’utiliser des choix de réponses

Answer 18

Fidélité cotation : suggestions déjà fait qui déterminent comment on va coter l’exam  on fait juste additionner peu importe les intérêts du correcteurs vs. Développement qui n’a pas nécessaire une grille claire (Fidélité inter-juge et fidélité temporelle menacée avec développement)

Optimisation du temps de passation : On peut administrer 600 trucs en 90 min, mais pas avec développement  donc sauve du temps

Optimisation du temps pour la cotation : selon les choix, on peut attribuer des valeurs numériques et optimitiser le système de cotation et les additions de points et moyennes sont vrm plus simple

Question 19

Avantages items à développement

Answer 19

o Facilite l’observation de comportements et de processus associés au test :Permet de voir le mécanismes derrière les réponses, permet d’évaluer le processus derrière la réponse

Richesse de l’information recueillie : Plusieurs thématiques peuvent être aborder

Question 20

Caractéristiques échelle nominale

Answer 20

Permet de :

d’identifier les personnes
o C’est une échelle catégorielle, où les nombres représentent une caractéristique particulière
 Le nombre n’a pas de sens particulier à part représenter la catégorie
 On ne peut donc faire aucune opération mathématique avec ces nombres

Exemples:
	Numéro d’assurance sociale
	Numéro de dossard
	0 = Femme / 1 = Homme
	1 = Montréal / 2 = Québec / 3 = Rimouski

Question 21

Caractéristiques échelle ordinale

Answer 21

d’identifier les personnes

de les mettre en ordre de rang
• Les nombres entretiennent une relation entre eux
• On ne peut faire aucune opération mathématique avec ces nombres à part les classer en ordre
• On ne connaît pas la distance entre chaque position
• Positionnement dans une coruse 1er,2e, 3e
• On ne connait pas la distance entres les personnes

Exemples:
o Rang dans une compétition sportive

Question 22

Caractéristiques échelle d’intervalle

Answer 22

a) d’identifier les personnes
b) de les mettre en ordre de rang
c) d’effectuer des additions et des soustractions

Tous les écarts entre les nombres sont équivalents (équidistants). Toutefois, l’échelle est arbitraire et le 0 (zéro) ne signifie pas l’absence de l’attribut

Exemples:
• Température en Celsius ou en Fahrenheit

 Absence de 0 absolue
 En température 0 ne veut pas dire absence de chaleur
 Difficile de faire des opérations mathématiques
 Il y a une séparation égale entre chaque mesure

Question 23

Caractéristiques échele de rapport

Answer 23

a) d’identifier les personnes
b) de les mettre en ordre de rang
c) d’effectuer des additions et des soustractions
d) d’effectuer des multiplications et des divisions

Tous les écarts entre les nombres sont équivalents (équidistants).

L’échelle possède un zéro absolu, où 0 signifie l’absence de l’attribut

Permet de faire multiplication et division

Exemples:
• Température en Kelvin

Question 24

Quelles sont les principales échelles utilisée en psychologie

Answer 24

Nominales, ordinale ou intervalle

Question 25

Likert est quelle type d’échelle

Answer 25

Intervalle

Question 26

Différence entre nombres pairs et impairs dans échelle de likert

Answer 26

Nombre de réponses impairs : on va avoir le position de neutralité

Nombre de réponses pairs : la personne devra prendre position

Perdre la neutralité  alors que certaines personnes se définissent comme neutre  on les force à se prononcer

Question 27

Dequoi dépend la correction/cotation

Answer 27

La correction dépend directement du type d’item et de format de réponse choisi

Question 28

Dans les tests de personnalité à quoi servent les points dans la correction des items à réponses fermées

Answer 28

• Les points servent seulement à décrire l’individu dans les tests de personnalité

Question 29

Comment va la correction des items à réponse ouverte

Answer 29

1. Cotation globale de l’évaluateur: jugement global sur le texte
   o Globale : si le prof a aimer ou pas le text
2. Cotation analytique: plusieurs critères déterminent l’évaluation du texte
   o Analytique : donne des points selon les critères comme par exemple la langue
3. Qualification par points: Présence d’une réponse « parfaite » et chaque élément présent vaut un point
   o Points : Liste de points des éléments qui doivent être présents pour avoir des points

**Il est Impératif que les réponses soient évaluées de la même façon et que les évaluateurs évaluent les réponses de la même façon (fiabilité inter-juge)

Les deux dernières sont plus structurés et diminue l’erreur de fidélité inter-juge

Question 30

Les méthodes d’Administration incluent quoi ?

Quand peut on dire que les méthodes d’Administration sont standardisés

Answer 30

Les directives aux personnes évaluées ;

Les conditions d’administration ;

La cotation (allocation des points).

• Lorsque les méthodes d’administration sont observées systématiquement, on les qualifie de standardisées.
• Standardisation : diminue l’erreur aléatoire  les conditions d’administration influence beaucoup les résultats des gens

Question 31

un item doit …

Answer 31

L’item doit être conforme à la définition du construit

L’item doit réduire au maximum l’erreur de mesure

L’item doit utiliser un vocabulaire adapté aux bénéficiaires

L’item doit pouvoir se répondre avec l’échelle de mesure utilisée

Question 32

À quoi servent les items inversés

Answer 32

Exemple d’items pour la dépression
o Je me sens déprimé (item normal)
o Je ne me sens pas déprimé (item inversé)
o Je me sens heureux (item inversé)

Permet de détecter et de contrôler les tendances de réponses