cours 4 Flashcards

1
Q

En quoi consiste l’étape 3 d’élaboration dans le modèle de la cible?

A

Concept de fiabilité et phase de préparation

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
2
Q

Qu’est-ce que la fiabilité en général?

A

Jusqu’à quel point mon instrument comporte-t-il de l’erreur de mesure?

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
3
Q

Qu’est-ce que la fiabilité à la phase de l’élaboration?

A

Comment créer un instrument qui limite au maximum l’erreur de mesure?»

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
4
Q

Pourquoi faut-il élaborer en faisant des choix éclairés dans la phase de l’élaboration?

A

Car les décisions prises auront une incidence sur le niveau d’erreur de mesure et la manière d’évaluer l’étendue de l’erreur

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
5
Q

Dans la phase de l’élaboration, il faut élaborer en faisant des choix éclairés par rapport à quoi?

A

au type de test
au type et au nombre d’items
au type de réponse
au type d’échelle
à la méthode de cotation
à la méthode d’administration

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
6
Q

Qu’est-ce que la fidélité/fiabilité?

A

À quel point il y a de l’erreur de mesure

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
7
Q

Qu’est-ce que l’erreur systématique?

A

a) La même erreur de mesure affecte tous les scores d’un instrument de la même manière, dans la même direction
OU
b) La même erreur de mesure affecte tous les scores d’une personne de la même manière, dans la même direction

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
8
Q

Ecq l’erreur systématique est considérée comme une source grave d’erreur de mesure?

A

Non à cause de la notion de constance (ex: On peut faire -5g à tous les scores).

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
9
Q

Pourquoi dit-on que la fiabilité est moins en danger dans l’erreur systématique?

A

Car la mesure peut rester constante et reproductible

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
10
Q

Qu’est-ce que l’erreur aléatoire?

A

N’affecte pas tous les scores de la même manière : très problématique. On veut l’éviter le + possible.

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
11
Q

Qu’est-ce qu’un test de vitesse?

A

Tous les items sont faciles et ont un niveau de difficulté égal (sauf lorsque le test est aussi de puissance). On a la même gradation.

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
12
Q

Quelles sont les 4 catégories de l’erreur aléatoire?

A

Erreurs lors de la cotation: Cotation qui est trop floue
Variations dans les procédures d’administration
Variations dues aux répondants: Situations particulières à court terme (ex: une personne fatiguée/stressée avant un examen)
Variations en raison du contenu (items): ex: 2 versions d’examen dont l’une est + facile que l’autre donc les performances sont variées.

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
13
Q

Qu’est-ce qu’un test instrument normatif?

A

Instruments dont l’interprétation des résultats repose sur la comparaison aux résultats compilés auprès d’un échantillon de la population à qui s’adresse l’instrument (ex: WAIS). On utilise souvent la norme percentile.

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
14
Q

Qu’est-ce qu’un test instrument critérié?

A

Instruments dont l’interprétation des résultats repose sur le fait qu’un seuil critique a été, ou non, dépassé (ex: DSM)

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
15
Q

Comment se fait la correction dans un test de vitesse?

A

le nombre d’items complétés en X temps OU le temps nécessaire pour compléter tous les items.

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
16
Q

Quel est l’objectif d’un test de puissance?

A

Vérifier les limites des connaissances ou des habiletés du candidat

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
17
Q

Qu’est-ce qu’un test de puissance?

A

Les items sont ordonnés/gradation du plus facile au plus difficile. Peut inclure un temps limite. On veut voir jusqu’où la personne peut se rendre.

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
18
Q

Ecq un test peut être à la fois être de puissance et de vitesse?

A

Oui

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
19
Q

Qu’est-ce qu’un test de performance typique?

A

Comment la personne est-elle dans la vie de tous les jours ?
La personne ne va pas étudier pour un test de performance typique.

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
20
Q

Ecq dans un entretien d’embauche on veut évaluer la performance typique ou maximale?

A

Typique car c’est ce qu’on souhaite réellement évaluer, mais souvent on étudie plutôt la performance maximale.

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
21
Q

Qu’est-ce qu’un test de performance maximale?

A

Comment la personne est-elle à son mieux?

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
22
Q

À quoi vise à mesurer le test de performance typique?

A

le niveau habituel

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
23
Q

À quoi vise à mesurer le test de performance maximale?

A

la meilleure performance possible

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
24
Q

Qu’est-ce que le test papier-crayon?

A

Les personnes qui passent le test répondent à des items. Les personnes répondent à des questions, à un énoncé. Peut se faire à l’ordinateur.

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
25
Q

Qu’est-ce qu’un test de performance?

A

Les personnes soumises au test effectuent une tâche.

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
26
Q

Qu’est-ce qu’un test individuel?

A

Instruments conçus pour être administrés à une personne à la fois
ne peuvent PAS être administrés en groupe
Administrateur est avec le bénéficiaire 1 à 1.

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
27
Q

Qu’est-ce qu’un test de groupe?

A

Instruments conçus pour être administrés à plusieurs individus à la fois
Peuvent être administrés à une personne lorsque les circonstances le dictent et lorsque le «manuel» décrit comment le faire

28
Q

Qu’est-ce qu’un item?

A

À quoi le bénéficiaire peut réagir.
Le stimulus auquel répond le participant
C’est «la question»
Peut être écrit ou oral

29
Q

Pour les items, quels sont les 2 formats de réponse?

A

réponse fermée (ou à choix de réponses)
réponse ouverte (ou à développement)

30
Q

Quelles sont les avantages des items à choix de réponses?

A

Fidélité de la cotation
Optimisation du temps de passation
Optimisation du temps pour la cotation

31
Q

Quelles sont les avantages des items à développement?

A

Facilite l’observation de comportements et de processus associés au test
Richesse de l’information recueillie

32
Q

Quelles sont les 4 types de classification aux propriétés distinctes?

A

Nominale
Ordinale
Intervalles
Rapport

33
Q
A
34
Q

À l’aide de quoi les variables sont évaluées ou quantifiées?

A

À l’aide d’échelles de mesure

35
Q

Qu’est-ce que permet l’échelle nominale?

A

D’identifier les personnes

36
Q

Qu’est-ce qu’une échelle nominale?

A

C’est une échelle catégorielle, où les nombres représentent une caractéristique particulière
Le nombre n’a pas de sens particulier à part représenter la catégorie
On ne peut donc faire aucune opération mathématique avec ces nombres

37
Q

Qu’est-ce que permet l’échelle ordinale?

A

a) d’identifier les personnes
b) de les mettre en ordre de rang

38
Q

Qu’est-ce qu’une échelle ordinale?

A

Les nombres entretiennent une relation entre eux
On ne peut faire aucune opération mathématique avec ces nombres à part les classer en ordre
On ne connaît pas la distance entre chaque position

39
Q

Qu’est-ce que permet l’échelle à intervalles?

A

a) d’identifier les personnes
b) de les mettre en ordre de rang
c) d’effectuer des additions et des soustractions

40
Q

Qu’est-ce qu’une échelle à intervalles?

A

Tous les écarts entre les nombres sont équivalents (équidistants). Toutefois, l’échelle est arbitraire et le 0 (zéro) ne signifie pas l’absence de l’attribut.

41
Q

Qu’est-ce que permet une échelle de rapport?

A

a) d’identifier les personnes
b) de les mettre en ordre de rang
c) d’effectuer des additions et des soustractions
d) d’effectuer des multiplications et des divisions

42
Q

Qu’est-ce qu’une échelle de rapport?

A

Tous les écarts entre les nombres sont équivalents (équidistants).
L’échelle possède un zéro absolu, où 0 signifie l’absence de l’attribut

43
Q

Quelle opération/sophistication est permise dans l’échelle nominale?

A

Identifier

44
Q

Quelles opérations/sophistication est permise dans l’échelle ordinale?

A

Identifier et ordonnancer

45
Q

Quelle opération/sophistication est permise dans l’échelle intervalle?

A

Identifier
Ordonnancer
AdditionSoustraction

46
Q

Quelle opération/sophistication est permise dans l’échelle rapport?

A

Identifier
Ordonnancer
Addition
Soustraction
Multiplication
Division

47
Q

Quelles échelles sont le plus utilisées en psychologie?

A

Nominales, ordinales ou à intervalles

48
Q

Quel type d’échelle (intervalle ou ordinale) est l’échelle de Likert?

A

Intervalle car on associe avec des nombres.

49
Q

Qu’est-ce que l’échelle de Likert?

A

Développé en 1932 dans un contexte d’items mesurant les attitudes
Propose un nombre pair ou impair d’alternatives
Le nombre d’alternatives dépend de la capacité des répondants à faire la distinction entre elles
Les mots (ancres) doivent être bien choisis
Les mots (ancres) supposent un ordonnancement en termes d’intensité du phénomène d’intérêt
Les écarts entre les alternatives adjacentes sont présumés équidistants

50
Q

Quel est le désavantage de l’échelle de Likert?

A

Sujet à un billet d’interprétation (la distance entre)

51
Q

Quel est le nombre d’ancres dans une échelle de Likert?

A

L’échelle devrait comporter assez d’ancres pour que la personne puisse faire un choix
Elle devrait aussi en comporter un nombre assez restreint pour que les choix soient assez distincts les uns des autres
L’échelle doit être adaptée à la population cible

52
Q

Quels sont les types de correction dans l’échelle de Likert?

A

La correction dépend directement du type d’item et de format de réponse choisi
Combien de points sont accordés par item, selon la réponse du répondant à l’item?
Comment se calcule le score total à l’instrument?
Moyenne, somme, score brut, score transformé, etc.

53
Q

Quels sont les types de correction des items à réponse fermée?

A

Tests de rendement ou d’aptitudes et tests de personnalité, d’attitudes, d’intérêt

54
Q

Comment se fait la correction des items à réponse fermée d’un test de rendement ou d’aptitudes?

A

La bonne réponse vaut 1 et les mauvaises valent 0
2 points pour la meilleure réponse, 1 point pour une réponse correcte, 0 points pour une mauvaise réponse
1 point pour la bonne réponse, -1 pour une mauvaise réponse

55
Q

Comment se fait la correction des items à réponse fermée d’un test de personnalité, d’attitudes, d’intérêt?

A

Vrai ou faux : 1 ou 0
Oui ou non : oui = 1, ne sais pas = 0, non = -1
Échelle de Likert : 1, 2, 3, 4, 5 OU -2, -1, 0, 1, 2
Choix forcé : 1 ou 0
Tests personnalité, attitudes, intérêt : Pas d’importance si bonne réponse ou non.

56
Q

Quels sont les types de correction des items à réponse ouverte?

A

Cotation globale de l’évaluateur, cotation analytique et qualification par points

57
Q

Qu’est-ce que la cotation globale de l’évaluateur?

A

Jugement global sur le texte. La personne regarde la chose et l’évalue. Très subjectif, sans critère.

58
Q

Qu’est-ce que la cotation analytique?

A

Plusieurs critères déterminent l’évaluation du texte. Pas un point par critère, si on voit des éléments à quelque part on évalue plus haut.

59
Q

Qu’est-ce que la qualification par points?

A

présence d’une réponse «parfaite» et chaque élément présent vaut un point

60
Q

Qu’est-ce que la fiabilité inter-juge?

A

Il est impératif que les réponses soient évaluées de la même façon et que les évaluateurs évaluent les réponses de la même façon

61
Q

Quelles sont les méthodes d’administration?

A

Les directives aux personnes évaluées ;
Les conditions d’administration ;
La cotation (allocation des points).

62
Q

Quand peut-on qualifier les méthodes d’administration de standardisées?

A

Lorsque les méthodes d’administration sont observées systématiquement

63
Q

Quelles sont les règles à suivre pour la création d’items?

A

L’item doit être conforme à la définition du construit
L’item doit réduire au maximum l’erreur de mesure
L’item doit utiliser un vocabulaire adapté aux bénéficiaires
L’item doit pouvoir se répondre avec l’échelle de mesure utilisée
Prioriser le «je»
Favoriser une formulation affirmative plutôt qu’interrogative
Éviter de mettre «deux idées» dans un même item
Éviter les métaphores
Éviter les items à négations multiples
Favoriser une formulation claire des items
Favoriser une formulation concise des items
Attention aux adverbes
Varier le sens des items

64
Q

Qu’est-ce qu’un item inversé?

A

Un item dont la direction est opposée à celle des autres items (du même construit).

65
Q

Qu’est-ce que permettent les items inversés?

A

Permet de détecter et de contrôler les tendances de réponses