Cours 4 Flashcards

1
Q

C’est quoi que dit la Fiabilité en général

A

« Jusqu’à quel point mon instrument comporte-t-il de l’erreur de mesure? »

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
2
Q

À l’étape de l’élaboration, la fidélité fait référence a quoi?

A

« Comment créer un instrument qui limite au maximum l’erreur de mesure?»

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
3
Q

C’est quoi les objectifs de l’élaboration? (2)

A

Prévoir les sources d’erreurs de manière à les minimiser

Construction de l’instrument; rédiger item, choisir Q ouverte/fermé, etc.

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
4
Q

C’est quoi les moyens de l’élaboration? (2)

A
  • Lectures « psychométriques ». les meilleurs pratiques pour minimiser erreur.
  • Inventaire des stratégies déjà employées
How well did you know this?
1
Not at all
2
3
4
5
Perfectly
5
Q

Les décisions prises auront une incidence sur le niveau d’erreur de mesure et la manière d’évaluer l’étendue de l’erreur. Il faut donc élaborer en faisant des choix éclairés par rapport (6):

A
  • au type de test
  • au type et au nombre d’items
  • au type de réponse
  • au type d’échelle
  • à la méthode de cotation
  • à la méthode d’administration
How well did you know this?
1
Not at all
2
3
4
5
Perfectly
6
Q

C’est quoi une erreur systématique? Les 2 types?

A

a) La même erreur de mesure affecte tous les scores d’un instrument de la même manière, dans la même direction. La même ampleur d’erreur(manière), surestimer/sous-estimé tous les résultats(direction).
- Par exemple une balance, elle ajoute toujours 5kilo peux importe ce que tu pèses.

b) La même erreur de mesure affecte tous les scores d’une personne de la même manière, dans la même direction.

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
7
Q

Est-ce que la fiabilité est en danger dans l’erreur systématique?

A

La fiabilité est moins en danger (la mesure peut rester constante et reproductible).

Bien qu’importante et qu’il faille la minimiser, l’erreur systématique n’est pas considérée comme une source grave d’erreur de mesure.

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
8
Q

C’est quoi l’erreur aléatoire?

A

N’affecte pas tous les scores de la même manière et direction: très problématique.

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
9
Q

Quelles sont les 4 catégories d’erreur aléatoire et leur définition?

A
  1. Erreurs lors de la cotation; fidélité inter-juge par exemple, si pas de grille structuré.
  2. Variations dans les procédures d’administration; les consignes données, ce qui est relié au contexte
  3. Variations dues aux répondants; tous ce qui est interne, par exemple être malade vs pas malade.
  4. Variations en raison du contenu (items); s’il y a 2 versions a un examens, essaie de faire version équivalente, équivalence des réponses. Affecte pas le score de la même façon.
How well did you know this?
1
Not at all
2
3
4
5
Perfectly
10
Q

TYPES DE TESTS: Instrument normatif

A

Instruments dont l’interprétation des résultats repose sur la comparaison aux résultats compilés auprès d’un échantillon de la population à qui s’adresse l’instrument. Instrument relatif, tu peux te comparer a un groupe.

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
11
Q

TYPES DE TESTS : Instrument critérié

A

Instruments dont l’interprétation des résultats repose sur le fait qu’un seuil critique a été, ou non, dépassé.

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
12
Q

C’est quoi le seuil critique?

A

= valeur en dessous ou au-dessus qui est bonne.

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
13
Q

TYPES DE TESTS: Vitesse

Comment sont les item?
Comment est la correction?
But:

A

Tous les items sont faciles et ont un niveau de difficulté égal (sauf lorsque le test est aussi de puissance)

Correction: Le nombre d’items complétés en X temps OU le temps nécessaire pour compléter tous les items.

On demande de faire le plus rapidement possible le test.

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
14
Q

On peut aussi avoir un test de puissance avec un test rapide. Vrai ou Faux

A

Vrai

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
15
Q

Types de tests : Puissance

Objectif?
Comment sont les items?

A

Objectif: Vérifier les limites des connaissances ou des habiletés du candidat

Les items sont ordonnés du plus facile au plus difficile

Peut inclure un temps limite (donc être vitesse aussi)

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
16
Q

Je suis quelle type de test?

“échelle de dépression, il a une norme pour femme et homme”

A

Instrument normatif

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
17
Q

Je suis quelle type de test?

“Test de traitement où l’on coche tous les « T » sur une page remplie de lettres”

A

vitesse

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
18
Q

Je suis quelle type de test?

“Examen au baccalauréat en psychologie”

A

Instrument critérié

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
19
Q

Je suis quelle type de test?

“Test d’intelligence”

A

Puissance

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
20
Q

Types de test: Performance typique

But?

A

Comment la personne est-elle dans la vie de tous les jours ? Au quotidien.

Vise à mesurer le niveau habituel, pas les exceptionnelle.

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
21
Q

Types de test: Performance maximale

A
  • Comment la personne est-elle à son mieux?

* Vise à mesurer la meilleure performance possible

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
22
Q

Types de test: Papier-crayon

Comment?
Type d’item?

A

Les personnes qui passent le test répondent à des items écrits.

Peux être formule mathématique (car on répond à une question), question de type Likert, etc.

Pas nécessairement un papier et crayon, peux être par ordinateur.

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
23
Q

Type de test: Performance

A

Les personnes soumises au test effectuent une tâche.
C’est une tâche et non question.

Ce n’est pas un énoncé écrit, on ne répond pas à une question, on fait vraiment une tâche.

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
24
Q

Types de test: Individuel

A

Instruments conçus pour être administrés à une personne à la fois.

ne peuvent PAS être administrés en groupe

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
25
Q

Type de test: Groupe

A

Instruments conçus pour être administrés à plusieurs individus à la fois.

Peuvent être administrés à une personne lorsque les circonstances le dictent et lorsque le « manuel » décrit comment le faire. Tout dépend du design du créateur.

Pas impératif que c’est en groupe, peux être individuelle. Comme un test en ligne, tu peux le faire en classe ou tu peux le faire seul chez toi.

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
26
Q

Je suis quelle type de test?

“Rorschach”

A

Individuel

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
27
Q

Je suis quelle type de test?

” coche le plus de T, casse-tête”

A

Performance

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
28
Q

Je suis quelle type de test?

“Questionnaire « Test de personnalité » avec question sur ordinateur”

A

Papier-crayon

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
29
Q

Je suis quelle type de test?

“Exemple: Test de rendement, mesuré niveaux de connaissance après étude “

A

Performance maximale

30
Q

Je suis quelle type de test?

“Exemple: Test de personnalité, test d’attitude, entrevue d’embauche”

A

Performance typique

31
Q

Qu’est-ce qu’un item?

A

Le stimulus auquel répond le participant. C’est « la question »

Peux être écrit ou oral

32
Q

Il y a 2 formats de réponse:

A
  1. réponse fermée (ou à choix de réponses)

2. réponse ouverte (ou à développement)

33
Q

Nommez les types d’ITEMS À RÉPONSE FERMÉE. (6)

A
  1. Vrai ou Faux
  2. Oui ou non
  3. Likert
  4. Échelle d’évaluation graphique
  5. Choix de réponses
  6. Choix forcé (échelles ipsatives)
34
Q
C'est qu'elle type d'item? 
--------
Quelle est votre sorte de macaroni au fromage préféré?	
a)	Le Kraft Dinner 
b)	Le Annie’s
c)	Celui que je me cuisine à la maison
d)	Autre
e)	Je n’aime pas le macaroni au fromage
A

Choix de réponses

35
Q

Choisissez l’énoncé vous correspondant le mieux.
(peux être 2 items et +)
a) Je finirais un paquet entier de Kraft Dinner à moi tout.e seul.e
b) Je mangerais seulement du Kraft Dinner si c’était la seule nourriture disponible sur une île déserte

A

Choix forcé (échelles ipsatives)

36
Q

ITEMS À QUESTION OUVERTE.

Comment est la réponse?
Elle nécessite toujours quoi?

A

La réponse à une question ouverte peut être d’un seul mot ou plus longue.

Il faut toujours une amorce (la question, stimulus, énoncé, image)

37
Q

Nomme 4 exemple d’amorces

A
  1. Associations verbales;
  2. Compléter une phrase; je me sens nerveuse quand….
  3. Stimulus visuel ambigu; le rorschach
  4. Question à développement dans un examen; stimulus(question) + la réponse qu’on va donner
38
Q

Les 3 avantages des choix fermés?

A
  1. Fidélité de la cotation ; choix de réponse, la cotation est fixe, la réponse vaut toujours la même chose, entre correcteur
  2. Optimisation du temps de passation; faire passer pls choix réponse à pls personne très vite.
  3. Optimisation du temps pour la cotation; programme qui peuvent quotter le tous sans humain.
39
Q

Les 2 avantages au test a questions ouvertes?

A
  1. Facilite l’observation de comportements et de processus associés au test. On peut observer comportement, processus associé au test, mécanisme stress, façon d’aborder problème, etc.
  2. Richesse de l’information recueillie. On a pas besoin de beaucoup de question pour avoir beaucoup de richesse, on peut même avoir des réponse qu’on avait pas pensé à avoir.
40
Q

TYPES D’ÉCHELLES (4)

A
  1. Nominale
  2. Ordinale
  3. Intervalles
  4. Rapport
41
Q

Échelle nominal permet quoi

A

Cette échelle permet:

a) d’identifier les personnes

42
Q

Échelle ordinal permet quoi

A

a) d’identifier les personnes

b) de les mettre en ordre de rang (leur résultat par rapport aux autres)

43
Q

Échelle à intervalle permet quoi

A

a) d’identifier les personnes
b) de les mettre en ordre de rang
c) d’effectuer des additions et des soustractions

44
Q

Échelle de rapport permet quoi?

A

a) d’identifier les personnes
b) de les mettre en ordre de rang
c) d’effectuer des additions et des soustractions
d) d’effectuer des multiplications et des divisions

45
Q

Dans quelle échelle le 0 (zéro) ne signifie pas l’absence de l’attribut?

A

ÉCHELLE À INTERVALLES

46
Q

L’échelle possède un zéro absolu, où 0 signifie l’absence de l’attribut, laquelle?

A

ÉCHELLE DE RAPPORT

47
Q

Quel est ce type d’échelle?

” Numéro de dossard”

A

nominal

48
Q

Quel est ce type d’échelle?

“Température en Kelvin”

A

échelle de rapport

49
Q

Quel est ce type d’échelle?

“Température en Celsius ou en Fahrenheit”

A

Intervalle

50
Q

Dans l’échelle a intervalle, comment sont les écarts?

A

Tous les écarts entre les nombres sont équivalents (équidistants).

51
Q

Dans l’échelle a rapport, comment sont les écarts?

A

Tous les écarts entre les nombres sont équivalents (équidistants).

52
Q

Quel est ce type d’échelle?

’” Rang de la personne la plus grande à la plus petite”

A

Ordinale

53
Q

En psychologie, il y n’y a pas vraiment d’échelles ______. Les échelles sont principalement ________, ________ ou _________.

A

de rapport.

nominales, ordinales ou à intervalles

54
Q

QU’EN EST-IL DES ÉCHELLES DE LIKERT?

Développé en 1932 dans un contexte d’items mesurant _______.

A

les attitudes.

55
Q

L’échelle de Likert propose un nombre pair ou impair d’alternatives. Pourquoi c’est important? Ça permet quoi?

A

Très important pour mesuré attitude.

Un nombre paire empêche la neutralité.
Si impair on peut avoir le nombre de réponse neutre.

Parfois, c’est important avoir la neutralité quand on regarde la personnalité, mais peux être négatif si la personne refuse de se prononcer et dit neutre. Donc dépend vraiment de l’objectif du test.

56
Q

Dans une échelle de Likert, le nombre d’alternatives dépend de….

Comment d’ancre en moyenne?

A

la capacité des répondants à faire la distinction entre elles.

5-7

57
Q

Pour Likert, les écarts entre les alternatives adjacentes sont présumés ______.

A

équidistants.

58
Q

NOMBRE D’ANCRES DANS UNE ÉCHELLE DE LIKERT: Elle devrait aussi en comporter un nombre assez restreint pour que ….

A

les choix soient assez distincts les uns des autres.

59
Q

TYPES DE CORRECTION dépend de quoi? (3)

A
  1. La correction dépend directement du type d’item et de format de réponse choisi.
  2. Combien de points sont accordés par item, selon la réponse du répondant à l’item?
  3. Comment se calcule le score total à l’instrument?
60
Q

CORRECTION DES ITEMS À RÉPONSE OUVERTE. Les 3 types?

A
  1. Cotation globale de l’évaluateur:
  2. Cotation analytique
  3. Qualification par points:
61
Q

Cotation globale de l’évaluateur. Comment elle est?

A

jugement global sur le texte.

Le plus rudimentaire, le plus d’erreur de mesure, le moins de fidélité, autant consistance interne, stabilité temporelle et accord inter-juge.

Il a aucune indication sur comment on note, c’est vraiment jugement globale. Aucune ligne directrice qui oriente correction, pas de jugement guidé.

62
Q

Cotation analytique. Comment elle est?

A

plusieurs critères déterminent l’évaluation du texte.

Il peut avoir certaine section qui a des points, ex : écrire un texte, des points pour les sources, structure, grammaire et idées.

On structure plus la correction, plus de chance que les juge s’entende.

62
Q

Qualification par points, comment elle est?

A

Présence d’une réponse « parfaite » et chaque élément présent vaut un point.

Limite erreur de mesure, plus fidèle. Comme un examen, c’est vraiment « l’élément est tu là ou non ».

63
Q

Les méthodes d’administration incluent (3):

A
  1. Les directives aux personnes évaluées ; les consignes données à chaque personne, plus c’est standardisé, plus sa sera les même consigne, plus réduit les chance d’erreur de mesures.
  2. Les conditions d’administration; Le temps alloué, le matériel permis, la formation évaluateur, test en groupe ou individuelle.
  3. La cotation (allocation des points). Influence les méthode d’administration.
64
Q

CRÉATION D’ITEMS

L’item doit être conforme à ….

A

la définition du construit

65
Q

CRÉATION D’ITEMS

L’item doit réduire au maximum ….

A

l’erreur de mesure

66
Q

CRÉATION D’ITEMS

L’item doit utiliser un vocabulaire….

A

adapté aux bénéficiaires;

67
Q

CRÉATION D’ITEMS

L’item doit pouvoir se répondre avec l’échelle de…

A

mesure utilisée

68
Q

Les grandes lignes pour rédiger item!

A

Prioriser le « je »; opinion de la personne, sa permet de mieux se contextualisé

Favoriser une formulation affirmative plutôt qu’interrogative; on peut pas poser des question.

Éviter de mettre « deux idées » dans un même item; ex : je me sent heureuse et en forme aujourd’hui, car sa mesure 2 choses, une personne peux se sentir heureuse mais pas en forme, donc mieux de les séparer.

Éviter les métaphores; peux biaisé, pas tout le monde va le comprendre.

Éviter les items à négations multiples; enlève clarté

Favoriser une formulation claire des items; tous ce qui est superflu on doit le retirer

Favoriser une formulation concise des items

Attention aux adverbes; surtout quand on utilise Likert, si tu dis « je suis vraiment heureuse » ça sert à rien, car justement dans Likert tu répond comment tu te sens heureuse, avec le totalement accord/pas du tout

Varier le sens des items; item inversé, permet de démasquer les personnes qui « botch » le test.

69
Q

C’est quoi un ITEMS INVERSÉS?

A

Un item dont la direction est opposée à celle des autres items (du même construit).

70
Q

Un item inversé permet de détecter quoi?

A

Permet de détecter et de contrôler les tendances de réponses