Cours 4 Flashcards

1
Q

ÉTAPE 3: L’ÉLABORATION

A

Rédiger des items en réduisant le plus possible l’erreur de mesure

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
2
Q

LA FIABILITÉ À LA PHASE DE PRÉPARATION

A

Fiabilité en général
«Jusqu’à quel point mon instrument comporte-t-il de l’erreur de mesure?»

À l’étape de l’élaboration
«Comment créer un instrument qui limite au maximum l’erreur de mesure? »
Il va toujours en avoir des erreurs, mais on veut limiter au maximum

Objectifs
• Prévoir les sources d’erreur de manière à les minimiser
• Construction de l’instrument

Moyens
• Lectures «psychométriques» (les experts)
• Inventaire des stratégies déjà employées

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
3
Q

Les décisions prises auront une incidence sur le niveau d’erreur de mesure et la manière d’évaluer l’étendue de l’erreur

Il faut donc élaborer en faisant des choix éclairés par rapport :
(6)

A
  • Au type de test
  • Au type et au nombre d’items
  • Au type de réponse
  • Au type d’échelle
  • À la méthode de cotation (comment on va donner des points sur les réponses données)
  • À la méthode d’administration (comment on donne le test)
How well did you know this?
1
Not at all
2
3
4
5
Perfectly
4
Q
  1. ERREUR SYSTÉMATIQUE
    Type d’erreur:
A

Erreur systématique:
a) La même erreur de mesure affecte tous les scores d’un instrument de la même manière, dans la même direction (les scores vont être affecté peut importe qui répond)
Ex: une balance mal calculée

OU

b) La même erreur de mesure affecte tous les scores d’une personne de la même manière, dans la même direction (les scores vont être affecter selon la personne qui répond)
Ex: un test pas dans ma langue maternelle, ce qui affecte mon résultat, mais pas celui du voisin
Ça lui enlève 2% (toujours même ampleur/manière) et ça diminue ses résultats (direction)

  • La fiabilité (fidélité) est moins en danger (la mesure peut rester constante et reproductible)
  • Bien qu’importante et qu’il faille la minimiser, l’erreur systématique n’est pas considérée comme une source grave d’erreur de mesure
How well did you know this?
1
Not at all
2
3
4
5
Perfectly
5
Q
  1. ERREUR ALÉATOIRE
    Type d’erreur:
    (4 catégories)
A

Erreur aléatoire
- N’affecte pas tous les scores de la même manière: très problématique
Plus difficile à détecter

4 catégories:
1. Erreurs lors de la cotation (pas de grille de correction, les règles de corrections pas très claire)
2. Variations dans les procédures d’administration (les règles d’administration)
3. Variations dues aux répondants (interne à la personne, elle est fatiguée, malade, état temporaire)
4. Variations en raison du contenu (items PAS TRÈS SIMILAIRES)

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
6
Q

Instrument normatif
TYPES DE TESTS
(exemple)

A

• Instruments dont l’interprétation des résultats repose sur la comparaison aux résultats compilés auprès d’un échantillon de la population à qui s’adresse l’instrument

Exemple:
• WAIS
Idéal = normatif car on peut vraiment comparer (ex: comparer une personne avec un groupe)
Une moyenne ne peut pas être une norme, il faut plus d’info comme écart type…

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
7
Q

Instrument critérié
TYPES DE TESTS

A

• Instruments dont l’interprétation des résultats repose sur le fait qu’un seuil critique a été atteint, ou non, dépassé

Exemple:
• Examen au baccalauréat en psychologie (pour avoir A+ = 90% et plus)

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
8
Q

Vitesse:
TYPES DE TESTS

A

• Tous les items sont faciles et ont un niveau de difficulté égal (sauf lorsque le test est aussi de puissance)

• Correction: Le nombre d’items complétés en X temps (après 12 min, on regarde le nombre d’items répondu) OU le temps nécessaire pour compléter tous les items.

Exemple:
• Test de vitesse de traitement où l’on coche tous les «T » sur une page remplie de lettres
Compléter le test le plus rapidement possible

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
9
Q

Puissance
TYPES DE TESTS
(exemple)

A

• Objectif: Vérifier les limites des connaissances ou des habiletés du candidat

• Les items sont ordonnés du plus facile au plus difficile

• Peut inclure un temps limite

Exemple:
• Test des blocs de la WAIS

Jusqu’à où on peut se rendre
Si pas de temps limite = prendre plus de temps
Peut être ni puissance ni vitesse ex: test d’intérêt professionnel

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
10
Q

Performance typique
TYPES DE TESTS

A

• Comment la personne est-elle dans la vie de tous les jours ?

• Vise à mesurer le niveau habituel

Exemple:
• Test de personnalité
Comment la personne est (intérêt professionnel)

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
11
Q

Performance maximale
TYPES DE TESTS

A

• Comment la personne est-elle à son mieux?

• Vise à mesurer la meilleure performance possible

Exemple:
• Test de rendement
Aux examens, on essaie d’être à notre meilleur

Entrevue d’embauche: on cherche la performance typique car on veut dans la vie de tous les jours

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
12
Q

Papier-crayon
TYPES DE TESTS

A

• Les personnes qui passent le test répondent à des items écrits

Exemple:
• Questionnaire «Test de personnalité»
Peut aussi être à l’ordinateur, c’est écrit
Répondre à un test mathématique

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
13
Q

Performance
TYPES DE TESTS

A

• Les personnes soumises au test effectuent une tâche

Exemple:
• WAIS
Ex: déplacer des blocs, cliquer les options qui s’applique à nous

Attention, on réfère au résultat obtenu à tout test comme «la performance au test».
Performance au test

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
14
Q

Individuel
TYPES DE TESTS

A

• Instruments conçus pour être administrés à une personne à la fois

• Ne peuvent PAS être administrés en groupe

Exemple:
• Rorschach
Une personne à la fois dans la salle

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
15
Q

Groupe:
TYPES DE TESTS

A

• Instruments conçus pour être administrés à plusieurs individus à la fois

• Peuvent être administrés à une personne lorsque les circonstances le dictent et lorsque le «manuel» décrit comment le faire

Exemple:
• SAT
Conçu pour que plusieurs personnes puissent répondre en même temps, mais chacun fait leur propre réponse. Pas en équipe. Si y’a seulement une personne d’inscrit, elle peut faire le test seul, mais le test en quand même produit en fonction qu’il pourrait être un test de groupe.

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
16
Q

TYPES D’ITEMS

A

Qu’est-ce qu’un item?
• Le stimulus auquel répond le participant

• C’est «la question»

• Peut-être écrit ou oral
Ex:
J’ai un bon appétit
Je porte attention aux détails
Mathilde à 2$ et a deux amis. Elle veut partager en deux. Comment lui reste-elle?

17
Q

2 formats de réponse:

A

• Réponse fermée (ou à choix de réponses)
• Réponse ouverte (ou à développement)

18
Q

ITEMS À RÉPONSE FERMÉE

A

Type d’item:
- Vrai ou faux
- Oui ou non
- Échelle de Likert
- Échelle d’évaluation graphique
- Choix de réponses
- Choix forcé (échelles ipsatives) (quel énoncé correspond le mieux pour toi)

Choix forcé = on doit se mettre dans une situation
Choix de réponses= plus général, pas nécessairement de choix neutre

Voir notes et photos

19
Q

ITEMS À QUESTION OUVERTE
Exemples

A

La réponse à une question ouverte peut être d’un seul mot ou plus longue
Exemples
• Associations verbales
• Compléter une phrase
• Stimulus visuel ambigu (qu’est-ce que tu vois sur cette image)
• Question à développement dans un examen
Pas de choix prédéfinis

20
Q

ITEMS À CHOIX DE RÉPONSES OU À DÉVELOPPEMENT
Avantages et inconvénients pour les 2 types de format de réponse

A

• Test collectif ou individuel ?

Choix de réponses:

• Fidélité de la cotation

• Optimisation du temps de passation

• Optimisation du temps pour la cotation

Items àdéveloppement:

• Facilite l’observation de comportements et de processus associés au test

• Richesse de l’information recueillie

21
Q

Qu’en est-il des tests de rendement et des avantages/inconvénients des items à choix de réponses vs à développement ?

A

QCM: plus numérique, plus par cœur
Développement: apprentissage plus globale

22
Q

TYPES D’ÉCHELLES Manuel p.46

A

Les variables sont évaluées ou quantifiées à l’aide d’échelles de mesure.

Classification en quatre types aux propriétés distinctes:
1. Nominale
2. Ordinale
3. Intervalles
4. Rapport

23
Q

ÉCHELLE NOMINALE

A

Cette échelle permet:
a) d’identifier les personnes

C’est une échelle catégorielle, où les nombres représentent une caractéristique particulière

• Le nombre n’a pas de sens particulier à part représenter la catégorie

• On ne peut donc faire aucune opération mathématique avec ces nombres

Exemples:
• Numéro d’assurance sociale
• Numéro de dossard
• 0 = Femme / 1 = Homme
• 1 = Montréal / 2 = Québec / 3 = Rimouski

24
Q

ÉCHELLE ORDINALE

A

Cette échelle permet:
a) d’identifier les personnes

b) de les mettre en ordre de rang
• Les nombres entretiennent une relation entre eux

• On ne peut faire aucune opération mathématique avec ces nombres à part les classer en ordre

• On ne connaît pas la distance entre chaque position

Exemples:
• Rang dans une compétition sportive
• Rang des journées les plus chaudes de l’année
• Rang de la personne la plus grande à la plus petite

25
Q

ÉCHELLE À INTERVALLES

A

Cette échelle permet:
a) d’identifier les personnes

b) de les mettre en ordre de rang

c) d’effectuer des additions et des soustractions

Tous les écarts entre les nombres sont équivalents (équidistants). Toutefois, l’échelle est arbitraire et le 0 (zéro) ne signifie pas l’absence de l’attribut

Exemples:
• Température en Celsius ou en Fahrenheit
• L’année

26
Q

ÉCHELLE DE RAPPORT

A

Cette échelle permet:

a) d’identifier les personnes

b) de les mettre en ordre de rang

c) d’effectuer des additions et des soustractions

d) d’effectuer des multiplications et des divisions

Tous les écarts entre les nombres sont équivalents (équidistants).
• L’échelle possède un zéro absolu, où 0 signifie l’absence de l’attribut

Exemples:
• Température en Kelvin
• Distance au lancer du javelot
• Score à un examen en pourcentage

27
Q

RÉSUMÉ DES QUATRE TYPES D’ÉCHELLES

A

Nominale: identifier
Ordinale: ordonnancer
Intervalle: addition/soustraction
Rapport: multiplication/division

Plus ça descends, plus il y a des opérations permises et de la sophistication

28
Q

ÉCHELLES COURANTES EN PSYCHOLOGIE

A

• En psychologie, il y n’y a pas vraiment d’échelles de rapport.
• On s’intéresse peu à la température, la distance, etc.

• Les échelles sont principalement nominales, ordinales ou à intervalles

29
Q

QU’EN EST-IL DES ÉCHELLES DE LIKERT?

A

• Développé en 1932 dans un contexte d’items mesurant les attitudes

• Propose un nombre pair ou impair d’alternatives

• Le nombre d’alternatives dépend de la capacité des répondants à faire la distinction entre elles

• Les mots (ancres) doivent être bien choisis

• Les mots (ancres) supposent un ordonnancement en termes d’intensité du phénomène d’intérêt

• Les écarts entre les alternatives adjacentes sont présumés équidistants
Plus de nombre de choix (nbr de que), moins d’erreur = meilleur fidelité
On veut 7, pas plus car trop complexe (best entre 5 et 7)

QU’EN EST-IL DES ÉCHELLES DE LIKERT? PROBLÈME AVEC CERTAINES ÉCHELLES
Voir notes

Voir notes

Dépend de l’interprétation des gens = subjectivité (très souvent et souvent = difficile à dire ex: tous les jours vs à toute les heures)
Trop de variabilité = trop d’erreur

30
Q

NOMBRE D’ANCRES DANS UNE ÉCHELLE DE LIKERT

A

• L’échelle devrait comporter assez d’ancres pour que la personne puisse faire un choix

• Elle devrait aussi en comporter un nombre assez restreint pour que les choix soient assez distincts les uns des autres

• L’échelle doit être adaptée à la population cible

• Veut-on forcer la personne à se prononcer ou non?

31
Q

TYPES DE CORRECTION

A

**On dit aussi cotation, ou scoring

• La correction dépend directement du type d’item et de format de réponse choisi

• Combien de points sont accordés par item, selon la réponse du répondant à l’item?

• Comment se calcule le score total à l’instrument?
• Moyenne, somme, score brut, score transformé, etc.

32
Q

Tests de rendement ou d’aptitudes
CORRECTION DES ITEMS À RÉPONSE FERMÉE

A

• La bonne réponse vaut 1 et les mauvaises valent 0

• 2 points pour la meilleure réponse, 1 point pour une réponse correcte, 0 points pour une mauvaise réponse

• 1 point pour la bonne réponse, -1 pour une mauvaise réponse

33
Q

Tests de personnalité, d’attitudes, d’intérêt
CORRECTION DES ITEMS À RÉPONSE FERMÉE

A

• Vrai ou faux: 1 ou 0
• Oui ou non: (oui = 1, ne sais pas = 0, non = -1
• Échelle de Likert: 1, 2, 3, 4, 5 OU -2, -1, 0, 1, 2
• Choix forcé: 1 ou 0

34
Q

CORRECTION DES ITEMS À RÉPONSE OUVERTE (voir notes à qqun) (3)

A
  1. Cotation globale de l’évaluateur: jugement global sur le texte
  2. Cotation analytique: plusieurs critères déterminent l’évaluation du texte
  3. Qualification par points: Présence d’une réponse «parfaite» et chaque élément présent vaut un point
    **Il est Impératif que les réponses soient évaluées de la même façon et que les évaluateurs évaluent les réponses de la même façon (fiabilité inter-juge)
35
Q

MÉTHODES D’ADMINISTRATION

A

Les méthodes d’administration incluent :
• Les directives aux personnes évaluées ;

• Les conditions d’administration ;

• La cotation (allocation des points).

Lorsque les méthodes d’administration sont observées systématiquement (appliqué), on les qualifie de standardisées. Si on doit suivre un protocole = standardiser
Si standardiser permet de diminuer les erreurs aléatoire, soit augmenter la fidélité (car tout le monde même expérience)

36
Q

CRÉATION D’ITEMS

A

• L’item doit être conforme à la définition du construit

• L’item doit réduire au maximum l’erreur de mesure

• L’item doit utiliser un vocabulaire adapté aux bénéficiaires

• L’item doit pouvoir se répondre avec l’échelle de mesure utilisée

• Employer le «je»

• Favoriser une formulation affirmative plutôt qu’interrogative

• Éviter de mettre «deux idées» dans un même item

• Éviter les métaphores

• Éviter les items à négations multiples

• Favoriser une formulation claire des items

• Favoriser une formulation concise des items

• Attention aux adverbes

• Varier le sens des items

37
Q

ITEMS INVERSÉS

A

Un item dont la direction est opposée à celle des autres items (du même construit).

Exemple d’items pour la dépression
• Je me sens déprimé (item normal)

• Je ne me sens pas déprimé (item inversé)

• Je me sens heureux (item inversé)

Permet de détecter et de contrôler les tendances de réponses

38
Q

Corporate psychopath:

A

without a conscience

Emotional connexion and lack of empathy

Looks at people like objects.

L’hypocampe ne fonctionne pas de la meme facon

Lack of remorse, manipulate and does not care about other people