Cours 7 Flashcards

1
Q

C’est le devoir de qui d’être informé.e sur le biais des instruments d’évaluation?

A

De l’utilisateur.trice des tests

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
2
Q

Le public a parfois l’impression que tous les instruments d’évaluation sont biaisés. Est-ce le cas?

A

Parfois

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
3
Q

Quant aux biais des tests, qu’est-ce qui est important de ne pas confondre?

A

Différence de moyenne entre des groupes et biais

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
4
Q

Est-ce que les différences de moyenne entre certains groupes constituent un biais?

A

Pas a priori, puisque certaines sont attendues sur le plan théorique/conceptuel

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
5
Q

Quand y’a-t-il un biais pour un instrument?

A

Si le contenu, la procédure ou l’utilisation favorise ou défavorise systématiquement les membres d’un groupe plutôt qu’un autre et si cette différenciation est non pertinente à l’objectif de l’instrument

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
6
Q

La fidélité des scores d’un instrument d’évaluation peut être compromise par quoi?

A

Différentes sources d’erreur de mesure

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
7
Q

Qu’est-ce qui est tributaire du degré de validité des scores?

A

Les inférences et les interprétations permises avec un instrument d’évaluation

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
8
Q

La validité peut être affectée directement par quoi?

A

(A) Des biais de réponse aux items individuels
ou
(B) Des biais des scores à une échelle (scores composites)

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
9
Q

La présence de biais est une question cruciale pour qui?

A

Autant pour les concepteurs.trices que les utilisateurs.trices de tests

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
10
Q

Est-ce que les personnes qui sont évaluées et qui répondent aux questions des instruments sont biaisés?

A

Oui, elles risquent toujours d’être en partie biaisées

Même à un niveau de base, il est maintenant reconnu que le système cognitif de l’humain est “victime” de plusieurs heuristiques ou biais cognitifs

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
11
Q

Que sont les heuristiques?

A

Stratégies cognitives utilisées pour simplifier et accélérer la prise de décision ou la résolution de problème en situation d’incertitude.

Ils sont des mécanismes ou processus normaux chez l’humain.

Parfois appelés raccourcis mentaux

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
12
Q

Est-ce que les heuristiques sont souvent positifs ou négatifs? Pourquoi?

A

Positifs! Ils aident effectivement à prendre des décisions et résoudre des problèmes

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
13
Q

Les heuristiques sont pratiques, mais parfois ils sont la source de biais. Pour quelle raison?

A

Puisqu’ils peuvent menés à des réponses erronées ou illogiques, à des erreurs de jugement

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
14
Q

À quoi s’appliquent les heuristiques?

A

À l’évaluation/estimation d’une personne: quand on ne connait pas assez bien une personne à évaluer, notre cerveau va mettre en branle des mécanismes d’aides.

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
15
Q

Les heuristiques peuvent aussi mener à quel inconvénient?

A

À stéréotyper les personnes de certains groupes, ce qui influence leur évaluation

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
16
Q

Nomme quatre exemples d’heuristiques.

A
  1. Heuristique de représentativité
  2. Heuristique de disponibilité
  3. Effets de primauté/de récence
  4. Heuristique de l’affect
How well did you know this?
1
Not at all
2
3
4
5
Perfectly
17
Q

La définition suivante correspond à quel exemple d’heuristique?

Évaluation d’une caractéristique spécifique en fonction de son degré de concordance à un prototype mental propre à l’évaluateur (e.g., évaluer l’attention d’un enfant en fonction de notre prototype du TDAH)

A

Heuristique de représentativité

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
18
Q

La définition suivante correspond à quel exemple d’heuristique?

Évaluation d’une caractéristique en fonction des informations immédiatement disponibles en mémoire, sans chercher à en acquérir de nouvelles (e.g., comportements d’agressivité des enfants)

A

Heuristique de disponibilité

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
19
Q

La définition suivante correspond à quel exemple d’heuristique?

Évaluation d’une caractéristique en fonction de la première vs la dernière impression de l’individu

A

Effets de primauté/de récence

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
20
Q

La définition suivante correspond à quel exemple d’heuristique?

Évaluation d’une caractéristique en fonction de l’état émotionnel et affectif actuel de l’évaluateur (e.g., mauvaise humeur de la mère mène à estimer la présence de davantage de problèmes de comportement chez son enfant)

A

Heuristique de l’affect

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
21
Q

Quels sont deux exemples de biais cognitifs très évoqués en évaluation?

A
  • Effet de halo
  • Effet Barnum
22
Q

Qu’est-ce que l’Effet de halo?

A

La perception générale positive que l’évaluateur a d’un individu influence son évaluation de l’ensemble de ses caractéristiques spécifiques (autrement dit, une généralisation erronée).

Parfois appelé “stéréotype de l’attirance physique” ou le principe de “ce qui est beau est bon”

23
Q

Selon l’effet de halo, la perception générale d’une personne peut parfois biaiser quoi?

A

L’évaluation des aspects spécifiques de son adaptation

24
Q

Est-ce que l’effet de halo peut être négatif?

A

Oui, similaire à l’effet d’étiquetage

E.g., un individu qui est globalement perçu comme moins physiquement attirant ou mauvais, ce qui mène à surestimer la présence potentielle de problèmes comportementaux spécifiques lors d’une évaluation

24
Qu'est-ce que l'effet Barnum?
La tendance chez une personne évaluée à accepter une description vague, générique ou générale de sa personnalité comme s'appliquant spécifiquement à elle-même
25
Quand est-ce que l'effet Barnum est particulièrement présent?
Si: - la personne évaluée est persuadée que l'analyse s'applique à elle seule - la personne évaluée reconnait une autorité à l'évaluateur - la présence dans l'analyse de traits majoritairement positifs
26
Les heuristiques, biais cognitifs et biais de réponse peuvent sembler banals à première vue, mais ils peuvent être très graves. Pourquoi?
Puisqu'ils **influencent directement la validité** des scores obtenus à un test
27
La validité "diminuée" peut en retour compromettre quoi?
La qualité des inférences et des décisions cliniques qui sont prises à propos d'un individu (ou d'un groupe) évalué
28
Il existe huit grand types de biais de réponse. Lesquels?
- Extrémité - Indécision - Acquiescement - Objection - Désirabilité sociale - Gestion défavorable des impressions ("malingering") - Réponse aléatoire ou négligente - Deviner ("guessing")
29
La définition suivante correspond à quel grand type de biais de réponse? Tendance à répondre très souvent par les catégories "extrêmes" peu importe le niveau de l'individu sur le construit (i.e., score à l'échelle). Pour des items à choix de réponses multiples
Extrémité
30
La définition suivante correspond à quel grand type de biais de réponse? Tendance à répondre très souvent par la catégorie centrale, peu importe le niveau de l'individu sur le construit (i.e., score à l'échelle) Pour des items à choix de réponses multiples
Indécision
31
La définition suivante correspond à quel grand type de biais de réponse? Tendance à endosser des items, sans égard à leur contenu. Répondre oui ou vrai dans les items dichotomiques; répondre du côté positif pour les items avec plus de deux choix de réponse, Aussi parfois appelée "gestion favorable des impressions"
Acquiescement
32
La définition suivante correspond à quel grand type de biais de réponse? Tendance à rejeter des items, sans égard à leur contenu. Répondre non ou faux dans les items dichotomiques; répondre du côté négatif pour les items avec plus de deux choix de réponse
Objection
33
La définition suivante correspond à quel grand type de biais de réponse? Tendance à répondre de façon socialement désirable ou exagérément positive à des items positifs improbables, de façon à exagérer ses qualités Aussi parfois appelée "Échelle de mensonge"
Désirabilité sociale
34
La définition suivante correspond à quel grand type de biais de réponse? Tendance à répondre de façon socialement indésirable ou exagérément négative de façon à exagérer ses limites ou ses problèmes d'adaptation
Gestion défavorable des impressions ("malingering")
35
La définition suivante correspond à quel grand type de biais de réponse? Répondre aux items de façon aléatoire ou avec très peu d'attention au contenu des items
Réponse aléatoire ou négligente
36
La définition suivante correspond à quel grand type de biais de réponse? Tendance à tenter de deviner la bonne réponse aux items Pertinent seulement pour les tests de performance
Deviner ("guessing")
37
Que faire pour prévenir ou minimiser les biais de réponse?
1. Gestion de la situation d'évaluation (anonymat, minimiser la frustration, donner des avertissements) 2. Gestion du contenu des tests (items simples, avec contenu neutre, choix de réponse conceptuellement clairs) 3. Utiliser des tests ou échelles de validité spécialisées
38
Que suggèrent des scores très élevés ou extrêmes (i.e., endosser un nombre anormalement élevé d'items)?
Un problème potentiel
39
Nomme quelques exemples d'échelles de validité.
- Échelle d'indétermination (items non répondus, items avec plusieurs réponses, temps de réponse trop court) - Échelle de désirabilité sociale - Échelle de gestion défavorable des impressions - Échelle de style de réponse extrême (1er ou 7e choix) - Échelle d'indécision (4e choix) - Incohérence variable des réponses VRIN (paires d'items répondues de façon incohérente) - Incohérence vraie des réponses TRIN (paires d'items conceptuellement différentes)
40
Quelle est la différence entre le VRIN et le TRIN?
VRIN: - Somme du nombre de paires d'items qui ont été répondues de façon incohérente - Sert à détecter les **réponses aléatoires** (intentionnelle ou non) ou la **confusion** dans un questionnaire TRIN: - Utilise seulement des paires d'items qui sont conceptuellement **différentes** - Calcul: somme des paires d'items répondues vrai de façon incohérente, moins la somme des paires d'items répondus faux de façon incohérente - Sert à détecter les réponses incohérentes qui révèlent **l'acquiescement** (score très élevé) ou **l'objection** (score très faible, possiblement négatif
41
Quels sont les 4 différents types de biais?
1. Biais des items (ou des indicateurs) 2. Biais factoriel (ou biais structurel) 3. Biais critériel (ou biais critérié) 4. Biais de la fidélité
42
Cette définition correspond à quel type de biais? Il ne s'agit pas de différences de scores sur le trait, mais des différences systématiques dans la probabilité de répondre d'une façon donnée pour chaque item individuellement, une fois que le niveau du trait est contrôlé
Biais des items
43
Cette définition correspond à quel type de biais? Pour un instrument unidimensionnel: différences significatives des saturations factorielles entre deux groupes. Pour un instrument multidimensionnel: différences des saturations factorielles ET la structure factorielle n'est pas la même dans différents groupes
Biais factoriel
44
Cette définition correspond à quel type de biais? S'applique autant à la validité de critère concomitante (critère indépendant et groupes contrastés) qu'à la validité prédictive
Biais critériel
45
Cette définition correspond à quel type de biais? Les estimés de la fidélité sont significativement différents dans différents groupes
Biais de la fidélité
46
Comment peut-on vérifier s'il y a biais des items?
On compare la probabilité d'endosser les items d'une échelle pour des individus de différents groupes **qui ont le même score/niveau** sur le trait (Même principe que les variables de contrôle dans les études prédictives (e.g., lorsqu'on contrôle pour le SSÉ))
47
Que signifie des différences significatives des saturations factorielles entre deux groupes (biais factoriel)?
Pas banal puisque ceci signifie que le trait n'est pas mesuré de la même façon dans différents groupes
48
Qu'est-ce qui est attendu, et donc pas un biais critériel?
L'observation de différences entre des groupes pour les relations prédictives (justifiées théoriquement)
49
Pourquoi est-ce que le biais de la fidélité peut être potentiellement important pour l'interprétation?
- S'il y a un biais, le niveau de confiance qu'on peut avoir envers les scores d'une échelle varie d'une groupe à l'autre - Les différences de groupe observées au niveau des moyennes peuvent alors être en partie expliquées par de l'erreur