semaine 7 - biais des items et biais des test Flashcards
si les instrument d’évaluation sont biaisés cest le devoirs de qui d’en être informé?
le devoir de l’utilisateur, nous devons toujours nous posé la question s’il y a des biais
qu’elle type d’erreur est un biais
erreur systématique, pas aléatoire
** Une chose très importante est que des différence de moyenne n’est sont pas des biais** (a priori)
pourquoi les différences de moyenne entre certains groupes ne constituent pas a priori un biais
puisque certaines sont attendues sur le plan théorique / conceptuel
ex:ados = peu différences moyenne entre groupes ethniques, mais différences selon sexe/genre
un instrument d’évaluation est biaisé si….
si le contenu, la procédure ou l’utilisation favorise ou défavorise systématiquement les membres d’un groupe plutôt qu’un autre et si cette différenciation est non pertinente à l’objectif de l’instrument (si les différences entre les membres de différents groupes sont identifiées sur la base de caractéristiques autres que celles que l’instrument prétend évaluer)
La validité peut être affectée directement par des (2)
a) biais de réponse aux items individuels (plus importante)
(b) biais des scores à une échelle (scores composites)
La présence de biais est une question cruciale pour qui
autant pour les concepteurs.trices que les utilisateurs.trices de tests
v ou f : les personnes qui répondent au questionnaire sont biaisé
VRAI (en partie), même lors de niveau de base
qu’est ce que des Heuristiques
Stratégies cognitives utilisées pour simplifier et accélérer une décision en situation d’incertitude aussi appeler raccourcis mentaux
4 exemples connues d’heuristiques
- heuristique de la représentativité
- heuristique de la disponibilité
- heuristique de primauté/ de récence
- heuristique de l’affect
Heuristique de la représentativité
Évaluation d’une caractéristique spécifique en fonction de son degré de concordance à un prototype/ a la moyenne
ex : évaluation de l’attention d’un enfant en fonction de notre prototype du TDAH) heuristique va donc augmenté inattention si l’enfant en démontre moins que l’hyperactivité
Heuristique de la disponibilité
Évaluation qui est influencée par les choses qui viennent plus facilement (ou fréquemment) en tête à l’évaluateur.trice (e.g., comportements d’agressivité des enfants)
ex : 2 enfants un agressif et un autre dépressif nous allons être influencer a augmenter notre intervention vers l’enfant agressif étant donné qu’il est plus visible
Heuristiques de primauté / de récence
Évaluation qui est influencée par la première vs la dernière impression de l’individu
ex: jimmy dès le début de l’année donne un coup de chaise alors nous allons pensé dès le début et pour tout l’année qu’Il a des problèmes de comportements, même s’il ne fait plus rien de tout l’année et cela va influencer notre évaluation
Heuristique de l’affect
Évaluation teintée par l’état émotionnel et affectif actuel
(e.g., mauvaise humeur mène à estimer la présence de davantage de problèmes de comportement)
V ou F : tout le monde est tout le temps biaise a n’importe quel niveau
VRAI
pourquoi les biaise de réponse peuvent être grave
puisqu’ils influencent directement la validité des scores obtenus à un test et les décision clinique qui sont prise a propos d’un individu
8 grands type de biaise de réponse
- extrémité (répondre avec extrêmes)
- indécision (catégorie centrale)
- acquiescement (endosser sans égard au contenu)
- objection (rejeter sans égard au contenu)
- désidérabilité sociale (répondre de façon socialement désirable)
- gestion défavorable des impressions (répondre de façon socialement indésirable)
- réponse aléatoire (aléatoire, très peu d’attention au contenu)
- deviner (essayer de deviner la bonne réponse)
** diapo 12-13-14 pour définition**
Que faire pour prévenir ou minimiser les biais de réponse ? (3)
- gestion de la situation d’évaluation (notre job) : anonymat (secret professionnel), minimiser la frustration, donner des avertissements
- gestion du contenu des test (la job du concepteur) : items simple, items avec contenu neutre
- utilisé des test ou échelle de validité spécialisées
les échelles de validités sont basées sur le même principe…?
des scores très élevés ou extrêmes (i.e., endosser un nombre anormalement élevé d’items) suggèrent un problème potentiel (donc pas un problème automatique!! examen)
quest ce qu’on fait si on a des score très élevés ou extrême
entrevu post eval (puisque le biais peut être potentiel et non automatique) donc vérifier avec la personne ou avant
quel sont les échelles de validités (7) diapo 16-17-18-19 -20-21
- échelle d’indétermination
- échelle de désidérabilité sociale ( de Marlowe-Crowne /Inventaire balancé de style de réponse socialement désirable)
3.échelle de gestion défavorable des impressions - échelle de style de réponse extrême
- échelle d’indécision
- incohérence variable des réponses
- incohérence vraie des réponses
explique qu’est ce que le biais des items (fonctionnement différentiel des items) diapo 22-23-24
Il ne s’agit pas des différences de scores sur le trait, mais des différences systématiques dans la probabilité de répondre d’une façon donnée pour chaque item individuellement, une fois que le niveau du trait est contrôlé
*** Si statistiquement l’homme et la femme on le même niveau d’impulsivité, il devrait avoir la même probabilité de répondre pareil a un certain item (donc courbe superposé) donc lorsqu’on analyse le biais et que ce n’est pas superposé on retire l’items puisqu’il n’est pas valide
qu’est ce que l’on fait lorsqu’il y a des items biaisé dans les questionnaire (donc que la corde n’est pas superposé)
on retire l’items biaisé
explique qu’est ce que le biais structurel (ou factoriel) voir diapo 26
lorsque dans un des groupes les items ne sont pas en lien avec les mêmes facteurs il y a un biais la structure factoriel ne fonctionne plus comme il sont senser
Donc si on utilise les score du groupe2, les score sont contamine nous ne pouvons pas les interprété de la meme façons
instrument unidimensionnel = dif. significatives saturations factorielles entre 2 groupes
instrument multidimensionnel = Dif. des saturations + structure factorielle pas la même dans différents groupes
explique le biaise critériel diapo 28
lorsqu’un trait/item prédis quelque chose pour un groupe ou plusieurs groupe mais pas pour les autres
ex : L’engagement scolaire prédit la réussite scolaire pour un groupe d’étudiant, mais pas pour un autre
