Cours #8: Construction Des Instruments De Mesures Et Types D’items, Dechelles Et De Réponses Flashcards
Est-ce qu’il y a beaucoup de test utiles en psychoed? Si oui, quels sont-ils?
-Tests d’aptitudes intellectuelles / capacités cognitives
-Tests de rendement
-Mesures d’intérêts, attitudes et valeurs
-Mesures de personnalité / tempérament
-Mesures de psychopathologies / problèmes d’adaptation
Quelle mesure les psychoéducateurs ne peuvent pas utiliser?
-Tests neuropsychologiques
Quelle est la grande catégorie est souvent oubliée dans les livres en psychologie ?
-Mesures de construits environnementaux (structure familiale, quartier)
Les instruments doivent respecter les critères répertoriés de quelle référence?
Standards du testing en éducation et en psychologie
La construction et la validation d’un test est un processus __________.
à long terme (années, décennies)
Qu’est-ce qu’il est important de faire pour vérifier la validité et la fiabilité d’un instrument?
Plusieurs révisions de l’instrument.
Ce processus de construction s’opérationnalise selon différentes étapes successives, est-ce que les étapes sont toujours utiles pour tous les instruments?
Non certaines sont essentielles à certains instruments, alors que d’autres le sont moins.
Est-il important de sélectionner les bonnes propriétés psychométriques en fonction du sujet exploré?
Oui, c’est capitale, sinon on ne mesure pas vraiment ce qu’on souhaite mesurer :)
Quelles sont les deux grandes méthodes de construction des tests?
- Déductive (ou rationnelle) permet de développer l’instrument.
«conclure en partant de propositions prises pour prémisses». - Inductive (ou empirique)
«conclure en remontant des faits à la loi» Basé sur la dimension théorique.
Quelles sont les caractéristiques de la méthode déductive?
-À partir d’un cadre théorique
-Théorie scientifique (construits)
-Théorie clinique (perspective psychoéducative) Répondre à un manque ou besoin.
Quel est l’avantage de la méthode déductive?
Contexte théorique clair, cohérence logique (i.e., réseau nomologique souvent connu a priori)
Quels sont les désavantages de la méthode déductive?
-Subjectivité face à la théorie, théorie implicite des auteurs.trices
-On ne sait pas si cela fonctionne dans la réalité sans faire des études empiriques
-On ne sait pas si les répondants.es interpréteront les items inspirés de la théorie (et en conséquence, les construits) de la même manière que le concepteur.trice du test le croyait
Quelles sont les caractéristiques de la méthode inductive?
-À partir d’une démarche empirique
-Analyse d’items / Analyse factorielle : les items statistiquement liés au construits sont sélectionnés
-Sélection critériée : e.g., seuls les items qui différencient des groupes sont sélectionnés
Toutefois, la démarche n’est jamais complètement empirique (théorie sous-jacente).
Comment fonctionne l’analyse factorielle?
on rejette celles avec une faible saturation factorielle.
On favoriser les scores ayant les scores-T les plus élevés=bonne échelle clinique.
Quels sont les avantages de la méthode inductive?
Plus grande objectivité et plus représentatif de la réalité; on vérifie notre compréhension d’un construit, appuyée explicitement par des données.
Quels sont les désavantages de la méthode inductive?
-On n’arrive pas nécessairement au résultat qu’on voulait, les données dictent le résultat final.
-Les statistiques peuvent parfois dénaturer les concepts en raison de biais d’échantillonnage
Qu’est-ce que l’analyse d’items?
-C’est l’ Étape classique dans le développement d’un nouvel instrument d’évaluation.
À quoi sert l’analyse d’items?
Sert à identifier les meilleurs items à inclure dans une échelle à partir d’analyses statistiques.
Quels sont les deux indices de bases psychométriques qui peuvent être utilisés?
- la difficulté (termes développés difficiles, un examen)
- la discrimination des items
comment on choisit les items à partir de l’analyse factorielle?
Les items ayant une saturation factorielles les plus hautes (0,4 et plus).
À quoi correspond la difficulté de l’item?
la proportion (ou pourcentage) d’individus qui endossent ou répondent correctement à l’item.
-peut s’appliquer aux choix de réponses multiples.
Items trop difficile ou trop faciles peu utiles
-on veut des items de difficultés variées.
Vrai ou faux: Les items trop faciles ne servent à rien, car ça ne discriminent pas les gens…On ne veut pas non plus des questions trop difficiles…
Vrai
Qu’est-ce qu’un bon item?
Généralement, les réponses sont bien réparties (50-50, 30-70).
L’item discrimine les gens et les met dans des catégories.
En quoi consiste la discrimination de l’item?
-Le degré auquel les individus avec un score élevé sur un test répondent correctement à un item particulier – ou l’inverse.
-Appelé effet de l’item.
-Permet de discriminer les individus qui connaissent le contenu de ceux qui ne le connaissent pas.
Vrai ou faux: L’indice de discrimination s’applique aussi aux instruments de mesure de construits avec des items sans «bonne réponse».
Vrai
Qu’est-ce que l’item total corrigé?
corrélation entre l’item et le total de l’échelle (ex, somme), sans l’item concerné. En général, on veut au minimum 0.30 et plus.
Qu’est-ce que la corrélation multiple au carré?
corrélation multiple (variance expliquée) obtenue en régressant l’item concerné sur tous les autres items de l’échelle. Pas de «valeur critère», mais plus est mieux.
Comment fait-on pour choisir le Alpha de Cronbach lors d’analyse d’items?
On choisit le plus élevé, car quand on enlève une question, le chiffre descend.
Les items et choix de réponses peuvent varier selon…
1) le type de construit et l’utilisation de l’instrument.
2) préférences personnelles des auteurs.
Quelles sont les manières dont les questions peuvent être représentées?
Oralement en entrevue
Oralement en version informatique
Visuellement en version papier-crayon
Visuellement en version informatique
Quelle est la distinction le plus importante des choix ou échelles de réponse?
le type de réponse qui est demandé à la personne évaluée:
(a) items à réponses construites et
(b) items à réponses sélectionnées
En quoi consiste les items à réponses construites?
-Une prémisse est présentée à la personne évaluée, mais pas de contrainte sur un choix de réponse fixe.
-(a) questions ouvertes à réponse longue et (b) des questions ouvertes à réponse courte
Quelle type de question est primordiale en entrevue?
Les questions à réponses construites sont essentielles en entrevue (pour recueillir les infos nécessaires).
En quoi consiste les items à réponses sélectionnées?
Une prémisse est présentée à la personne évaluée et elle est placée devant la contrainte cognitive d’un choix de réponse fixe.
-Il s’agit du type d’items le plus utilisé dans les instruments d’évaluation en sciences humaines
Quel type d’item est le plus utilisé en sciences humaines? Pourquoi?
-Items à réponses sélectionnées
-Parce que sont plus objectifs, plus facile de dériver un score numérique, plus fiables, souvent plus brefs
Vrai ou faux: il faut absolument utiliser les types d’échelle pour évaluer ce qu’elles tentent vraiment d’évaluer?
Vrai. Quand on parle de fréquence, on ne parle pas de gravité.
Quelles sont les 4 tâches cognitives que les personnes qui répondent à un choix de réponse sélectionné doivent faire?
- Compréhension : comprendre le contenu pertinent (question claires)
- Récupération : récupérer l’information pertinente en mémoire qui est nécessaire pour répondre
- Jugement : porter un jugement sur la base de l’information récupérée
- Répondre : rapporter ce jugement, sur la base du choix de réponse disponible
Quelles sont les caractéristiques souhaitables d’un bon choix de réponses?
niveau de langage simple, bref, choix de réponses simples, éviter les contenus multiples, absence de leurre (piège),
À quoi faut-il faire attention dans le contenu des items?
Les sujets sensibles qui peuvent entrainer la non-réponse, la dissimulation et la distorsion.
Quelle est la question cruciale au Québec en terme de traduction?
La langue française doit être utilisée!
Quelles sont les caractéristiques des traductions maisons que nous utilisons souvent?
(1) sans aucune étude vérifiant leurs propriétés psychométriques et/ou
(2) sans recueillir des normes québécoises
Que faire lorsque la traduction de l’item n’est pas suffisant?
une adaptation des items est nécessaire
Vrai ou faux? La compréhension du contenu, le sens/signification des items est plus important que la traduction exacte.
Vrai, C’est le sens de l’item qui est important, pas sa traduction.
Quelles sont les 6 étapes de l’adaptation transculturelle?
- Traduire et adapter les items (2 personnes minimum)
Méthode de choix : Traduction à rebours (2 personnes indépendantes) (anglais à français et français à anglais) On recherche le même sens («back translation»). - Experts.es indépendants.es (pas auteur) révisent la traduction.
- Éliminer ou adapter les items selon leurs commentaires.
- Étude pilote auprès des individus ciblés.
- Validation empirique formelle (évaluation détaillée des propriétés psychométriques)
- Standardisation (établir des normes)
Quelles sont les 5 façons d’établir l’équivalence transculturelle?
- Équivalence sémantique
S’assurer que les items ont la même signification dans les deux langages / cultures (même sens) - Équivalence de contenu
S’assurer que chaque item est pertinent dans les deux langages / cultures pour mesurer le construit - Équivalence factorielle
S’assurer que la structure factorielle est la même dans les deux langages / cultures (items vont dans les bonnes échelles) - Équivalence critériée
S’assurer que la validité de critère est similaire dans les deux langages / cultures
Parfois difficile de conclure à la non-équivalence critériée
e.g., avec une mesure de pratiques parentales, une pratique liée aux problèmes d’adaptation seulement dans une version (ou culture) n’est pas nécessairement un problème de l’instrument. - Équivalence de la fidélité
S’assurer que les indices de fidélité sont similaires dans les deux langages / cultures (souvent cohérence interne).
Qu’est-ce que l’équivalence de fidélité?
à quel point les instruments génèrent des erreurs de mesures.
