Diapo 11 Flashcards
Quelle catégorie de test est souvent oubliée dans les livres de psychologie?
Mesures de construits environnementaux
Nommez quelques catégories de tests utiles en psychoéducation.
Tests d’aptitudes intellectuelles / capacités cognitives
Tests de rendement
Tests neuropsychologiques
Mesures de personnalité / tempérament
Mesures d’intérêts, attitudes et valeurs
Mesures de psychopathologies / problèmes d’adaptation
De façon générale, les organisations professionnelles s’attendent à ce que les auteurs.trices aient construit leur instrument en respectant les critères répertoriés dans les ______ du _____ en ______ et en _________
Standards du testing en éducation et en psychologie (AERA, APA et NCME)
La construction et la validation d’un test est un ________ à ______ terme
processus
long
Vrai ou faux. Toutes les étapes du processus de construction sont essentielles pour tous les types de tests.
Faux
Quelles sont les 9 étapes de construction d’un test?
1.Définir le construit de façon compréhensive; établir les domaines et sous-domaines; établir le réseau nomologique
2.Déterminer le type de test pertinent
3.Déterminer le type d’items pertinent et développer un bassin d’items
4.Déterminer la ou les utilisations prévues
5.Déterminer la longueur du test nécessaire et la pertinence de formes parallèles
6.Conduire une étude pilote auprès des individus ciblés (évaluer la vraisemblance et certaines propriétés psychométriques de base)
7.Conduire une validation empirique détaillée (i.e., évaluer les propriétés psychométriques)
8.Effectuer la standardisation (ou l’étalonnage, i.e., établir des normes)
9.Produire la documentation technique; i.e., un manuel de l’utilisateur.trice, ou par articles scientifiques
Quelles sont les 2 grandes méthodes de construction des tests?
Déductive (ou rationnelle)
inductive (ou empirique)
La méthode déductive est décrite par un _____ __________, soit une théorie ______ ou une théorie _____
cadre théorique
scientifique
clinique
Quel est l’avantage de la méthode déductive?
Contexte théorique clair, cohérence logique (i.e., réseau nomologique souvent connu a priori)
Quels sont les désavantages de la méthode déductive?
. Subjectivité face à la théorie, théorie implicite des auteurs.trices
. On ne sait pas si cela fonctionne dans la réalité sans faire des études empiriques (i.e., la structure factorielle, validité de critère, etc.)
. On ne sait pas si les répondants.es interpréteront les items inspirés de la théorie (et en conséquence, les construits) de la même manière que le concepteur.trice du test le croyait
La méthode inductive se fait à partir d’une ________ _________
démarche théorique
Quelles sont les 2 composantes de la méthode inductive?
Analyse d’items / Analyse factorielle : les items statistiquement liés au construits sont sélectionnés (corrélations item-total, saturations factorielles, etc.)
Sélection critériée : e.g., seuls les items qui différencient des groupes sont sélectionnés
Vrai ou faux. La démarche de la méthode inductive n’est jamais complètement empirique
Vrai
Quels sont les avantages de la méthode inductive?
Plus grande objectivité et plus représentatif de la réalité; on vérifie notre compréhension d’un construit, appuyée explicitement par des données
Quels sont les désavantages de la méthode inductive?
On n’arrive pas nécessairement au résultat qu’on voulait, les données dictent le résultat final
Les statistiques peuvent parfois dénaturer les concepts en raison de biais d’échantillonnage
Qu’est-ce que l’analyse d’items?
Une étape classique dans le développement d’un nouvelle instrument d’évaluation
À quoi sert l’analyse d’items?
Sert à identifier les meilleurs items à inclure dans une échelle à partir d’analyses statistiques
Quels sont les 2 indices de base en psychométrie qui peuvent être utilisés en analyse d’items?
la difficulté et la discrimination des items
Qu’est-ce que la difficulté de l’item?
la proportion (ou pourcentage) d’individus qui endossent ou répondent correctement à l’item
Vrai ou faux. La difficulté de l’item est pertinent avec des items très difficiles ou très faciles
Faux
Vrai ou faux. La difficulté de l’item peut aussi s’appliquer aux items à choix de réponses multiples
Vrai
Vrai ou faux. Idéalement avec la difficulté de l’item, on veut des items de difficultés variées.
Vrai
Qu’est-ce qu’un item dichotomique?
un item à deux choix de réponses (vrai/faux)
le total des deux donnent toujours 100%
Qu’est-ce qu’un item polytomique?
un item avec plusieurs choix de réponses (gradation)
l’addition du nombre des résultats donne 100%
Qu’est-ce que la discrimination de l’item (effet de l’item)?
le degré auquel les individus avec un score élevé sur un test répondent correctement à un item particulier – ou l’inverse
il s’agit d’un indice d’efficacité d’un item
Vrai ou faux. La discrimination de l’item ne s’applique pas aux items à choix multiples.
Faux
Vrai ou faux. L’analyse d’items s’applique aussi aux instruments de mesure construits avec des items sans bonne réponse. Expliquez votre réponse par un exemple
Vrai
Par exemple, corrélation entre le score à une échelle d’Émotivité négative et un item particulier (e.g., irritabilité) indique à quel point cet item est un bon indicateur permettant de différencier les individus qui ont un niveau élevé (ou faible) d’émotivité négative de ceux qui n’en ont pas un
Comment le types d’items change-t-il? (3 éléments de réponse)
Type de construit évalué
Utilisations particulières d’un instrument
Préférences personnelles des auteurs.trices
Nommez quelques possibilités de présentation de questions
. Oralement en entrevue
. Oralement en version informatique (i.e., appli qui «lit» les questions)
. Visuellement en version papier-crayon
. Visuellement en version informatique (sur ordinateur fixe, ou avec appli sur un téléphone intelligent, une tablette)
Quels sont les 2 types de réponses possibles?
items à réponses construites
items à réponses sélectionnées
Quels contraintes peuvent être établies avec des réponses construites (questions à développement / ouverte / libre)?
questions ouvertes à réponse longue
questions ouvertes à réponse courte
Vrai ou faux. On peut établir une contrainte sur un choix de réponse fixe avec une réponse construites.
Faux
Vrai ou faux. Les questions à réponses construites sont essentielles en entrevue
Vrai
(items à réponses sélectionnées) Une prémisse est présentée à la personne évaluée et elle est placée devant la __________ __________d’un choix de réponse fixe
contrainte cognitive
Vrai ou faux. Les items à réponses construites est le type d’items le plus utilisé dans les instruments d’évaluation en sciences humaines, sociales et psychologiques
Faux, c’est les items à réponses sélectionnées (ils sont plus objectifs)
Nommez 4 échelles pour des items à réponses sélectionnées.
échelle de fréquence
échelle de variété
échelle d’intensité / gravité
échelle de Likert
Nommez l’échelle :
jamais; rarement; assez souvent; toujours
fréquence
Nommez l’échelle :
aucun; 1 ou 2 des ces comportements; 3 à 5 des ces comportements; 6 ou plus des ces comportements
variété
Nommez l’échelle :
pas du tout problématique; un peu problématique; moyennement problématique; très problématique; extrêmement problématique
intensité / gravité
Nommez l’échelle :
tout à fait en désaccord; un peu en désaccord; opinion neutre; un peu d’accord; tout à fait d’accord
Likert
Quelles sont les 4 tâches cognitives qu’une personne doit effectuer lorsqu’elle doit répondre à une question à réponse sélectionnée?
- Compréhension : comprendre le contenu pertinent
- Récupération : récupérer l’information pertinente en mémoire qui est nécessaire pour répondre
- Jugement : porter un jugement sur la base de l’information récupérée
- Répondre : rapporter ce jugement, sur la base du choix de réponse disponible
Nommez quelques caractéristiques souhaitables d’un item
niveau de langage simple, bref, choix de réponses simples, éviter les contenus multiples, absence de leurre, etc.
Les études montrent que les questions sur des sujets ______ peuvent causer des problèmes particuliers (Tourangeau & Yan, 2007), notamment augmentent la ________, la __________ et la __________
sensibles
non-réponse
dissimulation
distorsion
Pour la traduction d’items en français « québécois », quelle méthode de traduction utilise-t-on souvent?
La traduction maison
Quels sont les problèmes avec la traduction maison?
aucune étude vérifiant leurs propriétés psychométriques et/ou
sans recueillir des normes québécoises
Vrai ou faux. La compréhension du contenu, le sens/signification des items est plus important que la traduction exacte
vrai
Quelles sont les 6 étapes de l’adaptation transculturelle?
- Traduire et adapter les items (2 personnes minimum)
Méthode de choix : Traduction à rebours («back translation») - Experts.es indépendants.es révisent la traduction
- Éliminer ou adapter les items selon leurs commentaires
- Étude pilote auprès des individus ciblés
- Validation empirique formelle (évaluation détaillée des propriétés psychométriques)
- Standardisation (établir des normes)
Quelles sont 5 façons d’établir l’équivalence transculturelle?
Équivalence sémantique
S’assurer que les items ont la même signification dans les deux langages / cultures
Équivalence de contenu
S’assurer que chaque item est pertinent dans les deux langages / cultures pour mesurer le construit
Équivalence factorielle
S’assurer que la structure factorielle est la même dans les deux langages / cultures
Équivalence critériée
S’assurer que la validité de critère est similaire dans les deux langages / cultures
Parfois difficile de conclure à la non équivalence critériée
e.g., avec une mesure de pratiques parentales, une pratique liée aux problèmes d’adaptation seulement dans une version (ou culture) n’est pas nécessairement un problème de l’instrument
Équivalence de la fidélité
S’assurer que les indices de fidélité sont similaires dans les deux langages / cultures (souvent cohérence interne)
