Semaine 11 Flashcards
Nomme des tests utiles en psychoéducation.
- Tests d’aptitudes intellectuelles / capacités cognitives
- Tests de rendement
- Tests neuropsychologiques
- Mesures de personnalité / tempérament
- Mesures d’intérêts, attitudes et valeurs
- Mesures de psychopathologies / problèmes d’adaptation
Quelle est la grande catégorie qui est souvent oubliée dans les livres en psychologie ?
Mesures de construits environnementaux
Les organisations professionnelles s’attendent à ce que les auteurs.trices aient construit leur instrument en respectant les critères répertoriés dans quoi ?
Standards du testing en éducation et en psychologie(AERA, APA, & NCME, 2014)
Pourquoi la construction et la validation d’un test est un processus à long terme ?
- Nécessite des révisions avant d’être pleinement satisfaisant
- Peut s’échelonner sur plusieurs années, voire quelques décennies
V/F
Dans la construction des tests, les étapes peuvent varier certaines étant essentielles pour certains types de tests, alors que d’autres sont superflues ou même impossibles pour d’autres types de tests
Vrai
Donne un exemple de propriétés psychométriques critiques pour évaluer les test de dépistage des problèmes d’adaptation/psychopathologies.
Évaluer la capacité de classification (sensibilité, spécificité, PPP et PPN)
V/F Les étapes se font de façon sucessive lors de la construction d’un test ?
Vrai
Quels sont les deux grandes méthodes de construction des tests ?
Déductive (ou rationnelle)
Inductive (ou empirique)
La méthode déductive (rationnelle) se base sur quoi ?
Un cadre théorique
Explique la théorie scientifique pour la méthode déductive.
Construits, domaines, indicateurs (les concepteurs.trices du test les déterminent en fonction de la théorie).
Explique la théorie clinique pour la méthode déductive.
On veut répondre à un manque ou besoin pratique
e.g., comment mesurer les schèmes relationnels des PSE? Comment mesurer la motivation au changement?
Quel est l’avantage de la méthode déductive ?
Contexte théorique clair, cohérence logique (i.e., réseau nomologique souvent connu a priori)
Quels sont les désavantages de la méthode déductive?
- Subjectivité face à la théorie (théorie implicite des auteurs)
- On ne sait pas si ça fonctionne dans la réalité sans faire des études empiriques
- On ne sait pas si les répondants interpréteront les items de la même manière que le concepteur du test
À partir de quel démarche la méthode inductive (empirique) s’inspire ?
Démarche empirique (ou factuelle, ou pragmatique)
Quels sont les deux processus de la démarche empirique dans la méthode inductive (empirique) ?
- Analyse d’items/Analyse factorielle
- Sélection critériée
Explique l’analyse d’items/Analyse factorielle de la méthode inductive (empirique).
Les items statistiquement liés au construits sont sélectionnés (corrélations item-total, saturations factorielles, etc.).
Explique la sélection critériée de la méthode inductive (empirique).
Seuls les items qui différencient des groupes sont sélectionnés (e.g., échelle Antisocialité du MMPI-2)
V/F
Dans la méthode inductive (empirique), la démarche est complètement empirique.
Faux, elle n’est jamais complètement empirique.
Pour générer des items, les auteurs.trices ont toujours une théorie sous-jacente, même si elle est implicite
Quel est l’avantage de la méthode inductive ?
Plus grande objectivité et plus représentatif de la réalité; on vérifie notre compréhension d’un construit, appuyée explicitement par des données
Quels sont les désavantages de la méthode inductive?
- On n’arrive pas nécessairement au résultat qu’on voulait, les données dictent le résultat final
- Les statistiques peuvent parfois dénaturer les concepts en raison des biais d’échantillonnage (ex. échantillon trop petit, donc données inadéquates
Quel est l’étape classique dans le développement d’un nouvel instrument d’évaluation ?
Analyse d’items
L’analyse d’items sert à quoi ?
Sert à identifier les meilleurs items à inclure dans une échelle à partir d’analyses statistiques
Quels sont les deux indices de base en psychométrie qui peuvent être utilisés dans l’analyse d’items ?
La difficulté et la discrimination des items
Définition de la difficulté de l’item.
la proportion (ou pourcentage) d’individus qui endossent ou répondent correctement à l’item
Pourquoi le nom “difficulté” a été donné ?
simplement parce qu’initialement, a été développé avec des tests de performance
Dans la difficulté de l’item, ça peut aussi s’appliquer aux ___________; devient la proportion d’individus qui endossent chaque catégorie de réponse
items à choix de réponses multiples
Dans la difficulté de l’item, quels items sont peu utiles et on veut des items comment ?
- Trop difficile ou trop facile
- On veut des items de difficultés variées
Définition de la discrimination de l’item.
Le degré auquel les individus avec un score élevé sur un test répondent correctement à un item particulier – ou l’inverse
La discrimination de l’item est parfois aussi appelé «effet de l’item» pourquoi ?
Puisqu’il s’agit d’un indice de l’efficacité d’un item de discriminer les individus qui connaissent le contenu de ceux qui ne le connaissent pas
Dans la discrimination de l’item, s’appliquent aussi __________; il s’agit simplement de calculer une ________ entre le score à l’échelle et à l’item
- aux items à choix multiple
- corrélation corrigée
Bien que la logique semble surtout s’appliquer aux tests de performance, l’indice de discrimination s’applique aussi à quoi ?
aux instruments de mesure de construits avec des items sans «bonne réponse»
Donne un exemple de l’indice de discrimination des items sans “bonne réponse”.
Par exemple, corrélation entre le score à une échelle d’Émotivité négative et un item particulier (e.g., irritabilité) indique à quel point cet item est un bon indicateur permettant de différencier les individus qui ont un niveau élevé (ou faible) d’émotivité négative de ceux qui n’en ont pas un
Il existe une foule de types d’items et encore plus de choix de réponse différents, ce qui rend quoi?
une présentation exhaustive et leur catégorisation ardue
Les différents items et choix de réponse possibles sont choisis, selon :
- Type de construit évalué
- Utilisations particulières d’un instrument
- Préférences personnelles des auteurs.trices
Les questions peuvent être présentées de plusieurs façons, qu’elles sont-elles ?
- Oralement en entrevue
- Oralement en version informatique (i.e., appli qui «lit» les questions)
- Visuellement en version papier-crayon
- Visuellement en version informatique (sur ordinateur fixe, ou avec appli sur un téléphone intelligent, une tablette)
Dans le choix ou échelles de réponse, la distinction la plus fondamentale est le ______
type de réponse qui est demandé à la personne évaluée
Quels sont les 2 types de réponses demandés à la personne évaluée?
a) items à réponses construites
b) items à réponses sélectionnées
Nomme le terme.
Aussi appelés «questions à développement» ou «à réponse ouverte» ou «à réponse libre»
Items à réponses construites
Explique les items à réponses construites.
Une prémisse est présentée à la personne évaluée, mais pas de contrainte sur un choix de réponse fixe
Dans les items à réponses construites, il y a néanmoins certaines règles qui sont possibles, ce qui fait qu’il existe quoi ?
(a) questions ouvertes à réponse longue
(b) des questions ouvertes à réponse courte
Done un exemple de réponse longue et courte.
Longue : «Décrivez-moi votre relation habituelle avec votre enfant? »
Courte : «En utilisant au maximum 4 ou 5 mots, complétez la phrase suivante : “Ma relation habituelle avec mon enfant est” : __________»
Les questions à réponses construites sont essentielles dans quel contexte?
en entrevue
Nomme le terme.
Aussi appelés «questions objectives», «à choix forcé», «à choix multiples», «vrai ou faux»
Items à réponses sélectionnées
Explique les items à réponses sélectionnées.
Une prémisse est présentée à la personne évaluée et elle est placée devant la contrainte cognitive d’un choix de réponse fixe
Pourquoi les items à réponses sélectionnes sont le plus utilisé dans les instruments d’évaluation en sciences humaines, sociales et psychologiques ?
Parce que sont plus objectifs, plus facile de dériver un score numérique, plus fiables, souvent plus brefs, etc.
Lorsqu’une personne doit répondre à une question à réponse sélectionnée, elle doit effectuer quatre tâches cognitives, quelles sont-elles ?
- Compréhension
- Récupération
- Jugement
- Répondre
Explique la compréhension.
comprendre le contenu pertinent
Explique la récupération.
récupérer l’information pertinente en mémoire qui est nécessaire pour répondre
Explique le jugement.
porter un jugement sur la base de l’information récupérée
Explique répondre.
rapporter ce jugement, sur la base du choix de réponse disponible
Des biais peuvent être introduits à chacune de ces étapes et avec le cumul, la réponse finale peut évidemment être biaisée. Alors qu’est-ce qui est toujours recommandé que les items aient ?
certaines caractéristiques souhaitables
Donne des exemples de caractéristiques souhaitables pour les items.
niveau de langage simple, bref, choix de réponses simples, éviter les contenus multiples, absence de leurre, etc.
Les études montrent que __________ peuvent causer des problèmes particuliers (Tourangeau & Yan, 2007), notamment augmentent la non-réponse, la dissimulation et la distorsion.
les questions sur des sujets sensibles
Au Québec, très souvent on utilise des «traductions maison», sans faire quoi ?
(1) sans aucune étude vérifiant leurs propriétés psychométriques et/ou
(2) sans recueillir des normes québécoises
Parfois une traduction simple est insuffisante; souvent, qu’est-ce qui est nécessaire ?
une adaptation des items
Qu’est-ce qui est important dans la traduction/adaptation transculturelle ?
La compréhension du contenu, le sens/signification des items est plus important que la traduction exacte
Selon le principe d’un instrument standardisé quelle étape doit être prise très au sérieux ?
Traduction / adaptation transculturelle
Quels sont les six étapes de l’adaptation transculturelle ?
- Traduire et adapter les items (2 personnes minimum)
Méthode de choix : Traduction à rebours («back translation») - Experts.es indépendants.es révisent la traduction
- Éliminer ou adapter les items selon leurs commentaires
- Étude pilote auprès des individus ciblés
- Validation empirique formelle (évaluation détaillée des propriétés psychométriques)
- Standardisation (établir des normes)
Quelles sont les cinq façons d’établir l’équivalence transculturelle ?
- Équivalence sémantique
- Équivalence de contenu
- Équivalence factorielle
- Équivalence critériée
- Équivalence de la fidélité
Quel est l’équivalence sémantique ?
S’assurer que les items ont la même signification dans les deux langages / cultures
Quel est l’équivalence de contenu ?
S’assurer que chaque item est pertinent dans les deux langages / cultures pour mesurer le construit
Quel est l’équivalence factorielle ?
S’assurer que la structure factorielle est la même dans les deux langages / cultures
Quel est l’équivalence critériée ?
- S’assurer que la validité de critère est similaire dans les deux langages / cultures
- Parfois difficile de conclure à la non équivalence critériée
e.g., avec une mesure de pratiques parentales, une pratique liée aux problèmes d’adaptation seulement dans une version (ou culture) n’est pas nécessairement un problème de l’instrument
Quel est l’équivalence de la fidélité ?
S’assurer que les indices de fidélité sont similaires dans les deux langages / cultures (souvent cohérence interne)
