Cours 11 (Diapos 3-35) Flashcards
Quelles sont les variétés de tests utiles en psychoéducation?
- Tests d’aptitudes intellectuelles / capacités cognitives
- Tests de rendement
- Tests neuropsychologiques
- Mesures de personnalité / tempérament
- Mesures d’intérêts, attitudes et valeurs
- Mesures de psychopathologies / problèmes d’adaptation
Quelle catégorie est souvent oubliée dans les livres en psychologie?
Les mesures de construits environnementaux
Qu’attendent les organisations professionnelles sur les auteurs?
Les organisations professionnelles s’attendent à ce que les auteurs.trices aient construit leur instrument en respectant les critères répertoriés dans les Standards du testing en éducation et en psychologie.
Quelle sorte de processus est la construction et la validation d’un test? Pourquoi?
La construction et la validation d’un test est un processus à long terme , car elle nécessite des révisions avant d’être pleinement satisfaisant et peut s’échelonner sur plusieurs années, voire quelques décennies.
Comment s’opérationnalise le processus de construction?
Le processus de construction s’opérationnalise selon différentes étapes successives qui peuvent varier dont certaines étant essentielles pour certains types de tests, alors que d’autres sont superflues ou même impossibles pour d’autres types de tests.
Pourquoi certaines propriétés psychométriques sont critiques pour certains types de tests?
Pour évaluer la capacité de classification (sensibilité, spécificité, PPP et PPN) est essentielle pour les tests de dépistage des problèmes d’adaptation / psychopathologies.
Quelles sont les 3 grandes méthodes de construction des tests?
1) déductive (ou rationnelle)
2) inductive (ou empirique)
3) mixte (combinaison de déductive et inductive)
Qu’est-ce que la méthode déductive (rationnelle)?
C’est de conclure en partant de propositions prises pour prémisses.
À partir de quelle cadre se base-t-on la méthode déductive?
À partir d’un cadre théorique
Quelles sont les 2 théories de la méthode déductive?
Théorie scientifique:
- construits, domaines ou sous domaines : les concepteurs du test les déterminent en fonction de la théorie.
Théorie clinique: On veut répondre à un manque ou besoin pratique. Comment mesurer les schèmes relationnels des PSE ? Comment mesurer la motivation au changement ?
Quels sont les avantages de la méthode déductive?
- Définitions claires
- Cohérence logique
- Réseau nomologique souvent connu a priori par la théorie
Quels sont les désavantages de la méthode déductive?
- La subjectivité dans la compréhension de la théorie (e.g., humour comme trait vs comme mécanisme de défense)
- On ne sait pas si cela fonctionne dans la réalité sans faire des études empiriques (i.e., la structure factorielle, etc.)
Qu’est-ce que la méthode inductive (empirique)?
C’est de conclure en remontant des faits à la loi.
À partir de quelle cadre se base-t-on la méthode inductive?
À partir d’une démarche empirique (ou pragmatique)
Quelles sont les 2 stratégies utilisées pour la sélection finale par les auteurs qui développent un bassin d’items?
1) Analyse d’items / Analyse factorielle : les items statistiquement liés au construit sont sélectionnés (corrélations item-total, saturations factorielles, etc.)
2) Sélection critériée : e.g., seuls les items qui différencient des groupes sont sélectionnés
Est-ce que la démarche est toujours empirique?
Non, la démarche n’est jamais « purement » empirique. Pour générer des items, les auteurs ont toujours une théorie sous-jacente, même si elle est implicite.
Quels sont les avantages de la méthode inductive?
- Plus grande représentatif de la réalité – appuyée explicitement par des données dès le début.
- On vérifie notre compréhension d’un construit – peu mener à des modifications.
Quels sont les désavantages de la méthode inductive?
1) On n’arrive pas nécessairement au résultat qu’on voulait, les données dictent le résultat final
- (e.g., structure factorielle, etc.)
e.g., les données suggèrent que les items d’anxiété et de dépression sont combinés dans un seul facteur
2) Les statistiques peuvent parfois dénaturer les concepts en raison de biais d’échantillonnage
- e.g., les statistiques suggèrent d’éliminer un aspect clinique important, alors que les résultats discordants sont surtout le fruit d’un mauvais échantillonnage, ou trop petit échantillon
Pourquoi les auteurs utilisent la méthode mixte?
Ils utilisent les avantages de la clarté de la méthode déductive (rationnelle) pour définir le construit, mais utilisent aussi simultanément les avantage de développer un grand bassin d’items et de sélectionner les meilleurs sur la base d’analyses statistiques (méthode inductive).
Ils optimisent le ratio avantages-inconvénients des deux méthodes.
Quelle est l’étape classique dans le développement d’un nouvel instrument d’évaluation?
L’analyse d’items
À quoi sert l’analyse d’items?
Elle sert à identifier les meilleurs items à inclure dans une échelle à partir d’analyses statistiques simples.
Quels sont les 2 indices de base en psychométrie qui peuvent être utilisés?
Le niveau de difficulté et le niveau de discrimination des items
Qu’est-ce que la difficulté de l’item?
C’est la proportion (ou pourcentage) d’individus qui endossent ou répondent correctement à l’item
Elle peut aussi s’appliquer aux items à choix de réponses multiples sans « bonne réponse »; devient la proportion d’individus qui endossent chaque catégorie de réponse
- Items trop difficiles ou trop faciles peu utiles
- Idéalement, on veut des items de difficultés variées
Qu’est-ce que la discrimination de l’item?
Aussi appelé effet de l’item
Elle estime dans quelle mesure un item différencie les personnes les plus performantes des personnes les moins performantes. Elle correspond au degré auquel les individus avec un score élevé sur un test répondent correctement à un item particulier – ou l’inverse.
Sur quoi s’applique la discrimination de l’item? qu’est-ce qu’il s’agit?
Il s’applique aussi aux items à choix multiple et aux instruments de mesure de construits avec des items sans « bonne réponse ». Il s’agit de calculer une corrélation corrigée entre le score à l’échelle total et l’item.
Les différents items et choix de réponses possibles varient selon?
1) Type de construit évalué
2) Utilisations particulières d’un instrument
3) Préférences personnelles des auteurs
De quelles façons les questions peuvent être présentées?
- Oralement en entrevue
- Oralement en version informatique (i.e., App qui « lit » les questions)
- Visuellement en version papier-crayon
- Visuellement en version informatique (sur ordinateur fixe, ou avec App sur un téléphone intelligent, une tablette)
Quelle est la distinction la plus fondamentale entre les types de questions?
La distinction la plus fondamentale est le type de réponse qui est demandé à la personne évaluée : (a) items à réponses construites et (b) items à réponses sélectionnées
Que sont les items à réponses construites?
aussi appelés: questions à développement, réponse ouverte, à réponse libre.
C’est une prémisse qui est présentée à la personne évaluée, mais pas de contrainte sur un choix de réponse fixe.
Qu’est-ce qui fait qu’il existe des questions ouverte à réponse longue et à réponse courte?
Il y a certaines règles.
Dans quel méthode de collecte de données peut-on employer des questions à réponses construites?
en entrevue
Que sont les items à réponses sélectionnées?
aussi appelés: questions objectives, à choix forcé, à choix multiple, vrai ou faux.
C’est une prémisse qui est présentée à la personne évaluée et elle est placée devant la contrainte cognitive d’un choix de réponse fixe.
Dans quels domaines les items à réponses sélectionnées sont les plus utilisés dans les instruments d’évaluation? Pourquoi?
Il s’agit du type d’items le plus utilisé dans les instruments d’évaluation en sciences humaines, sociales et psychologiques
Parce qu’ils sont plus objectifs, plus fiables, souvent plus brefs, il est plus facile de dériver un score numérique, etc.
Dans quel cas une personne doit effectuer des taches cognitives?
Lorsqu’une personne doit répondre à une question à réponse sélectionnée.
Quelles sont les 4 tâches cognitives?
1) Compréhension : comprendre le contenu pertinent
2) Récupération : récupérer l’information pertinente en mémoire qui est nécessaire pour répondre
3) Jugement : porter un jugement sur la base de l’information récupérée
4) Répondre : rapporter ce jugement, sur la base du choix de réponse disponible
Comment la réponse finale peut être biaisée?
Des biais peuvent être introduits à chacune de ces étapes et avec le cumul.
Si la réponse finale est biaisée, qu’est-ce qu’on recommande de faire?
On recommande toujours que les items aient certaines caractéristiques souhaitables comme le niveau de langage simple, bref, choix de réponses simples, éviter les contenus multiples, absence de leurre, etc.
Que montrent les études des questions sur des sujets sensibles?
Les études montrent que les questions sur des sujets sensibles peuvent causer des problèmes particuliers, notamment augmentent la non-réponse, la dissimulation et la distorsion.
Quelle est la question cruciale au Québec?
La traduction et l’adaptation transculturelle
Qu’est-ce qu’on utilise à la place d’un instrument adapté à la langue française?
On utilise des traductions maison:
1) sans aucune étude vérifiant leurs propriétés psychométriques
et/ou
2) sans recueillir des normes québécoises
Qu’est-ce qui est le plus important dans la traduction de l’instrument?
La compréhension du contenu, le sens/signification des items est plus important que la traduction exacte
Quelles sont les 5 façons d’établir l’équivalence transculturelle?
équivalence:
1) sémantique
2) de continu
3) factorielle
4) critériée
5) de la fidélité
Qu’est-ce que l’équivalence sémantique?
S’assurer que les items ont la même signification dans les deux langages / cultures
Qu’est-ce que l’équivalence de contenu?
S’assurer que chaque item est pertinent dans les deux langages / cultures pour mesurer le construit
Qu’est-ce que l’équivalence factorielle?
S’assurer que la structure factorielle est la même dans les deux langages / cultures
Qu’est-ce que l’équivalence critériée?
S’assurer que la validité de critère est similaire dans les deux langages / cultures, qui est parfois difficile de conclure à la non-équivalence critériée.
e.g., avec une mesure de pratiques parentales, une pratique liée aux problèmes d’adaptation seulement dans une version (ou culture) n’est pas nécessairement un problème de l’instrument
Qu’est-ce que l’équivalence de la fidélité?
S’assurer que les indices de fidélité sont similaires dans les deux langages / cultures (souvent cohérence interne)
