Cours #11 - P.1 Flashcards
Diapo 10 - Est-ce que quand dit ne sait pas si cela fonctionne, on parle de on ne sait pas si la cohérence logique est vraie?
Nomme des test utiles en psychologie et celui souvent oublié.
- Tests d’aptitudes intellectuelles / capacités cognitives (ou de QI) – Les psychoéd ont le droit de les utiliser avec une bonne raison et une formation
- Tests de rendement (test comme examen de psychométrie)
- Tests neuropsychologiques (En collaboration avec neuropsychologue)
- Mesures de personnalité / tempérament (Très populaire)
- Mesures d’intérêts, attitudes et valeurs
- Mesures de psychopathologies / problèmes d’adaptation (il y en a beaucoup, mais aussi beaucoup de pas très bons – changent souvent selon le milieu de travail)
L’oublié: les mesures de construits environnementaux
Que doivent respecter les individus qui construisent des tests?
Les critères répertoriés dans les Standards du testing en éducation et en psychologie
Vrai ou faux:
1) la construction et la validation d’un test est un processus à long terme.
2) Il y a seulement une révisions des test avant qu’ils soient complet.
3) La construction des test peut s’échelonner sur plusieurs années.
4) Certaines étapes peuvent être essentielles dans un test et superflu dans un autre.
1) Vrai
2) Faux, nécessite des révisions avant d’être pleinement satisfaisant,
3) Vrai
Donnes un exemple de propriétés psychométriques critiques dans certains traits.
Évaluer la capacité de classification (sensibilité, spécificité, PPP et PPN) est essentielle pour les tests de dépistage des problèmes d’adaptation / psychopathologies
Quelles sont les 9 étapes de la construction d’un test?
- Définir le construit de façon compréhensive; établir les domaines et sous-domaines; établir le réseau nomologique
- Déterminer la ou les utilisations prévues
- Déterminer le type de test pertinent
- Déterminer le type d’items pertinent (avec quel genre d’item je peux le mieux évaluer) et développer un bassin d’items (x2 le nombre de questions que l’on veut dans l’instrument)
- Déterminer la longueur du test nécessaire (donc déterminer si on veut qu’il soit très fidèle (donc + de questions) et la pertinence de formes parallèles
- Conduire une étude pilote auprès des individus ciblés (évaluer la vraisemblance et certaines propriétés psychométriques de base)
- Conduire une validation empirique détaillée (i.e., évaluer les propriétés psychométriques)
- Effectuer la standardisation (ou l’étalonnage, i.e., établir des normes)
9.Produire la documentation technique; i.e., un manuel de l’utilisateur.trice, ou par articles scientifiques
Q examen: Peut on conduire une validation empirique (évaluer les propriétés psychométriques) avant de conduire une étude pilote auprès des individus ciblés?
OUI
Quelles sont les 3 grandes méthodes de construction des tests?
Déductive (ou rationnelle)
Inductive (ou empirique)
Mixte (combinaison de déductive et inductive)
Qu’est-ce que la méthode déductive (rationnelle)?
Roberts: Conclure en partant de propositions prises pour prémisses.
Est mise en place à partir d’un cadre théorique:
- Théorie scientifiques (Construits, domaines ou sous-domaines : les concepteurs.trices du test les déterminent en fonction de la théorie)
- Théorie clinique (Puisque l’on souhaite répondre à un manque ou besoin pratique - comment mesurer la motivation par ex)
Quels sont les avantages de la méthode déductive?
- Les définitions sont claires (pas besoin de la chercher)
- Cohérence logique (relation entre score du construits qui m’intéresse et d’autre concept, cohérence du réseau nomologique)
- Réseau nomologique souvent connu a priori par la théorie
Quels sont les désavantages de la méthode déductive?
- Subjectivité dans la compréhension de la théorie (e.g., humour comme trait vs comme mécanisme de défense) (Certaines ne le sont pas, mais par exemple avec l’humour peut être compris de façon subjective)
- On ne sait pas si cela fonctionne dans la réalité sans faire des études empiriques (i.e., la structure factorielle, etc.) , car on ne fait pas de recherches avant étant donné que l’on a déjà les théories, donc pourrait dire que selon cette théorie, l’humour = agressivité, mais on n’a pas de donné qui nous le prouve. Il faudrait alors faire une analyse factorielle. - on ne sait pas si la cohérence est réelle
Qu’est-ce que la méthode inductive?
Robert: Conclure en remontant des faits à la loi.
Se fait à partir d’une démarche empirique.
Les auteurs développement un bassin d’items et utilisent deux stratégies pour la sélection finale.
Quelles sont les deux stratégies utilisées dans la méthode inductive pour sélectionner les items?
- Analyse d’items / Analyse factorielle : les items statistiquement liés au construit sont sélectionnés (Liste d’items qui devraient mesurer le construits) (corrélations item-total, saturations factorielles, etc.)
- Sélection critériée : e.g., seuls les items qui différencient des groupes sont sélectionnés (e.g., échelle Antisocialité du MMPI-2)
Utilise deux groupes qui ciblent le concept qui nous intéresse, collecte de données auprès de personne qui sont antisociales et auprès de personne qui n’ont pas de comportements antisociaux et on garde seulement les items qui permettent de distinguer les deux groupes. Donc elle distinguera clairement les deux groupes d’individu.
Vrai ou faux, la démarche inductive est 100% empirique.
Faux, car pour pour générer des items, les auteurs.trices ont toujours une théorie sous-jacente, même si elle est implicite.
Quels sont les avantages de la méthode inductive?
- Plus grande représentatif de la réalité – appuyée explicitement par des données dès le début (alors que pas nécessairement dans l’approche théorique)
- On vérifie notre compréhension d’un construit – peu mener à des modifications (dès le début de la démarche empirique, on peut ajuster notre compréhension d’un construit)
Quels sont les désavantages de la méthode inductive?
- On n’arrive pas nécessairement au résultat qu’on voulait, les données dictent le résultat final (e.g., structure factorielle, etc.)
e.g., les données suggèrent que les items d’anxiété et de dépression sont combinés dans un seul facteur ou on pourrait penser qu’il y a trois dimensions, mais en fait il y en a deux - Les statistiques peuvent parfois dénaturer les concepts en raison de biais d’échantillonnage
e.g., les statistiques suggèrent d’éliminer un aspect clinique important, alors que les résultats discordants sont surtout le fruit d’un mauvais échantillonnage, ou trop petit échantillon
Qu’est-ce que la méthode mixte?
Les auteurs.trices du test utilisent les avantages de la clarté de la méthode déductive (rationnelle) pour définir le construit, mais utilisent aussi simultanément les avantage de développer un grand bassin d’items et de sélectionner les meilleurs sur la base d’analyses statistiques (méthode inductive)
- Cela optimise le ratio avantages-inconvénients des deux méthodes.
Qu’est-ce que l’analyse d’items?
- Étape classique dans le développement d’un nouvel instrument d’évaluation
- Sert à identifier les meilleurs items à inclure dans une échelle à partir d’analyses statistiques simples
- Deux indices de base en psychométrie peuvent être utilisés : le niveau de difficulté et le niveau de discrimination des items
Que signifie la difficulté de l’item?
La proportion/pourcentage d’individus qui endossent ou répondent correctement à l’item.
(Difficulté = initialement à été développé avec des tests de performance)
**Les items trop difficiles ou trop faciles sont inutiles, car ne permettent pas de discriminer et idéalement on veut des items de difficultés variées
Qu’est-ce que la discrimination de l’item?
Estime dans quelle mesure un item différencie les personnes les plus performantes des personnes les moins performantes (pas seulement une question de proportion de combien bonnes réponses à X, mais par exemple si on fait passer un examen à un très grand connaisseur de psychométrie et qu’on lui pose une question facile dans la population s’il ne répond pas bien (on prend un échantillon) la question n’est pas bonne) – (peut faire la même chose avec ceux qui ont des psychopathologie, est-ce qu’elle répondent bien aux items qui impliquent les traits de la psychopathologie, est-ce que la personne à une chance élevé de répondre à un item qui discrimine de façon modéré)
Parfois aussi appelé «effet de l’item» puisqu’il s’agit d’un indice de l’efficacité d’un item de discriminer les individus qui connaissent le contenu de ceux qui ne le connaissent pas
Correspond au degré auquel les individus avec un score élevé sur un test répondent correctement à un item particulier – ou l’inverse
Comment la discrimination d’items s’applique aux items à choix multiples?
Bien que la logique semble surtout s’appliquer aux tests de performance, l’indice de discrimination s’applique aussi aux instruments de mesure de construits avec des items sans «bonne réponse»
Par exemple, corrélation entre le score à une échelle d’Émotivité négative et un item particulier (e.g., irritabilité) indique à quel point cet item est un bon indicateur permettant de différencier les individus qui ont un niveau élevé (ou faible) d’émotivité négative
