Cours 1 et 2 Flashcards
Qu’est ce que la psychométrie ?
- Science de la mesure dans le domaine de la psychologie.
- l’étude des différentes techniques d’élaboration, d’administration et d’utilisation de tests produisant des résultats sur lesquels on peut se fier
Qu’est ce qu’un test ?
- Processus standardisé qui génère de l’info quantifiable au sujet d’un échantillon de comportements ou de mécanismes cognitifs
Quelle sont 4 principes de base de la psychométrie ?
- individus se distinguent par des traits ou des caractéristiques importantes
- Ces traits peuvent être quantifiés
- Ces traits sont assez stables
- Les mesures de ces traits sont liées au comportement
Quelles sont les principaux types de test menés?
- Test d’aptitudes intellectuelles (individuel/collecti)
- Tests de rendement
- Tests de personnalité
- Mesures des intérêts et des attitudes
- Tests neuropsychologiques
la psychométrie se résume en 3 choses, lesquelles?
- Choisir un instrument
- Interpréter les résultats d’un instrument
- Concevoir des instruments
C’est quoi le modèle de la cible?
Un processus qui décrit :
- Cmt construire / modifier un instrument psychométrique
- Cmt vérifier les qualités psychométriques d’un instrument
le modèle de la cible est composé de 3 sphères, lesquelles?
- utilité
- validité
- fiabilité
par quoi se traduit la fiabilité (ou fidélité) ?
Quel niveau d’erreur de mesure l’instrument contient-il?
par quoi se traduit la validité ?
À quel point l’instrument mesure-t-il ce qu’il est censé mesurer?
par quoi se traduit l’utilité ?
Est-ce que l’instrument sert à quelque chose?
Quelles sont les 2 phases du modèle de la cible?
- la préparation (étape 1-2-3)
- la vérification (étape 4-5-6)
Quelles sontles 6 étapes du modèle de la cible?
la préparation :
1. Usage anticipé
2. Conceptualisation
3. Élaboration
la vérification :
4. Stabilité
5. Congruence
6. Usage recommandé
Quelles sont les 2 tâches du modèle de la cible?
1) objectifs
2) moyens
Dans l’étape 1 (usage anticipé) du modèle de la cible, quelle est l’objectif et les moyens (pr les atteindre) ?
→ Objectifs :
- Buts de l’instrument
- Population visée
- Contexte d’utilisation
→ Moyens :
- Analyse d’instruments
- Lectures
- Consultations
donne un exemple d’instrument utilisé dans l’étape 1 (usage anticipé).
- Le test SAT (Instrument du système scolaire USA)
BUT : prédire le succès scolaire d’élèves du secondaire une fois à l’université
(Ne s’intéresse qu’à ce qui a été appris au secondaire et ne prétend pas mesurer l’intelligence)
Dans l’étape 2 (conceptualisation) du modèle de la cible, quelle est l’objectif et les moyens (pr les atteindre) ?
→ Objectifs :
- Définir, catégoriser et organiser les composantes des phénomènes à mesurer
- Positionnement avec d’autres concepts
→ Moyens :
- Synthèse des aspects conceptuels des instruments
- Lectures théoriques
- Consultations
donne un exemple d’instrument utilisé dans l’étape 2 (conceptualisation) .
- le test SAT (Scholastic Aptitude Test)
- Les aptitudes sont de 2 types :
1) Verbales (SAT-V) = - Antonymes
- Analogies
- Compléter phrases
- Compréhension de lecture
2) Mathématiques (SAT-M) =
* Questions numériques
* Comparaisons de quantités
Dans l’étape 3 (élaboration) du modèle de la cible, quelle est l’objectif et les moyens (pr les atteindre) ?
→ Objectifs :
- Prévoir les sources d’erreur de manière à les minimiser
- Choix du format de l’instrument
- Construire les items
- Choisir la méthode de correction
→ Moyens :
- Lectures «psychométriques»
- Inventaire des stratégies déjà employées
donne un exemple d’instrument utilisé dans l’étape 3 (élaboration) .
- SAT (Scholastic Aptitude Test)
- QCM
1) SAT-V : 85 questions de simple à difficile = - Antonymes (5 choix)
- Analogies (5 choix)
- Compléter phrases (5 choix)
- Compréhension de lecture (5 choix)
2) SAT-M : 60 questions de simple à difficile =
* Questions numériques (5 choix)
* Comparaisons de quantités (4 choix)
- Durée = 2 heures
- Passation en groupe
-score déterminé par pts accumulés pour bonnes réponses et des pts retranchés pour les mauvaises réponses (correction pour avoir deviné) - score varie de 200 à 800, la moyenne est ajustée à 500 et l’écart-type est ajusté à 100
- 20 versions parallèles sont administrées simultanément
Dans l’étape 4 (stabilité) du modèle de la cible, quelle est l’objectif et les moyens (pr les atteindre) ?
→ Objectifs :
- Vérifier la nature et l’ampleur de l’erreur
- Établir la stabilité interne et temporelle
→ Moyens :
- Erreur-type de mesure
- Analyses d’items
- Analyses corrélationnelles
- Approche hypothético-déductive
- Accord inter-juges
donne un exemple d’instrument utilisé dans l’étape 4 (stabilité) .
- SAT (Scholastic Aptitude Test)
- Erreur-type de mesure
SAT-V : 31
SAT-M : 33 - Consistance interne
SAT-V : Alpha de Cronbach de α=0,92
SAT-M : Alpha de Cronbach de α=0,91 - Stabilité temporelle (intervalle de 7 mois)
SAT-V : corrélation test-retest r=0,88
SAT-M : corrélation test-retest r=0,85
Dans l’étape 5 (congruence) du modèle de la cible, quelle est l’objectif et les moyens (pr les atteindre)
→ Objectifs :
- Vérifier les quantifications et l’organisation des concepts
→ Moyens :
- Analyses corrélationnelles
- Approche hypothético-déductive
- Analyses factorielles
- Équations structurelles
Illustre ce qu’on veut dire par la congruence.
- on a deux cercles
- le premier c’est “Ce que jvx mesurer” et le 2e c’est “ce que je mesure vrm”
- les deux cercles se chevauche, le milieu c’est la CONGRUENCE
donne un exemple d’instrument utilisé dans l’étape 5 (congruence)
- SAT
- Validité de contenu =
- questions posées représentent les domaines enseignés au «high-school»
- Validité prédictive (résultats partiels – les meilleurs élèves seulement) =
*Corrélation entre le SAT-V et les notes au «college» : r = 0,54 - Corrélation entre le SAT-M et les notes au «college» : r = 0,48
- Corrélation entre les notes au «high-school» et les notes au «college» : r = 0,67
Dans l’étape 6 (usage recommandé) du modèle de la cible, quelle est l’objectif et les moyens (pr les atteindr
→ Objectifs :
- Préciser buts, population visée, circonstances d’utilisation / de passation
- Guider l’interprétation
→ Moyens :
- Article scientifique
- Normes
donne un exemple d’instrument utilisé dans l’étape 6 (usage recommandé) .
BUT : prédire le succès scolaire d’élèves du secondaire une fois à l’université
- Manuels et beaucoup de recherches
- Population : Tt les types de populations d’élèves de «high school» décrits
- Semble pouvoir atteindre ce but, mais la mesure n’est pas parfaite
vrai ou faux, lors de la construction et de la validation, il faut :
1- détecter les problèmes
2- apporter les correctifs requis
Le modèle de la cible rend ces tâches plus faciles.
vrai
Il faut regarder l’ordre des étapes si j’ai un problème de fiabilité
vrai
vrai ou faux, quand tout est cohérent, nous avons atteint le contrôle
vrai
Si un problème est détecté dans la phase de vérification, il faut retourner à l’étape correspondant à ce concept dans la phase de la préparation
vrai
Si il y a un problème détecté à l’étape de la stabilité, on retourne ou? (dessiner le cercle avk numero)
Retour à l’étape de l’élaboration (concept de la fiabilité)
si il y a un problème détecté à l’étape de la congruence , on retourne ou? (dessiner le cercle avk numéro)
Retour à l’étape de la conceptualisation (concept de la validité)
Problème détecté à l’étape de l’usage recommandé, on retourne ou? (dessiner le cercle avk numéro)
Retour à l’étape de l’usage anticipé (concept de l’utilité)
Quelles sont les PROBLÉMATIQUES AUXQUELLES LE MODÈLE DE LA CIBLE AIDE À RÉPONDRE?
- Mauvaise connaissance des autres instruments
- Utilisation d’instruments désuets
- Concepts mal définis
- Type de mesure peu approprié à la situation
- Techniques statistiques mal utilisées
- Mauvaise interprétation des indices statistiques
Les résultats d’un instrument doivent obligatoirement être interprétés en fonction de quoi?
- du construit
- de la population
- du contexte
C’est quoi le construit?
C’est le concept qu’on va mesurer avec notre instrument (p. ex., dépression, engagement, etc.)
ex :
1) La dépression (avec le BDI) ne doit pas être utilisée pour mesurer l’anxiété (il faudrait utiliser le BAI) ou l’épuisement professionnel
2) L’identification à l’organisation ne doit pas être utilisée pour mesurer l’engagement affectif envers l’organisation
C’est quoi la population ?
Ce sont les gens qui vont passer le test
(penfants, adultes canadiens, travailleurs du milieu de la santé)
c’est quoi le contexte?
Ce sont les conditions dans lesquelles les participants vont passer le test
ex :
- Temps de passation
- Connaissances préalables
il est important d’avoir une compréhension du but et du contexte (utilité) dans lequel l’instrument sera utilisé, la définition de ce que l’on veut mesurer (validité) et les principaux problèmes qui peuvent survenir dans le contexte de la mesure (fidélité)
vrai
Maintenant que nous connaissont les termes de “construit, population et contexte” quelles sont les objectifs et moyens de l’étape 1 (usage anticipé) du modèle de la cible?
→ Objectifs :
- Déterminer ce que mesurera l’instrument et à quoi serviront les résultats qui en émaneront (construit et buts fondamental et psychométrique)
- Déterminer QUI seront les bénéficiaires (population), les utilisateurs et les administrateurs
- Déterminer le contexte d’utilisation (contexte)
→ Moyens :
- Survol analytique des instruments existants et des articles de recherches du domaine
- Consultations avec des experts
Quel est le but fondamental de l’instrument?
- «Qu’est-ce qu’on évalue et pourquoi?
- quel est le problème que l’instrument va contribuer à régler?
- À quoi les résultats serviront-ils?
(Voulez-vous discriminer entre 2 gr de personnes? Voulez-vous effectuer un diagnostic? Voulez-vous établir un profil des caractéristiques d’une personne?)
Quel est le but psychométrique de l’instrument?
- Quelle est la valeur ajoutée de l’instrument par rapport aux autres instruments existants? Pourquoi créer / modifier cet instrument?
à quoi servirait de procéder à une évaluation plus courte (c quoi le but psychométrique)?
Afin de réduire la durée de l’évaluation, de réduire la fatigue liée à l’évaluation ou afin de réduire les coûts de celle-ci.
à quoi servirait de changer la modalité d’évaluation (c quoi le but psychométrique)?
Pour mieux répondre aux besoins d’une population cible donnée; pour répondre à un changement de contexte
ex : passer d’une entrevue à un questionnaire afin d’évaluer un plus grand nb de personnes
à quoi servirait de traduire avec ou sans adaptation culturelle (c quoi le but psychométrique)?
Parce qu’un bon instrument existe déjà dans une autre langue ou culture
à quoi servirait de préciser le construit (c quoi le but psychométrique)?
Pour mieux correspondre aux avancées théoriques et cliniques et répondre aux besoins d’une population cible (dépression se subdivise-t-elle)
à quoi servirait de cibler plus précisément un pan (une partie) de la population (c quoi le but psychométrique)?
Pour mieux répondre aux besoins d’une population donnée.
à quoi servirait de créer une version parallèle d’un test (c quoi le but psychométrique)?
Pour s’assurer que les réponses d’un test ne soient pas divulguées
Quelles sont les 4 acteurs à identifier?
1- concepteur : personne qui crée l’instrument
2- administrateur : personne qui procède à la mesure
3- bénéficiaire : personne qui se fait évaluer à l’aide de l’instrument
4. utilisateur : personne qui évalue les bénéficiaires à l’aide des résultats de l’instrument
Vous avez été engagé pour réaliser une étude sur la santé psychologique d’étudiants d’une université d’environ 40 000 étudiants. Vous pensez créer un instrument de mesure afin de remplir votre mandat. Quel pourrait être l’usage anticipé de celui-ci?
obtenir des mesures fiables et valides de la santé psychologique des étudiants universitaires québécois, tout en étant adapté culturellement et sensible aux changements
