Cours 2 - Modèle de la cible et usage anticipée Flashcards
Méthode qualitative ou méthode quantitative?
1. Méthode utilisée pour effectuer l’analyse d’une entrevue
2. Méthode permettant de capturer plus de nuance et de richesse
3. Méthode démontrant le plus de rigueur
scientifique
- Méthode utilisée pour effectuer l’analyse d’une entrevue
Les 2 - Méthode permettant de capturer plus de nuance et de richesse
Quali - Méthode démontrant le plus de rigueur
scientifique
Les 2
Seuls les chercheurs en psychologie utilisent la psychométrie.
A. Vrai
B. Faux
B. Faux: chercheurs, étudiants, psychologues
Parmi la fiabilité, la validité et l’utilité, quel concept fait référence au niveau d’erreur de mesure de l’instrument?
A. Fidélité
B. Validité
C. Utilité
A. Fidélité
Quelle étape du modèle de la cible correspond à la phase de vérification de l’utilité de l’instrument?
A. Usage recommandé
B. Usage anticipé
C. Stabilité
D. Élaboration
A. Usage recommandé
Quels sont les 2 buts du processus du modèle de la cible?
- Comment construire/modifier un instrument psychométrique.
- Comment vérifier les qualités psychométriques d’un instrument.
Quelles sont les 3 composantes du modèle de la cible?
Fiabilité, validité, utilité
Associez les 3 questions suivantes aux 3 composantes du modèle de la cible
- Quel niveau d’erreur de mesure l’instrument contient-il?
- À quel point l’instrument mesure-t-il ce qu’il est censé mesurer?
- Est-ce que l’instrument sert à quelque chose?
- Fidélité
- Validité
- Utilité
Quelles sont les 2 phases du modèle de la cible?
Préparation
Vérification
Quelles sont les 6 étapes du modèle de la cible?
- Usage anticipé
- Conceptualisation
- Élaboration
- Stabilité
- Congruence
- Usage recommandé
Quelles sont les 2 tâches du modèle de la cible?
Objectifs
Moyens
Décrivez les objectifs et les moyens de l’étape 1: usage anticipé
Objectifs
* Buts de l’instrument (Fondamental et psychométrie [pourquoi c’est utile?])
* Population visée
* Contexte d’utilisation (Conditions de passation)
Moyens
* Analyse d’instruments (Voir ce qui existe déjà à travers les autres instruments)
* Lectures
* Consultation avec des experts
Décrivez les objectifs et les moyens de l’étape 2 : conceptualisation
Objectifs
* Définir, catégoriser et organiser les composantes des phénomènes à mesurer (arborescence)
* Positionnement avec d’autres concepts (Ex. toile araignée : donner force/établir concept)
Moyens
* Synthèse des aspects conceptuels des instruments (S’il y a d’autres instruments similaires : on peut aller voir comment ils sont construits, leurs sous-catégories)
* Lectures théoriques (Consensus dans la littérature?)
* Lectures empiriques (Études qui regarde la corrélation entre notre concept vs les autres)
* Consultations
Décrivez les objectifs et les moyens de l’étape 3 : l’élaboration
Objectifs
* Prévoir les sources d’erreur de manière à les minimiser (on veut pouvoir se fier sur le test)
* Choix du format de l’instrument
* Construire les items
* Choisir la méthode de correction (Nombre de points, comment, moyenne, sous-score, etc)
* Version préliminaire des consignes de passation
Moyens
* Lectures « psychométriques »
* Inventaire des stratégies déjà employées
Décrivez les objectifs et les moyens de l’étape 4: la stabilité
Objectifs
* Vérifier la nature et l’ampleur de l’erreur
* Établir la stabilité interne et temporelle
Moyens
* Approche hypothético déductive (Hypothèses qu’on confirme ou infirme)
* Erreur-type de mesure (Intervalle de confiance, intervalle score possible)
* Analyses d’items (Cohérence interne)
* Analyses corrélationnelles (Fidélité test-retest)
* Accord inter-juges (+ d’un évaluateur)
Décrivez les objectifs et les moyens de l’étape 5 : congruence
Objectifs
* Vérifier les quantifications et/ou l’organisation des concepts (Est-ce que les réponses se regroupent?)
Moyens
* Approche hypothético-déductive
* Analyses corrélationnelles (entre concepts?)
* Analyses factorielles (Se regroupe?)
* Équations structurelles (Quand on veut faire plusieurs analyses corrélationnelles en même temps)
Décrivez les objectifs et les moyens de l’étape 6 : usage recommandé
Objectifs
* Préciser buts, population visée, circonstances d’utilisation/de passation
* Guider l’interprétation
Moyens
* Article scientifique, manuels
* Normes (pouvoir déterminer où les gens se situent entre eux en fonction de leurs
résultats. Ne peut pas être fait avant dans les autres étapes)
Décrivez ce qu’est une étude de validation
- Un échantillon de convenance passe notre test
- Les gens qui sont disponibles pour passer le test, on ne perd pas notre temps à recruter. On veut juste voir comment les items se comportent
- Souvent : + que 1 étude de validation
Lors de la construction et de la validation d’un instrument psychométrique, il faut…..
o Détecter les problèmes ;
o Apporter les correctifs requis en retournant aux étapes précédentes dans la phase antérieure.
Si un problème est détecté dans la phase de _________, il faut retourner à l’étape
correspondant à ce concept dans la phase de la _____________
Si un problème est détecté dans la phase de VÉRIFICATION, il faut retourner à l’étape
correspondant à ce concept dans la phase de la PRÉPARATION
Que devons-nous faire lorsque nous détectons un problème à l’étape de la stabilité?
Retour à l’étape de l’élaboration
(concept de la fiabilité)
Que devons-nous faire lorsque nous détectons un problème à l’étape de la congruence?
Retour à l’étape de la conceptualisation (concept de la validité)
Que devons-nous faire lorsque nous détectons un problème à l’étape de l’usage recommandé?
Retour à l’étape de l’usage anticipé (concept de l’utilité)
Quelles sont les problématiques auxquelles le modèle de la cible aide à répondre?
- Mauvaise connaissance des autres instruments
- Utilisation d’instruments désuets
- Concepts mal définis
- Type de mesure peu approprié à la situation
- Techniques statistiques mal utilisées
- Mauvaise interprétation des indices statistiques
Décrivez avec précision l’étape 1 du modèle de la cible, l’usage anticipé
Objectifs
* Déterminer ce que mesurera l’instrument (1. Construit) et à quoi serviront les résultats qui en émaneront (buts fondamental et psychométrique)
* Déterminer qui seront les bénéficiaires (2. Population), les utilisateurs et les
administrateurs (acteurs à identifier)
* Déterminer le contexte d’utilisation (3. Contexte)
Moyens
* Survol analytique des instruments existants et lecture des articles de recherches sur le domaine
* Consultations avec des experts
Les résultats d’un instrument doivent obligatoirement être interprétés en fonction de….
Construit
Population
Contexte
Qu’est-ce que le construit?
C’est le concept qu’on va mesurer avec notre instrument (ex: dépression, engagement, etc.)
Qu’est-ce que la population?
Ce sont les gens qui vont passer le test (ex: enfants, adultes canadiens, travailleurs du milieu de la santé, etc.)
Qu’est-ce que le contexte?
Ce sont les conditions dans lesquelles les participants vont passer le test.
Qu’est-ce que le but fondamental?
« Qu’est-ce qu’on évalue et pourquoi? » Quel est le problème que l’instrument entend contribuer à régler? À quoi les résultats serviront-ils?
o Voulez-vous discriminer entre deux groupes de personnes? Voulez-vous effectuer un diagnostic? Voulez-vous établir un profil des caractéristiques d’une personne?
Qu’est-ce que le but psychométrique?
Quelle est la valeur ajoutée de l’instrument par rapport aux autres instruments existants? Pourquoi créer/modifier cet instrument?
Donnez des exemples de buts psychométriques
Procéder à une évaluation plus courte
Changer la modalité d’évaluation
Traduire avec ou sans adaptation culturelle
Préciser le construit
Cibler + précisément un pan de la population
Créer une version parallèle d’un test
Quelles sont les différents acteurs à identifier? Décrivez-les
Concepteur
La personne qui crée l’instrument
Administrateur
La personne qui procède à la mesure. Surveille la passation. Peut être soi-même lors d’un test en ligne
Bénéficiaire
La personne qui se fait évaluer à l’aide de l’instrument
Utilisateur
La personne qui évalue les bénéficiaires à l’aide des résultats de l’instrument. Se sert des résultats
Mandataire
Personne qui demande l’évaluation, le test. Peut aussi être l’utilisateur, mais pas tjrs
Correcteurs
Personne qui corrige et compile les données. Peut être un ordinateur.
Lorsque nous cherchons à dresser un portrait de l’usage anticipé, donc l’étape 1, que devons-nous spécifier?
But fondamental
But psychométrique
Concepteurs
Bénéficiaires
Utilisateurs
Administrateurs
Contexte
