Modèle de la cible et usage anticipé Flashcards
Expliquer, succinctement, le Modèle de la cible.
C’est un processus qui […].
C’est un processus qui décrit comment construire/modifier un instrument psychométrique ; comment. vérifier les qualité psychométriques d’un instrument.
Le Modèle de la cible est construit visuellement.
Nommer les trois concepts principaux du Modèle de la cible.
L’utilité, la validité et la fiabilité.
Quelles sont les couleurs associées à l’utilité, la validité et la fiabilité ?
Rouge (grand cercle) : utilité
Bleu (moyen cercle) : validité
Vert (petit cercle) : fiabilité
Entre l’utilité, la validité et la fiabilité, qu’est-ce qui est relatif à l’erreur de mesure de l’instrument.
Fiabilité.
Entre l’utilité, la validité et la fiabilité, qu’est-ce qui se réfère (le plus) au construit ?
Validité.
Entre l’utilité, la validité et la fiabilité, qu’est-ce qui permet de valider un instrument pour le rendre accessible à la communauté scientifique et qu’est-ce qui permet de commercialiser l’instrument ?
Utilité.
Entre l’utilité, la validité et la fiabilité, quel élément considère la stabilité et l’homogénéité des réponses ?
Fiabilité.
Le but d’un instrument est de mesurer l’état dépressif d’une personne, mais après plusieurs passations du test, les chercheurs se rendent comptent que cet instrument mesure parfois le stress chez les individus. Où est le problème, entre l’utilité, la validité et la fiabilité ?
Qu’est-ce qui pourrait expliquer cet écart ?
Validité.
Fiabilité : il semble y avoir une instabilité. La mesure doit être stable afin que la validité soit respectée.
Entre l’utilité, la validité et la fiabilité, qu’est-ce qui permet de vérifier si le test peut être utilisé ?
L’utilité.
Utilité, validité ou fiabilité :
Quel niveau d’erreur de mesure l’instrument contient-il ?
Fiabilité.
Utilité, validité ou fiabilité :
À quel point l’instrument mesure-t-il ce qu’il est censé mesurer ?
Validité.
Utilité, validité ou fiabilité :
Est-ce que l’instrument sert à quelque chose ?
Utilité.
Quels sont les phases du Modèle de la cible ?
Préparation et vérification.
Combien d’étapes contient le Modèle ?
Six étapes.
Quelle phase du Modèle est la plus importante ? Élaborer.
Préparation.
Une bonne préparation permet d’avoir un instrument exempt d’erreur de mesure (ou de la minimiser du moins) et un instrument qui mesure ce qu’il doit mesurer.
De cette manière, nous optimisons les résultats, car en optimisant la préparation, on optimise la vérification.
Décrire la première phase du Modèle.
Préparation : Étape où on s’assure que l’instrument aura les meilleurs résultats statistiques.
C’est à cette phase où on situe l’objectif de l’instrument (usage anticipé).
On détermine aussi, lors de la préparation, ce qu’on cherche à mesurer en formulant une hypothèse et en observant comment notre construit se manifeste avec d’autres variables.
Quelles sont les six étapes du Modèle ?
- Usage anticipé
- Conceptualisation
- Élaboration
- Stabilité
- Congruence
- Usage recommandé
La passation (collecte de données #1) se situe où dans le Modèle ?
Entre les étapes 3 et 4.
Quelles sont les tâches du Modèle ?
Les objectifs et les moyens.
Définir succinctement les zones du Modèle, selon les tâches.
Zone objectifs : ce qu’on cherche à faire.
Zone moyens : comment répondre aux objectifs de chaque étapes. Cette zone concerne la documentation et les analyse statistiques.
Nommer les objectifs de l’étape 1.
Étape 1 : Usage anticipé
Objectifs : - Buts de l'instrument - Population visée - Contexte d'utilisation (Ce qui encadre l'utilisation des tests)
Nommer les moyens de l’étape 1.
Étape 1 : Usage anticipé
Moyens :
- Analyse d’instruments
- Lectures (recension des écrits)
- consultations (experts)
Nommer les objectifs de l’étape 2.
Étape 2 : Conceptualisation
Objectifs :
- Définir, catégoriser et organiser les composantes des phénomènes à mesurer
- Positionnement avec d’autres concepts
(Sous-dimensions d’un concept)
Nommer les moyens de l’étape 2.
Étape 2 : Conceptualisation
Moyens :
- Synthèse des aspects conceptuels des instruments
- Lectures théoriques
- Consultations (experts)
Nommer les objectifs de l’étape 3.
Étape 3 : Élaboration
Objectifs :
- Prévoir les sources d’erreur de manière à les minimiser
- Choix du format de l’instrument
- Construire les items
- Choisir la méthode de correction
Nommer les moyens de l’étape 3.
Étape 3 : Élaboration
Moyens :
- Lectures «psychométriques »
- Inventaire des stratégies déjà employées
Nommer les objectifs de l’étape 4.
Étape 4 : Stabilité
Objectifs :
- Vérifier la nature et l’ampleur de l’erreur
- Établir la stabilité. interne et temporelle
Nommer les moyens de l’étape 4.
Étape 4 : Stabilité
Moyens :
- Erreur-type de mesure
- Analyses d’items
- Analyses corrélationnelles
- Approche hypothético-déductive
- Accord inter-juge
Nommer les objectifs de l’étape 5.
Étape 5 : Congruence
Objectifs :
- Vérifier les quantifications et/ou organisation des concepts.
(Organisation des concepts : vérifier si les hypothèses sont confirmées et voir si tout se tient au niveau conceptuel)
Nommer les moyens de l’étape 5.
Étape 5 : Congruence
Moyens :
- Approches corrélationnelles
- Approche hypothético-déductive (déterminer si les hypothèses sont confirmées)
- Analyses factorielles (pour la validité du construit)
- Équations structurelles
Nommer les objectifs de l’étape 6.
Étape 6 : Usage recommandé
Objectifs :
- Préciser les buts, la population visée, les circonstances d’utilisations et de passation
- Guider l’interprétation
Nommer les moyens de l’étape 6.
Étape 6 : Usage recommandé
Moyens :
- Articles scientifiques
- Normes
Quelle est la visée du Modèle ?
Rendre les tâches, lors de la construction et de la validation, plus faciles. C’est un processus décisionnel où nous détectons des problèmes et où nous apportons les correctifs requis.
Sachant que le processus décisionnel est ordonné, si nous sommes témoins d’une faille lors de la phase de. vérification, qu’est-ce qu’on doit faire ?
Retourner à l’étape correspondant au concept dans la phase de la préparation.
Si un problème est détecté à l’étape de la stabilité : retour à l’élaboration.
Si un problème est détecté à l’étape de la congruence : retour à la conceptualisation.
Si un problème est détecté à l’étape de l’usage anticipé : retour à l’usage anticipé.
Quelles sont les problématiques auxquelles le Modèle de la cible aide à répondre ?
- Mauvaise connaissance des autres instruments.
- Utilisation d’instruments désuets
- Concepts mal définis
- Types de mesure peu appropriée à la situation
- Techniques statistiques mal utilisées
- Mauvaise interprétation des indices statistiques
Expliquer comment le Modèle permet de répondre à la problématique concernant l’utilisation d’instruments désuets.
En utilisant les étapes, on peut aussi vérifier les qualités psychométriques d’un instrument.
Expliquer comment le Modèle permet de répondre à la problématique concernant les concepts mal définis.
L’étape de congruence permet d’éliminer cette problématique.
Expliquer comment le Modèle permet de répondre à la problématique concernant le type de mesure parfois peu approprié à la situation.
Le Modèle permet de détailler les objectifs et les moyens pour chacune des étapes.
Expliquer comment le Modèle permet de répondre à la problématique concernant la mauvaise interprétation des indices statistiques.
Le Modèle défini quel indice est approprié pour guider l’analyse statistique.
Terminer la phrase :
« Les résultats d’un instrument doivent obligatoirement être interprétés en fonction […] »
Du construit, de la population et du contexte.
Définir ce qu’est un construit.
Donner des exemples.
C’est le concept qu’on va mesurer avec notre instrument.
Exemples : dépression, engagement, stress, grégarisme, etc.
Quels concepts sont primordiaux pour les étapes subséquentes.
Construit et population
Est-ce que la population doit être précise ou vaste ?
Tout dépend de l’utilité de l’instrument. Il peut s’agit des enfants de 4-5 ans aux prises de malnutrition chronique au Kenya ou bien il peut s’agir des hommes en andropause.
Définir ce qu’est le contexte.
Donner des exemples.
Ce sont les conditions dans lesquelles les participants vont passer le test.
Exemples : temps de passation, connaissances préalables, supervision, administration, etc.
Élaborer quant aux objectifs de l’étape 1.
Lors de l’étape 1, il faut déterminer ce que mesurera l’instrument et à quoi serviront les résultats qui en émaneront.
Il faut spécifier le but fondamental et psychométrique, la population (bénéficiaires), les utilisateurs, les administrateurs et le contexte d’utilisation.
Élaborer quant aux moyens de l’étape 1.
Il faut faire, à cette étape, un survol analytique des instruments existants et des articles de recherches sur le domaine.
Quelle est la différence entre le but fondamental vs psychométrique ?
FONDAMENTAL :
Qu’est-ce qu’on évalue et pourquoi ?
À quoi les résultats serviront-ils ?
C’est que dont l’instrument cherche à résoudre ou à évaluer.
PSYCHOMÉTRIQUE :
Quelle est la valeur ajoutée de l’instrument par rapport aux autres instruments existants ? Pourquoi créer ou modifier cet instrument ?
Nommer quelques exemples de buts psychométriques courants.
[Pourquoi créer un nouvel instrument ?]
- Procéder à une évaluation plus courte
- Changer la modalité d’évaluation
- Traduire avec ou sans adaptation culturelle
- Préciser le construit
- Cibler plus précisément un pan de la population
- ## Créer une version parallèle d’un test
Association avec l’acteur.
A. Personne qui crée l’instrument
B. Personne qui évalue, à l’aide des résultats de l’instrument, les individus en évaluation
C. Personne qui se fait évaluer à l’aide de l’instrument
D. Personne qui procède à la mesure.
A. Concepteur
B. Utilisateur
C. Bénéficiaire
D. Administrateur