Cours 10 Flashcards
Quels sont les 5 étapes du processus de construction d’un instrument?
- 1ère Étape: La détermination des utilisations prévues du test;
- 2ème Étape: La définition de ce que l’on souhaite mesurer;
- 3ème Étape: La création des items;
- 4ème Étape: L’évaluation des items;
- 5ème Étape: La détermination des propriétés métriques de la version définitive du test;
1ere étape: La détermination des utilisations prévues du test
Choisir le _______ et définir l’_______ .
Sujet
Objectif
2ème Étape: La définition de ce que l’on souhaite mesurer
Définir avec plus de _______ les _______ que le test devra mesurer.
Précision
Dimensions
2ème Étape: La définition de ce que l’on souhaite mesurer
Quels sont les 5 processus qui peuvent être mis en action?
- (1) La définition des objectifs pédagogiques;
- (2) L’analyse de contenu des interviews;
- (3) L’observation directe des comportements;
- (4) La méthode des incidents critiques
- (5) La référence à un modèle théorique
2ème Étape: La définition de ce que l’on souhaite mesurer
Exemple de • (1) La définition des objectifs pédagogique?
Ex: Construire un examen en fonction des notions que l’on considère qui devraient être acquise.
2ème Étape: La définition de ce que l’on souhaite mesurer
Exemple de • (2) L’analyse de contenu des interviews?
Ex: Cueillette d’informations à SÉLECTIONNER et CLASSER lors d’entrevues…
2ème Étape: La définition de ce que l’on souhaite mesurer
Exemple de • (3) L’observation directe des comportements?
Ex: Observer les sujets dans leur milieu de vie ou de travail (en regardant la vidéo d’un politicien, les cpts qu’il emploie pour répondre aux réponses, nous donne un indice pour élaborer un questionnaire de mensonges)
2ème Étape: La définition de ce que l’on souhaite mesurer
Exemple de • (4) La méthode des incidents critiques?
Ex: On demande aux supérieurs de décrire des situations de travail où les employés ont agi de manière particulièrement efficace (ou inefficace). Ces comportements « critiques » sont mis en évidence pour construire des items.
2ème Étape: La définition de ce que l’on souhaite mesurer
Exemple de • (5) La référence à un modèle théorique?
Ex: Depuis le début des années 80, les développements de la psychologie cognitive ont conduit à la création de nombreux modèles théoriques utilisables par les constructeurs de tests.
2ème Étape: La définition de ce que l’on souhaite mesurer
Qui suis-je?
95% des chercheurs l’utilisent pour élaborer leur instrument. On parle de la ground theory.
La référence à un modèle théorique
3ème Étape: La création des items
Trop d’attention a été accordée à la constitution des ________ et trop peu à la création des ______
Échantillons
Questions
3ème Étape: La création des items
Il faut clarifier 3 choses…
1) Le format des items
2) Le niveau de difficulté des items
3) La quantité d’items qu’il faut créer
3ème Étape: La création des items
Exemple de format des items
Questions ou affirmations; style de réponse – ouverte, dichotomique, Likert, etc.
3ème Étape: La création des items
Il n’y a pas de « meilleur format »! Un format est bon s’il est adéquat au ___ et à la _______ d’évaluation.
But
Situation
3ème Étape: La création des items
Le niveau de difficulté des items dépendra…
De la population visée par le test
3ème Étape: La création des items
Caractéristiques de la quantité d’items d’un instrument
1) La durée du test
2) Le niveau de fidélité désiré
3) La quantité d’item finale désiré (Si 10 item finaux, on en prépare 30 genre)
4) Avoir un nombre “Éthique” d’items (Éviter la fatigue et ne pas “tricher” sur la fidélité)
5) Éliminer les items qui partage la variance de manière élevé entre eux
4ème Étape: L’évaluation des items
2 démarches sont habituellement suivies…
1) Évaluation des items par des juges (Validité)
2) Réalisation d’une mise à l’essai des items
4ème Étape: L’évaluation des items
Qu’est ce que la 2) Réalisation d’une mise à l’essai des items?
- Faire passer tous les items à un échantillon de la population: la taille de cet échantillon dépend de l’hétérogénéité de la population visée par le test ( un échantillon trop homogène risque de masquer certains items problématiques);
- Les résultats de cette mise à l’essai doit être analysés d’un point de vue quantitatif et qualitatif (c’est mon test, je décide de ce qui est important).
5ème Étape: La détermination des propriétés métriques de la version définitive du test
De quel manière? (3)
1) Évaluation des indices de validité;
2) Évaluation des indices de fidélité;
3) Établissement des normes (Population, Écart-type, Score z)
Lors de la rédaction d’un manuel d’utilisateur de l’instrument, on s’assure de présenter 4 choses
1) Les fonctions pour lesquelles il a été créé
2) Les bases théoriques du test
3) Les qualifications requises pour l’appliquer et l’interpréter
4) Les données métriques (pour assurer son utilisation).
Le constructeur de l’instrument doit assumer une responsabilité éthique car ….
Les informations du manuel doivent garantir un usage correct du test, dans le respect des principes éthiques.
