Cours 10

Question 1

Quels sont les 5 étapes du processus de construction d’un instrument?

Answer 1

• 1ère Étape: La détermination des utilisations prévues du test;
• 2ème Étape: La définition de ce que l’on souhaite mesurer;
• 3ème Étape: La création des items;
• 4ème Étape: L’évaluation des items;
• 5ème Étape: La détermination des propriétés métriques de la version définitive du test;

Question 2

1ere étape: La détermination des utilisations prévues du test

Choisir le _______ et définir l’_______ .

Answer 2

Sujet

Objectif

Question 3

2ème Étape: La définition de ce que l’on souhaite mesurer

Définir avec plus de _______ les _______ que le test devra mesurer.

Answer 3

Précision

Dimensions

Question 4

2ème Étape: La définition de ce que l’on souhaite mesurer

Quels sont les 5 processus qui peuvent être mis en action?

Answer 4

• (1) La définition des objectifs pédagogiques;
• (2) L’analyse de contenu des interviews;
• (3) L’observation directe des comportements;
• (4) La méthode des incidents critiques
• (5) La référence à un modèle théorique

Question 5

2ème Étape: La définition de ce que l’on souhaite mesurer

Exemple de • (1) La définition des objectifs pédagogique?

Answer 5

Ex: Construire un examen en fonction des notions que l’on considère qui devraient être acquise.

Question 6

2ème Étape: La définition de ce que l’on souhaite mesurer

Exemple de • (2) L’analyse de contenu des interviews?

Answer 6

Ex: Cueillette d’informations à SÉLECTIONNER et CLASSER lors d’entrevues…

Question 7

2ème Étape: La définition de ce que l’on souhaite mesurer

Exemple de • (3) L’observation directe des comportements?

Answer 7

Ex: Observer les sujets dans leur milieu de vie ou de travail (en regardant la vidéo d’un politicien, les cpts qu’il emploie pour répondre aux réponses, nous donne un indice pour élaborer un questionnaire de mensonges)

Question 8

2ème Étape: La définition de ce que l’on souhaite mesurer

Exemple de • (4) La méthode des incidents critiques?

Answer 8

Ex: On demande aux supérieurs de décrire des situations de travail où les employés ont agi de manière particulièrement efficace (ou inefficace). Ces comportements « critiques » sont mis en évidence pour construire des items.

Question 9

2ème Étape: La définition de ce que l’on souhaite mesurer

Exemple de • (5) La référence à un modèle théorique?

Answer 9

Ex: Depuis le début des années 80, les développements de la psychologie cognitive ont conduit à la création de nombreux modèles théoriques utilisables par les constructeurs de tests.

Question 10

2ème Étape: La définition de ce que l’on souhaite mesurer

Qui suis-je?

95% des chercheurs l’utilisent pour élaborer leur instrument. On parle de la ground theory.

Answer 10

La référence à un modèle théorique

Question 11

3ème Étape: La création des items

Trop d’attention a été accordée à la constitution des ________ et trop peu à la création des ______

Answer 11

Échantillons

Questions

Question 12

3ème Étape: La création des items

Il faut clarifier 3 choses…

Answer 12

1) Le format des items
2) Le niveau de difficulté des items
3) La quantité d’items qu’il faut créer

Question 13

3ème Étape: La création des items

Exemple de format des items

Answer 13

Questions ou affirmations; style de réponse – ouverte, dichotomique, Likert, etc.

Question 14

3ème Étape: La création des items

Il n’y a pas de « meilleur format »! Un format est bon s’il est adéquat au ___ et à la _______ d’évaluation.

Answer 14

But

Situation

Question 15

3ème Étape: La création des items

Le niveau de difficulté des items dépendra…

Answer 15

De la population visée par le test

Question 16

3ème Étape: La création des items

Caractéristiques de la quantité d’items d’un instrument

Answer 16

1) La durée du test
2) Le niveau de fidélité désiré
3) La quantité d’item finale désiré (Si 10 item finaux, on en prépare 30 genre)
4) Avoir un nombre “Éthique” d’items (Éviter la fatigue et ne pas “tricher” sur la fidélité)
5) Éliminer les items qui partage la variance de manière élevé entre eux

Question 17

4ème Étape: L’évaluation des items

2 démarches sont habituellement suivies…

Answer 17

1) Évaluation des items par des juges (Validité)

2) Réalisation d’une mise à l’essai des items

Question 18

4ème Étape: L’évaluation des items

Qu’est ce que la 2) Réalisation d’une mise à l’essai des items?

Answer 18

• Faire passer tous les items à un échantillon de la population: la taille de cet échantillon dépend de l’hétérogénéité de la population visée par le test ( un échantillon trop homogène risque de masquer certains items problématiques);
• Les résultats de cette mise à l’essai doit être analysés d’un point de vue quantitatif et qualitatif (c’est mon test, je décide de ce qui est important).

Question 19

5ème Étape: La détermination des propriétés métriques de la version définitive du test

De quel manière? (3)

Answer 19

1) Évaluation des indices de validité;
2) Évaluation des indices de fidélité;
3) Établissement des normes (Population, Écart-type, Score z)

Question 20

Lors de la rédaction d’un manuel d’utilisateur de l’instrument, on s’assure de présenter 4 choses

Answer 20

1) Les fonctions pour lesquelles il a été créé
2) Les bases théoriques du test
3) Les qualifications requises pour l’appliquer et l’interpréter
4) Les données métriques (pour assurer son utilisation).

Question 21

Le constructeur de l’instrument doit assumer une responsabilité éthique car ….

Answer 21

Les informations du manuel doivent garantir un usage correct du test, dans le respect des principes éthiques.