Cours 2 Flashcards

1
Q

Origine des nouveaux tests (pourquoi créer un nouveau test)

A

Nécessité de créer un nouveau test pour mettre une théorie à l’essai.

Tests désuets, inadaptés ou qui doivent être révisés.

Considérations pratiques relatives à la sélection, la classification ou l’évaluation.

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
2
Q

Étapes de l’élaboration d’un test

A

1.Définition de l’objectif du test(usage anticipé)

2.Questions relatives à la conception du test

3.Préparation des items

4.Analyse des items

5.Étalonnage et programmation de recherches connexes

6.Préparation du matériel définitif et publication

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
3
Q

Usage anticipé en gros c’est quoi

A

Énoncé des objectifs de l’instrument :
–>Identifier le concept mesuré;
–>Déterminer la population cible;
–>Établir les circonstances de passation et d’utilisation (interprétation pouvant être faite).

Moyens utilisés :
–>Analyse d’instruments existants;
–>Consultation des écrits scientifiques;
–>Consultations formelles et informelles avec des experts et des utilisateurs.

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
4
Q

Établir les buts de l’instrument en gros c’est quoi

A

Les buts de l’instrument se résument souvent en une phrase :
–>Description détaillée du concept mesuré;
–>Identification de la population ciblée;

Existe-t-il un autre test?
–>La création d’un test de qualité prend du temps, de l’argent et beaucoup d’efforts;
–>Si un test existe déjà, pourquoi en créer un nouveau?

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
5
Q

Questions relatives à la conception du test en gros c’est quoi

A

Prise de décisions qui vont avoir une influence sur la forme prise par le test.
–>Reposent sur l’objectif du test et les considérations pratiques.

Décisions quant à :
–>Le mode d’administration du test;
–>La longueur;
–>Le format des items;
–>Les scores du test (format et nombre);
–>La formation des utilisateurs.

Idéalement, on ne produit pas les items avant que ces considérations soient abordées.

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
6
Q

Préparation des items en gros c’est quoi

A

Formulation et révision des items.
–>Doit découler de la théorie, des recherches empiriques.

Composantes d’un item de test :
–>Stimulus (prémisse ou amorce);
–>Format de réponse;
–>Conditions de réponse;
–>Procédures de cotation.

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
7
Q

Analyse des items en gros c’est quoi

A

Les items sont analysés afin de déterminer les propriétés psychométriques de l’instrument.

Deux éléments à considérer :
–>La fidélité;
–>La validité.
Sélection des items.

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
8
Q

Étalonnage et programmation de recherches connexes en gros c’est quoi

A

Préparation des normes à l’aide d’un échantillon normatif.

Préparation des critères de cotation.

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
9
Q

Préparation du matériel définitif et publication en gros c’est quoi

A

La forme finale de l’instrument (ses items, procédure d’administration et de cotation, etc.) est consignée.

Les résultats des études de validation (propriétés psychométriques) sont publiées pour être évaluées par les pairs et les personnes pouvant utiliser le test.

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
10
Q

Usage recommandé en gros c’est quoi

A

Définition de l’utilisation spécifique pouvant être faite des résultats de l’instrument de mesure.

Guides relatives à l’administration et l’interprétation

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
11
Q

La création de tests : un processus itératif

A

La création d’un test psychométrique n’est pas linéaire.

Il est impossible d’avoir un test parfait.
–>Tout au long du processus, on doit interpréter les résultats de l’étude de validation pour détecter les problèmes et apporter les corrections nécessaires.

Si des problèmes apparaissent lors de l’analyse des items, il faut retourner à l’étape de la préparation et refaire l’analyse.

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
12
Q

Usage anticipé les questions

A

Quel construit mesure-ton?

Quelle population vise-t-on?

Déterminer à quoi serviront les résultats de l’instrument.
–>Quoi évaluer?
–>Pourquoi?
–>Quelles décisions prendre à l’aide de mon instrument?

Les résultats produits par l’instrument ont une utilisation spécifique.

Il faut évaluer les besoins réels.

Toutes ces questions peuvent être répondues en consultant la littérature, les experts et les utilisateurs du test.

Guide l’ensemble du processus; l’adéquation sera vérifiée à la dernière étape.

guide le projet en entier, comme les questions qu’on pose, qui on sonde etc
→ concept de l’utilité de mon test

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
13
Q

Acteurs

A

Concepteur/Conceptrice : La personne qui créé l’instrument de mesure.

Bénéficiaire : La personne qui se fait évaluer à l’aide de l’instrument.

Administrateur/Administratrice : La personne qui procède à la mesure.
administrateur serait le psychologue qui administre le test

Utilisateur/Utilisatrice : La personne qui interprète les résultats de l’instrument.
utilisateur→ personnes qui vont prendre le résultats, interpréter et vont prendre décision là dessus genre à l’école qqun enncharge pourrait décider de donner des mesures d’accomodement à un étudiants suite aux résultats a un test

**for sure questions exams là dessus
parfois, le bénéficiaire peut aussi être administrateur (self test)

admin: médecin qui va faire passer un test diagnostic, il est aussi utilisateur pcq selon résultat il va choisir le traitement

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
14
Q

Questions à se poser pour l’usage anticipé

A

Identifier les besoins :
–>Quel est le problème à régler avec la création de notre instrument?
–>Quel est le but de l’évaluation faite à l’aide de notre instrument?

Identifier les acteurs :
–>Qui veut-on aider à l’aide de notre instrument? (identifier les bénéficiaires)
–>Qui va administrer l’instrument? (identifier les personnes administratrices)
–>Qui va utiliser les résultats de l’instrument? (identifier les personnes utilisatrices du test)

Identifier le contexte d’utilisation anticipé.

→ ex d’usage: identifier les personnes qui sont à risque de difficultés scolaires
→ pour notre projet on peut pas mal mettre ce quon veut pour l’usage anticipé

→ dicrimination, diagnostic et profil
(identifier le gens qui sont anxieux vs ceux qui le sont pas → discrimination)
→ si on fait mon thème ça serait but de discrimination

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
15
Q

ex d’usage anticipé avec tests d’intelligence

A

Test de binet (1905) et Stanford-Binet (1916)
–>Test de Binet : Identifier les enfants en difficulté pour les assigner dans des classes spéciales.
–>Test de Stanford-Binet : Adapter le test de Binet pour les États-Unis, avec plus d’épreuves et un plus grand échantillon normatif.
→ ici utilisation usage anticipé→ test qui mesure concept d’intelligence pour les enfants le binet pour enfant en france vs S-B aux états unis
but→ id les enfants en difficulté

Wechsler Adult Intelligence Scale (WAIS) (1939)
–>Évaluer l’intelligence des adultes.
–>Les tests de Binet et Stanford-Binet n’étaient pas adéquat pour les adultes.
–> mm construit mais population différente donc nouveau test!

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
16
Q

ex d’usage anticipé dépression et troubles mentaux

A

Beck Depression Inventory
–>Mesure la sévérité de la dépression chez les adolescents et les adultes. selon le score au test
–>Questionnaire auto-rapporté.

Prime MD – Évaluation primaire des troubles mentaux
–>Diagnostic de 9 troubles mentaux par un médecin.
–>Instrument utilisé en cabinet, comprend un questionnaire et une entrevue.
→ ici mesure pas de sévérité or whatever mais plutot juste faire un diagnostic donc esque cette personne a un ou plus de ces 9 troubles mentaux ou non

17
Q

conceptualisation

A

Nommer et définir le concept à mesurer.
–>Qu’est-ce que mon instrument doit mesurer?

Distinguer les différentes composantes du concept.

Traduire le construit théorique en une série d’éléments pouvant être observés ou sondés.

Utilisation des écrits scientifiques, des instruments déjà existants et consultation formelle d’experts.
–>La théorie identifie souvent les dimensions d’un construit.
–>Chaque dimension devra être mesurée «séparément».

nommer le concept et présenter la théorie selon laquelle on se base (théories sur le concept à l’étude)
par exemple en intelligence on pourrait choisir le théorie de gardner donc faut définir et montrer les différentes composantes de l’intelligence selon cette théorie afin de pouvoir plus tard créer des items reliés

18
Q

Contenu

A

Le contenu d’un instrument est constitué des différentes dimensions du concept

Le contenu d’un instrument est fondé sur une proportion représentative d’un domaine fini
–>de connaissances;
–>de comportements;
–>de manifestations mentales.

différentes dimensions et leur opérationnalisation

une proportion représentative d’un domaine fini → si on prend un test de vocabulaire, si j’veux mesurer le vocab qui a été enseigné en 5e année du primaire, on sait c’est qu’ils mots qu’ils avaient à apprendre pis facilement je vais pouvoir quantifier s’ils connaissent ce qu’il doivent savoir ou pas → connaissances
→ peut aussi être comportements ex: mesurer performance au travail, on sait c’est quoi les taches qu’il faut accomplir donc c’est un domaine fini → ex: de cpt chefs savent ils bien couper des oignons
→ manifestations mentales, genre est un psychologue est bien en mesure d’analyser des cas

→ idéalement faudrait avoir plus d’un item par dimension
→ pour bien représenter chaque dimension d’un concept pcq il y a souvent plusieurs comportements, connaissances, manifs mentales différents qui forment le concept

représentative → genre si une certaine dimension est vrm importante et une autre moins il y aura plus de questions sur celle qui est impo que celle qui l’es pas

19
Q

Comment faire la conceptualisation?

A

Pour effectuer la conceptualisation de notre concept :
-Consultation des écrits scientifiques;
-Consultation des instruments déjà existants;
-Consultation formelle d’experts.

20
Q

Questions de conception préliminaires

A

Décisions relatives au :
-Type de test;
-Type d’items;
-Nombre d’items;
-Type de réponses;
-Type de correction;
-Type d’échelle;
-Méthodes d’administration.

Vise à contrôler les erreurs :
-Aléatoires;
-Systématiques.

21
Q

Types d’items

A

Items à choix de réponse :
-Vrai ou faux;
-Choix multiples

Items à échelle :
-Échelle de Likert
-Échelle d’évaluation graphique;
-Différenciateur sémantique.

Items à développement :
-Questions ouvertes à réponse longue;
-Évaluation du rendement;
Portfolio.

22
Q

Préparation des items

A

Génération de plusieurs items pour chacun des domaines.

Généralement plus que ce que l’on souhaite inclure

23
Q

Cotation des items

A

Choix de réponse : Points accordés, comment faire la procédure de somme.

Questions ouvertes : Comment corriger les réponses? À l’aide d’une grille.
-Cotation globale;
-Cotation analytique;
-Cotation par points.

24
Q

Types d’échelles

A

Nominale;
Ordinale;
À intervalle;
À rapport

25
Q

Méthodes d’administration

A

Directives pour les personnes évaluées.

Directives pour les personnes qui administrent le test.

Comment coter le test.