Cours 2 Flashcards
Origine des nouveaux tests (pourquoi créer un nouveau test)
Nécessité de créer un nouveau test pour mettre une théorie à l’essai.
Tests désuets, inadaptés ou qui doivent être révisés.
Considérations pratiques relatives à la sélection, la classification ou l’évaluation.
Étapes de l’élaboration d’un test
1.Définition de l’objectif du test(usage anticipé)
2.Questions relatives à la conception du test
3.Préparation des items
4.Analyse des items
5.Étalonnage et programmation de recherches connexes
6.Préparation du matériel définitif et publication
Usage anticipé en gros c’est quoi
Énoncé des objectifs de l’instrument :
–>Identifier le concept mesuré;
–>Déterminer la population cible;
–>Établir les circonstances de passation et d’utilisation (interprétation pouvant être faite).
Moyens utilisés :
–>Analyse d’instruments existants;
–>Consultation des écrits scientifiques;
–>Consultations formelles et informelles avec des experts et des utilisateurs.
Établir les buts de l’instrument en gros c’est quoi
Les buts de l’instrument se résument souvent en une phrase :
–>Description détaillée du concept mesuré;
–>Identification de la population ciblée;
Existe-t-il un autre test?
–>La création d’un test de qualité prend du temps, de l’argent et beaucoup d’efforts;
–>Si un test existe déjà, pourquoi en créer un nouveau?
Questions relatives à la conception du test en gros c’est quoi
Prise de décisions qui vont avoir une influence sur la forme prise par le test.
–>Reposent sur l’objectif du test et les considérations pratiques.
Décisions quant à :
–>Le mode d’administration du test;
–>La longueur;
–>Le format des items;
–>Les scores du test (format et nombre);
–>La formation des utilisateurs.
Idéalement, on ne produit pas les items avant que ces considérations soient abordées.
Préparation des items en gros c’est quoi
Formulation et révision des items.
–>Doit découler de la théorie, des recherches empiriques.
Composantes d’un item de test :
–>Stimulus (prémisse ou amorce);
–>Format de réponse;
–>Conditions de réponse;
–>Procédures de cotation.
Analyse des items en gros c’est quoi
Les items sont analysés afin de déterminer les propriétés psychométriques de l’instrument.
Deux éléments à considérer :
–>La fidélité;
–>La validité.
Sélection des items.
Étalonnage et programmation de recherches connexes en gros c’est quoi
Préparation des normes à l’aide d’un échantillon normatif.
Préparation des critères de cotation.
Préparation du matériel définitif et publication en gros c’est quoi
La forme finale de l’instrument (ses items, procédure d’administration et de cotation, etc.) est consignée.
Les résultats des études de validation (propriétés psychométriques) sont publiées pour être évaluées par les pairs et les personnes pouvant utiliser le test.
Usage recommandé en gros c’est quoi
Définition de l’utilisation spécifique pouvant être faite des résultats de l’instrument de mesure.
Guides relatives à l’administration et l’interprétation
La création de tests : un processus itératif
La création d’un test psychométrique n’est pas linéaire.
Il est impossible d’avoir un test parfait.
–>Tout au long du processus, on doit interpréter les résultats de l’étude de validation pour détecter les problèmes et apporter les corrections nécessaires.
Si des problèmes apparaissent lors de l’analyse des items, il faut retourner à l’étape de la préparation et refaire l’analyse.
Usage anticipé les questions
Quel construit mesure-ton?
Quelle population vise-t-on?
Déterminer à quoi serviront les résultats de l’instrument.
–>Quoi évaluer?
–>Pourquoi?
–>Quelles décisions prendre à l’aide de mon instrument?
Les résultats produits par l’instrument ont une utilisation spécifique.
Il faut évaluer les besoins réels.
Toutes ces questions peuvent être répondues en consultant la littérature, les experts et les utilisateurs du test.
Guide l’ensemble du processus; l’adéquation sera vérifiée à la dernière étape.
guide le projet en entier, comme les questions qu’on pose, qui on sonde etc
→ concept de l’utilité de mon test
Acteurs
Concepteur/Conceptrice : La personne qui créé l’instrument de mesure.
Bénéficiaire : La personne qui se fait évaluer à l’aide de l’instrument.
Administrateur/Administratrice : La personne qui procède à la mesure.
administrateur serait le psychologue qui administre le test
Utilisateur/Utilisatrice : La personne qui interprète les résultats de l’instrument.
utilisateur→ personnes qui vont prendre le résultats, interpréter et vont prendre décision là dessus genre à l’école qqun enncharge pourrait décider de donner des mesures d’accomodement à un étudiants suite aux résultats a un test
**for sure questions exams là dessus
parfois, le bénéficiaire peut aussi être administrateur (self test)
admin: médecin qui va faire passer un test diagnostic, il est aussi utilisateur pcq selon résultat il va choisir le traitement
Questions à se poser pour l’usage anticipé
Identifier les besoins :
–>Quel est le problème à régler avec la création de notre instrument?
–>Quel est le but de l’évaluation faite à l’aide de notre instrument?
Identifier les acteurs :
–>Qui veut-on aider à l’aide de notre instrument? (identifier les bénéficiaires)
–>Qui va administrer l’instrument? (identifier les personnes administratrices)
–>Qui va utiliser les résultats de l’instrument? (identifier les personnes utilisatrices du test)
Identifier le contexte d’utilisation anticipé.
→ ex d’usage: identifier les personnes qui sont à risque de difficultés scolaires
→ pour notre projet on peut pas mal mettre ce quon veut pour l’usage anticipé
→ dicrimination, diagnostic et profil
(identifier le gens qui sont anxieux vs ceux qui le sont pas → discrimination)
→ si on fait mon thème ça serait but de discrimination
ex d’usage anticipé avec tests d’intelligence
Test de binet (1905) et Stanford-Binet (1916)
–>Test de Binet : Identifier les enfants en difficulté pour les assigner dans des classes spéciales.
–>Test de Stanford-Binet : Adapter le test de Binet pour les États-Unis, avec plus d’épreuves et un plus grand échantillon normatif.
→ ici utilisation usage anticipé→ test qui mesure concept d’intelligence pour les enfants le binet pour enfant en france vs S-B aux états unis
but→ id les enfants en difficulté
Wechsler Adult Intelligence Scale (WAIS) (1939)
–>Évaluer l’intelligence des adultes.
–>Les tests de Binet et Stanford-Binet n’étaient pas adéquat pour les adultes.
–> mm construit mais population différente donc nouveau test!
ex d’usage anticipé dépression et troubles mentaux
Beck Depression Inventory
–>Mesure la sévérité de la dépression chez les adolescents et les adultes. selon le score au test
–>Questionnaire auto-rapporté.
Prime MD – Évaluation primaire des troubles mentaux
–>Diagnostic de 9 troubles mentaux par un médecin.
–>Instrument utilisé en cabinet, comprend un questionnaire et une entrevue.
→ ici mesure pas de sévérité or whatever mais plutot juste faire un diagnostic donc esque cette personne a un ou plus de ces 9 troubles mentaux ou non
conceptualisation
Nommer et définir le concept à mesurer.
–>Qu’est-ce que mon instrument doit mesurer?
Distinguer les différentes composantes du concept.
Traduire le construit théorique en une série d’éléments pouvant être observés ou sondés.
Utilisation des écrits scientifiques, des instruments déjà existants et consultation formelle d’experts.
–>La théorie identifie souvent les dimensions d’un construit.
–>Chaque dimension devra être mesurée «séparément».
nommer le concept et présenter la théorie selon laquelle on se base (théories sur le concept à l’étude)
par exemple en intelligence on pourrait choisir le théorie de gardner donc faut définir et montrer les différentes composantes de l’intelligence selon cette théorie afin de pouvoir plus tard créer des items reliés
Contenu
Le contenu d’un instrument est constitué des différentes dimensions du concept
Le contenu d’un instrument est fondé sur une proportion représentative d’un domaine fini
–>de connaissances;
–>de comportements;
–>de manifestations mentales.
différentes dimensions et leur opérationnalisation
une proportion représentative d’un domaine fini → si on prend un test de vocabulaire, si j’veux mesurer le vocab qui a été enseigné en 5e année du primaire, on sait c’est qu’ils mots qu’ils avaient à apprendre pis facilement je vais pouvoir quantifier s’ils connaissent ce qu’il doivent savoir ou pas → connaissances
→ peut aussi être comportements ex: mesurer performance au travail, on sait c’est quoi les taches qu’il faut accomplir donc c’est un domaine fini → ex: de cpt chefs savent ils bien couper des oignons
→ manifestations mentales, genre est un psychologue est bien en mesure d’analyser des cas
→ idéalement faudrait avoir plus d’un item par dimension
→ pour bien représenter chaque dimension d’un concept pcq il y a souvent plusieurs comportements, connaissances, manifs mentales différents qui forment le concept
représentative → genre si une certaine dimension est vrm importante et une autre moins il y aura plus de questions sur celle qui est impo que celle qui l’es pas
Comment faire la conceptualisation?
Pour effectuer la conceptualisation de notre concept :
-Consultation des écrits scientifiques;
-Consultation des instruments déjà existants;
-Consultation formelle d’experts.
Questions de conception préliminaires
Décisions relatives au :
-Type de test;
-Type d’items;
-Nombre d’items;
-Type de réponses;
-Type de correction;
-Type d’échelle;
-Méthodes d’administration.
Vise à contrôler les erreurs :
-Aléatoires;
-Systématiques.
Types d’items
Items à choix de réponse :
-Vrai ou faux;
-Choix multiples
Items à échelle :
-Échelle de Likert
-Échelle d’évaluation graphique;
-Différenciateur sémantique.
Items à développement :
-Questions ouvertes à réponse longue;
-Évaluation du rendement;
Portfolio.
Préparation des items
Génération de plusieurs items pour chacun des domaines.
Généralement plus que ce que l’on souhaite inclure
Cotation des items
Choix de réponse : Points accordés, comment faire la procédure de somme.
Questions ouvertes : Comment corriger les réponses? À l’aide d’une grille.
-Cotation globale;
-Cotation analytique;
-Cotation par points.
Types d’échelles
Nominale;
Ordinale;
À intervalle;
À rapport
Méthodes d’administration
Directives pour les personnes évaluées.
Directives pour les personnes qui administrent le test.
Comment coter le test.
