Cours 10 : Usage recommandé Flashcards
Lorsqu’on se préoccupe d’utilité, on se pose toujours la même question générale «Quelles décisions mon instrument doit-il m’aider à prendre?»
Mais dans l’étape de l’usage recommandé, il est nécessaire de répondre à quel question ?
Quel est le degré de certitude associé aux conclusions tirées de mon instrument ? (À quel point je peux le recommander à mes pairs ?)
Quels sont les objectifs de l’usage recommandé ? (2)
1) Préciser … :
- les buts,
- la population visée,
- les circonstances d’utilisation/de passation
(Retour sur l’usage anticipé)
2) Guider l’interprétation
Cad, publier l’ensemble des processus de création de l’instrument afin de permettre à deux qui regardent l’article de porter un jugement critique et préciser les points forts/faibles de l’instrument
Les objectifs de l’usage recommandé sont :
- Préciser buts, population visée, circonstances d’utilisation/de passation
- Guider l’interprétation
Quels sont les moyens pour y arriver ? (3)
- Article scientifique
-
Manuel de test
Si quelqu’un veut utiliser l’instrument, c’est ce qui va lui permettre d’avoir tous les indices statistiques et recommandations => permet une décision éclairée sur le contexte -
Normes
Permet de guider l’interprétation des résultats pour les bénéficiaires
Dans le document formel (article ou manuel), il faut inclure … (3)
- Le processus d’élaboration et de validation
Quels choix ont été faits ? Pourquoi ? - La présentation des preuves de la validité (et par conséquent la fiabilité) de l’instrument.
Le système hypothético-déductif - Les procédures qui rendent optimales l’usage de l’instrument.
Donc les épreuves de validité et fidélité
L’équipe de concepteurs doit ___________ sur leur instrument en exposant clairement leur démonstration de la ___________
L’équipe de concepteurs doit porter un jugement critique sur leur instrument en exposant clairement leur démonstration de la validité.
- Peut-on accomplir le but fondamental ?
- Convient-il à la population visée?
- Est-il fiable, valide et utile?
Pour permettre aux bénéficiaires d’interpréter les résultats, il faut …
Créer des normes
Norme des tests - Score bruts
C’est quoi un score brut ?
Il peut s’agir de … (2)
C’est le résultats au test sans interprétation. Il peut s’agir de :
1. De la somme ou moyenne des réponses/cotations associées aux réponses
Ex : échelle d’altruisme, et on a 3 items bons sur 6, on additionne tous les scores et on divise par le nombre d’items.
2. Algorithmes plus complexes
Norme des tests
Pourquoi on crée des normes pour guider l’interprétation des résultats ?
Parce que les scores brurts sont difficiles à interpréter
Ça veut dire quoi un score de 62 ??
Norme des tests
Rappel
C’est quoi un instrument normatif?
Instruments dont l’interprétation des résultats repose sur la comparaison aux résultats compilés auprès d’un échantillon de la population à qui s’adresse l’instrument
Norme des tests
Rappel
C’est quoi un instrument critériée?
Instruments dont l’interprétation des résultats repose sur le fait qu’un seuil critique a été, ou non, dépassé
Norme des tests
C’est quoi un groupe de référence dans un instrument normatif ?
Comment on constitue un groupe de référence ?
C’est sur quoi on compare le score d’un participant.
Le groupe de référence se constitue à travers un plan d’étalonnage ou de normalisation.
Norme des tests - Groupe de référence
Comment assurer une erreur-type de mesure la plus faible possible ?
Que l’échantillon utilisé pour constituer le groupe soit suffisament grand
Norme des tests - Groupe de référence
- La représentativité du groupe de référence dépend de quoi ? (2)
- Comment on peut assurer une bonne représentativité du groupe de référence ?
- Comment peut-on vérifier la représentativité du groupe de référence ?
- Et si on n’a pas de population visée ?
- De l’usage anticipé et de la population visée
- Avec la méthode d’échantillonage
- En comparant le groupe de référence à la population cible sur les variables importantes (âge, sexe, statut socio-économique, groupes ethniques, taille de la ville, etc.)
- Alors on peut l’extrapoler à partir des caractéristiques du groupe de référence
Norme des tests - Méthodes d’échantillonage
Quelles sont les deux types de méthodes d’échantillonage ?
- Aléatoire simple (probabiliste)
- Convenance (non probabiliste)
Norme des tests
Définit la méthode d’échantillonage de type «aléatoire simple».
Procédure accordant à chaque participant une chance égale de faire partie de l’échantillon.
Norme des tests
Quelles sont les avantages (1) et inconvénients (3) de la méthode d’échantillonage de type «aléatoire simple» ?
Avantages:
- Objectivité
Pas de choix, pris au hasard
Inconvénients:
- Coûteux
- Doit connaître la liste de toutes les personnes constituant la population visée
Ex: population visée = classe en psychométrie. Il faut donc avoir accès à toute la liste d’étudiants. La sélection est aléatoire, donc tout le monde a la même chance d’être sélectionné
Norme des tests
Définit la méthode d’échantillonage de type «convenance».
On inclut des participants sur la base de la facilité d’accès ou ses contacts