CRÉATION DES TESTS Flashcards
Que mesure un test ?
Quelles sont les 3 étapes de sa création ?
Mesure objective d’une caractéristique psychologique (pour le rendre plus objectif)
- standardisation
- étalonnage
- qualités métrologiques (sensibilité, fidélité, validité)
On a d’abord développé la psychométrie puis la théorie. Psychométrie (méthodes) ⇒ théories
Qu’est ce qu’une variable ?
Paramètre (mesurable) qui peut prendre différentes valeurs numériques (au moins 2) .(quantitatif ou qualitatif)
→ variable X
→ plusieurs valeurs : x1, x2, x3, …, xn (n = nombre de valeurs)
(X : note obtenue
⇒ X1 : note de l’étudiant 1)
Qu’est ce que la distribution ?
répartition de toutes les valeurs : distribution
Qu’est ce qu’une constante ?
paramètre qui ne peut prendre qu’une seule valeur.
Qu’est ce que la tendance centrale d’une variable ?
représente le centre de la distribution (donne une idée du centre)
Elle peut être → mode, médiane, moyenne
Qu’est ce que la dispersion d’une variable ?
Représente la variabilité de la distribution (comment les valeurs s’écartent autour de la moyenne)
→ il y a plusieurs indicateur de dispersion :
- étendue
- quantiles (ex : quartiles, centiles)
- variance
- écart-type
Que permet l’écart-type ?
Comment le calcule t on ?
Permet d’avoir une idée de l’écart par rapport à la moyenne. Indicateur utilisé pour la dispersion de la variable.
Pour le caculer : élever la variance au carré
Comment calculer la variance ?
1 : faire la moyenne
2 : calculer écart à la moyenne (note-moyenne)
3 : faire la moyenne des écarts à la moyenne
4 : passer chaque écarts au carré
5 : faire la moyenne des écarts au carré = variance
Qu’indique la moyenne ?
Indicateur d’une valeur autour d’une distribution : donne une notion générale sur 1 distribution
Quand se fait l’étape de standardisation.
Son objectif ?
Se fait en amont, mais peut se refaire après que le test ait été utilisé.
- objectif : perte de subjectivité
Il s’agit de perdre au maximum la subjectivité (du psyg, de la personne qui fait passer le test) dans le test pour obtenir des mesures objectives.
Qu’est -ce que veut dire “standardiser” ?
mettre des règles strictes qui doivent être respectées par la personne qui fait passer le test.
3 points de la standardisation ?
→ consigne
Il faut l’écrire pour que le psy dise exactement la même chose à tout le monde. (l’utilisation de synonyme ou une répétition de la consigne biaise le test) ex : « je vais vous lire des listes de chiffres, vous devrez me les restituer aussitôt après »
→ matériel : ce que l’on utilise pour faire passer le test. Ex : 1ère liste : « 3 - 7 - 4 - 9 » lue avec 1 s d’intervalle entre chaque
→ cotation : manière d’attribuer des points à chaque item. ex 1 point si l’individu rappelle les quatre chiffres dans le bon ordre,
même s’il hésite un peu (après 3 s d’hésitation, relancer une fois seulement puis stopper après à nouveau 3 s sans réponse)
Anamnèse : entretien se déroulant avant la passation.
De plus en plus, les tests sont électroniques, la standardisation y est donc optimum.
Quel est l’objectif de l’étalonnage ?
Etablir une population de référence
Cela permet de :
→ situer l’individu par rapport à sa population
→ déterminer si son score est « normal »
Combien y a t il de méthode pour étalonner ?
Quelles sont les étapes de chaque méthode ?
- 2 méthodes : quantilage ou échelles normalisées
- 4 étapes (3 communes, 4ème dépend de la méthode)
- échantillonner
- tester
- observer la distribution des effectifs
- construire des classes
Cite les 4 étapes de l’étalonnage
- Échantillonner
- Tester
- Observer la distribution des effectifs
- Construire des classes (échelle normalisée)
Détail les 4 étapes de l’étalonnage et leurs objectifs
-
Échantillonner
*objectif : sélectionner un échantillon de personnes pour avoir pop de réf
- méthode des quotas
- méthode d’échantillonnage aléatoire -
Tester
*objectif : faire passer le test en respectant les règles définies par la standardisation -
Observer la distribution des effectifs
*objectif : définir la répartition des individus
extraire les effectifs
graphique et/ou tableau
analyse visuelle -
Construire des classes (échelle normalisée)
*objectif : répartir les effectifs selon une loi normale
- avantage : situer un individu par / à sa population
- inconvénient : perte d’information
discrimine bien aux extrêmes de la distribution
A quoi correspond “échelle normalisée”
faire en sorte/s’organiser pour que cela suive la loi normale avec m de 100 et écart-type de 15.
Qu’est ce que la Loi Normale (Laplace-Gauss)
Par quoi est-elle caractérisée ?
C’est une distribution (particulière) de référence pour de nombreuses variables quand le n (valeur) est élevé
Bcp phéno la suive Ex : t°, paramètre physiologique comme taille….
Cela arrive quand les phénomènes ont des bornes différentes. Ex : pas bcp de femme de 1m ou de 2m.
Avec une population large, on a souvent bcp de valeurs autour de la moyenne (et + on s’écarte de la moyenne et - il y a de valeurs)
Elle est caractérisée par la répartition des valeurs autour de la moyenne.
⇒ Dans loi normale : 95% se trouve entre -2 et +2 écart-type. (on ne regarde plus la courbe de base mais la courbe de la loi normale)
Que permet la loi Normale ?
- calculer les proportion des valeurs situées à x écart-types de la moyenne (dans la loi normale) (score z)
⇒ Il faut pour cela connaître la moyenne et l’écart-type (de la courbe/tableau de base)
Si on connaît moyenne et écart-type : on peut calculer des proportion d’individus car dans loi normal on sait que 95% se trouve entre -2 et +2 écart-type….
⇒ Situer un individu par rapport à sa population de référence.
⇒ cela permet d’établir une norme statistique : 95% + ou - 2 écart-types.
95% du milieu de la distribution, et au-delà (en + ou en -) : anormal, atypique.
Seuil pris en compte : les 5% extrêmes (+2,5 en haut et -2,5 en bas ds 1 distribution)
Le QI suit-il une loi normale ?
En psychologie, le QI est sur le même principe, et de manière à ce que la moyenne soit de 100 et l’écart type de 15.
S’il est étalonné pour francophone entre 20 et 30 ans avec moyenne de 100 et écart type de 15.
⇒ 95% des individus sont entre 70 et 130 de QI.
avec 2,5% en dessous de 70 (déficience intellectuelle) et 2,5% au-dessus de 130 (HPI).
La plupart des outils utilisés par le psyg sont basés sur ce principe pour ainsi détecter quand les individus s’écartent trop de la moyenne.
Quels sont les 3 qualités métrologiques
Vérifier que le test respecte les qualités métrologiques :
- sensibilité,
- fidélité,
- validité
qualités métrologiques :
- sensibilité : définition
*définition : capacité d’un test à discriminer les individus
qualités métrologiques :
- sensibilité : évaluation
*évaluation : distribution des scores
Exemples de défaut de sensibilité (test calcul mental) :
- faible variabilité entre individus (mais bonne tendance centrale)
⇒ peut être pas assez de questions faciles et difficiles
B-S a introduit questions de difficulté croissante : permet de bien discriminer.
- mauvais scores pour tous (effet plancher)
⇒ le test comporte peut être trop de questions difficile (il ne sert donc à rien) - bons scores pour tous (effet plafond)
⇒ le test comporte peut être trop de questions faciles (il ne sert donc à rien)
S’il y a une épreuve parmi d’autres qui présente un défaut de sensibilité, je la supprime. (On prévoit toujours un peu plus d’épreuves) mais s’il y en a beaucoup, il faut augmenter la sensibilité.
qualités métrologiques :
Méthodes pour augmenter la sensibilité d’un test
- Faire varier la difficulté des questions.
- Augmenter le nombre d’item (je peux plus facilement faire varier la difficulté / avoir difficulté croissante.)
- Affiner les critères de cotation (cad noter certains items sur plusieurs valeurs différentes. (0/1 échec/réussi, mais 0,5 si une partie est bonne))
- Réactualiser test régulièrement (Qi a aug au fil des générations. Niveau des gens augmente donc on tend vers 1 effet plafond
- réécrire dans langage plus contemporain)