Psychométrie Flashcards

1
Q

Qu’est-ce que la mesure?

A

Attribution de nombres à des objets, à des événements ou à des individus selon des règles préétablies dans le but de déterminer la valeur d’un attribut donné.

  • Dans l’approche quantitative: nombres attribués à des objets/catégories pour représenter la quantité d’une caractéristique
  • Dans l’approche qualitative: objets assignés à des catégories qui s’excluent mutuellement de façon à représenter la nature de la caractéristique
How well did you know this?
1
Not at all
2
3
4
5
Perfectly
2
Q

Pour quelles raisons, la mesure est importante?

A
  • Mesurer, de façon standardisée, les différences entre les personnes ou les réactions de ces personnes dans des situations différentes
  • Guider la prise de décision et tirer des conclusions dans différents contextes
  • Évaluer les changements ou les progrès (ex. MCID)
  • Déterminer la « normalité » (valeur de référence)
  • Globalement: évaluer les phénomènes avec le degréde précision le plus élevé possible****
How well did you know this?
1
Not at all
2
3
4
5
Perfectly
3
Q

Vrai ou faux, un instrument de mesure permet de mesurer un phénomène?

A

Faux,

Attention: On ne mesure pas le phénomène en soi, mais ses caractéristiques (nature indirecte)

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
4
Q

Qu’est-ce qu’une variable et qu’est-ce qu’un construit?

A

•Variable: attribut pouvant prendre différentes valeurs

•Construit: variable abstraite
– Concept représentant un comportement ou un évènement non observables
Ex: autonomie (ne se mesure pas en une seule variable)

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
5
Q

Quelle est l’arborescence des échelles de mesure selon les variables?

A

Échelles de mesure:

  1. Catégoriques (discrètes)
  2. 1 Nominales
    - -> Dichotomiques ou polychotomiques
  3. 2 Ordinales
  4. Numériques
  5. 1 Discrètes
  6. 2 Continues
    - -> Par intervalle ou Ratio
How well did you know this?
1
Not at all
2
3
4
5
Perfectly
6
Q

Qu’est-ce qu’un échelle de mesure nominale, ordinale, discrète et continue?

A

Nominale:
•Objets classés dans une catégorie donnée à l’aide de nombressans valeur numérique (ex. sexe, nationalité, etc.)

Ordinale
•Éléments classés en fonction de leur valeur relative (nombre) représentant un rang ou un ordre de grandeur(ex. mesure de la mobilité)

Discrète
•Valeurs sont des entiers et représentent un nombre fini (ex. nombre d’hospitalisations)

Continue
•Valeurs ont un nombre potentiellement infini et sont sur un continuum
Par intervalle: Absence de zéro absolu (ex. température)
Ratio: Présence d’un zéro absolu (ex. âge)

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
7
Q

Différencier une donnée catégoriques d’une données continues (numériques)?

A

Catégoriques:
Les données se classent dans des catégories mutuellement exclusives.
• Les données peuvent (ou non) être assignées en fonction de valeurs numériques
Attention! Ces valeurs numériques ne représentent pas un nombre, mais plutôt une catégorie.
Ex: Cote d’un bilan musculaire

Continues:
Résultats d’un test sur un continuum: valeurs potentiellement infinies
•Le nombre représente une valeur numérique réelle
Ex: Bilan articulaire

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
8
Q

Qu’est-ce qu’un échelle de Likert?

A

Échelle qui permet de quantifier des valeurs catégoriques en continue.

Les choix de réponses sont défini en fonction de l’objet de mesure: niveau d’accord, occurrence, importance, qualité, etc.

Toutefois, il est important de conserver une restriction dans son interprétation car la différence entre le choix 1 et 2 n’égale pas la différence entre le choix 3 et 4 .

Il est mieux d’utiliser un nombre pair de choix. Améliore l’interprétation.

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
9
Q

Maintenant pratique va te pratiquer à identifier des échelles pour mesurer différentes variables?

A

Diapo 13 du powerpoint psychométrie

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
10
Q

Qu’est-ce qu’une valeur de référence, une population de référence, un échantillon de référence et des individus de référence?

A

Valeurs de référence («normalité»): valeurs obtenues pour une population dans des conditions données

Population de référence: renferme toutes les personnes susceptibles de servir de référence (c.-à-d. possédant les caractéristiques recherchées)

Échantillon de référence: nombre d’individus représentant la population de référence

Individus de référence: sélectionnés à l’aide de critères précis et clairs = groupe de référence

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
11
Q

Quelles questions doit-on se poser avant de sélectionner des valeurs de référence?

A

Questions à se poser avant de sélectionner des valeurs de référence:

  • Le groupe de référence possède-t-il des caractéristiques semblables à mon patient?
  • L’échantillon est-il représentatif de la population?
  • L’échantillon inclut-il assez de cas pour avoir un bon degré de précision?
  • L’échantillon est-il divisé de manière appropriée?
How well did you know this?
1
Not at all
2
3
4
5
Perfectly
12
Q

Qu’est-ce qu’une référence normative?

A

Mesures de référence basées sur des normes sont dépendantes de l’échantillon.

Comparaison entre le résultat d’un patient à une évaluation et celui d’individus représentant un groupe de référence (norme).

Score brut transformé en un score standard ou un rang percentile.

Objectif: Discriminer/Différencier les individus sur la variable de mesure.
–Est-ce que le patient se situe dans les valeurs habituellement attendues ou non (ex. par rapport à son âge)?
–Est-ce que le patient est éligible aux services(ex. services d’aide à domicile, prêt d’une aide technique)?

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
13
Q

Qu’est-ce qu’une référence critériée?

A

Mesures de référence basées sur des critères

Comparaison d’un patient avec lui-même à différents moments dans le temps

  • On s’intéresse à mesurer l’atteinte d’un résultat par le patient et non à le comparer avec d’autres individus
  • Score standard (point fixe) établi par des experts

Objectif: Évaluer l’individu de manière à comparer sa performance par rapport à des seuils préétablis

Est-ce que le patient s’est amélioré depuis son entrée à l’unité de réadaptation? (Prise d’une mesure à son admission et une autre à son congé)

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
14
Q

Qu’est-ce qu’une erreur de mesure et quelle sont ses 2 types?

A

C’est l’écart entre la mesure réelle et celle prise avec l’instrument de mesure.

Valeur observée = Valeur réelle +/- l’erreur de mesure

Elle n’est pas connue, mais on peut l’estimer

2 Types:

  • Erreur aléatoire
  • Erreur systématique
How well did you know this?
1
Not at all
2
3
4
5
Perfectly
15
Q

Qu’est-ce qu’une erreur aléatoire (trait error)?

A
  • Erreur qui est attribuable au hasard et à des facteurs subjectifs (ex. caractéristiques individuelles comme la fatigue, l’humeur)
  • Ne peut pas être évitée et prédite
  • Entraîne des surestimations et des sous-estimations -> Sur un grand nombre d’observations, sa moyenne va tendre vers zéro
How well did you know this?
1
Not at all
2
3
4
5
Perfectly
16
Q

Qu’est-ce qu’une erreur systématique (méthod error)?

A

Aussi appelée « biais »: erreur prédictible
•Attribuable à des facteurs permanents qui surviennent de façon constante (ex. caractéristiques de l’instrument de mesure)
•Plus grave que l’erreur aléatoire, car elle représente des biais pouvant généralement être résolus

Ex: évaluateur qui ne suit pas une procédure standardisée

Elle est plus grave que l’erreur aléatoire car nous avons un contrôle dessus.

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
17
Q

Quelles sont les 3 sources d’erreurs qui affectent principalement la qualité des données recueillies?

A
  1. L’instrument de mesure lui-même (ex. balance mal calibrée)
  2. Un problème relié à la personne évaluée (ex. stress, fatigue)
  3. Un problème relié à l’évaluateur (ex. connaît l’hypothèse de recherche, utilisation erronée du goniomètre)
How well did you know this?
1
Not at all
2
3
4
5
Perfectly
18
Q

Comment pouvons nous réduire l’erreur d’un instrument?*****

A
  1. Instrument de mesure (saisie de données)
    - Calibration des instruments
    - Données manquantes ou aberrantes
    - Logiciel utilisé (Excel, SPSS, InVivo, etc.)
  2. Personne évaluée (variations des caractéristiques mesurées)
    - Saison, moment de la journée
  3. Évaluateurs (variations relatives aux utilisateurs des instruments)
    - Formation et standardisation (nb répétitions)
    - Assignation à l’insu
    - Comparer la distribution selon l’évaluateur
How well did you know this?
1
Not at all
2
3
4
5
Perfectly
19
Q

Qu’est-ce que la fidélité comme qualités psychométriques des instruments de mesure?

A

Correspond à la reproductibilité, la précision et la constance(stabilité) de la mesure.

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
20
Q

Quels éléments permettent d’améliorer la fidélité d’un test?

A
  1. La standardization du test, en réduisant la variabilité de la situation d’évaluation du patient.
  2. En réduisant l’erreur d’un instrument de mesure (revoir la carte)
  3. Augmenter le nombre d’items (mais à faire attention car la qualité de ses items sont importants)
21
Q

Quels sont les types de fidélité et les définir?

A
  1. Fidélité test-retest
    - Stabilité temporelle
    - Mesure la stabilité de la mesure en comparant les résultats de deux évaluations (ou plus) du même sujet effectuées à deux moments différents
    - N’implique pas d’observateur
    - Dépend à la fois de la stabilité de la mesure et de la stabilité du sujet/participant étudié
  2. Fidélité inter-observateurs
    -Cohérence entre plusieurs observateurs
    Équivalence intercodeurs: Comparaison des résultats obtenus par deux ou plusieurs évaluateurs évaluant le même sujet, avec le même instrument.
  3. Cohérence interne (ou homogénéité)
    - Force qui relie les énoncés
    - Exprime l’homogénéité de l’instrument: Est-ce que les énoncés mesurent différents aspects d’une même variable?
    - Utile lors d’une seule administration de l’instrument: relativement un grand échantillon
22
Q

Comment et quels éléments doivent être considérés dans l’interprétation d’une fidélité test-retest?

A

•Intervalle de temps entre les deux mesures:
-Compromis entre l’effet de mémoire/d’apprentissage et l’évolution/maturation du phénomène (ex. passation d’un test de dépistage cognitif)

•Estimation:

  • Kappa de Cohen (catégorique; nominale)
  • Coefficient de corrélation intra-classe (continue)
  • Indice de concordance de Kendall (ordinale)

•Interprétation: coefficient > 0,70 = stabilité élevée

23
Q

Quels sont les 2 types de fidélité inter-juges?

A
  1. Fidélité inter-juges simultanée(ou synchrone): Observation simultanée, sans interaction entre les juges
  2. Fidélité inter-juges non simultanée (asynchrone): Observation à deux temps de mesure différents, sans interaction entre les juges
    - -> Notion de stabilité temporelle ici à considérer (donc moins prioriser que synchrone)
24
Q

Comment doit-on interpréter une fidélité inter observateurs?

A

Peut s’exprimer par:
–Pourcentage d’accord (indication sur l’importance de l’erreur survenue en cours d’observation)
–Coefficient de corrélation

•Estimation:

  • Kappa (catégorique)
  • Kappa pondéré ou indice de Kendall (ordinale)
  • Coefficient de corrélation intra-classe (continue)

Permet de compenser le tir sur l’erreur aléatoire qui n’avait pas été prise en compte (a discuté)

25
Q

Comment doit-on interpréter une cohérence interne?

A

Par le coefficient alpha de Cronbach(α)
•Varie en fonction du nombre d’énoncés dans l’échelle de mesure -> plus le nombre est élevé, plus la valeur du coefficient le sera
•Valeur du coefficient: entre 0 et 1 (une valeur élevée indique une grande cohérence interne)
•Si le coefficient > 0,90 = possible redondance des items

Peut aussi se faire par:

  • Moitié-moitié (split-half): division des énoncés de l’outil et corrélation des résultats des 2 moitiés
  • Inter-énoncés: Mesure de la relation entre chaque énoncé d’une échelle et le score total.
26
Q

Comment doit-on interpréter une mesure de fidélité peu importe le type de fidélité utilisé?

A

Plusieurs classifications sont proposées pour l’interprétation des coefficients:
« Bonne fidélité »: coefficient se situe généralement entre 0,70 et 0,90

  • Attention! Plus il y a d’énoncés dans une échelle de mesure, plus la fidélité est grande
    • Le niveau de fidélité exigé dépend de l’utilisationde l’outil de mesure

•Coefficients les plus souvent utilisés :

  1. Kappa de Cohen pour les échelles catégoriques
  2. Coefficient de corrélation intra-classe pour les échelles continues
27
Q

Qu’est-ce qu’un kappa de cohen?

A

Le pourcentage d’accord ne tient pas compte du hasard

Le Kappa corrige cette situation: il dépend à la fois du pourcentage d’accord observé entre deux mesures et du pourcentage d’accord dû au hasard

Ce coefficient de fidélité varie de -1 à +1 ou:
-1 = absence totale de concordance,
0 = concordance exclusivement attribuable au hasard
+1 = une concordance parfaite

28
Q

Qu’est-ce qu’un coefficient de corrélation intra-classe?

A

Coefficient de fidélité pour les échelles de variables continues.

Obtenu par l’entremise d’une analyse de variance.

Variant de -1 à 1.

29
Q

Qu’est-ce que la validité?

A

Correspond au niveau de confiance envers les résultats, au degré de précision avec lequel le concept est représenté par les énoncés de l’outil.

Concerne l’ampleur de l’erreur systématique

30
Q

De quoi dépend la validité selon la conceptualisation de la trinité?

A
  • la validité de construit
  • la validité de critère
  • la validité de contenu
31
Q

Qu’est-ce que la validité de construit?

A

Capacité de l’instrument à correspondre aux concepts du construit (sous-jacent à une théorie) concernant le phénomène étudié.

Construits: souvent multidimensionnels et non-directement observables

32
Q

Quelles sont les différents types de validité contribuant à document la validité de construit?

A
  • Validité concurrente
  • Validité convergente
  • Validité divergente
  • Validité discriminante
  • Validité prédictive
33
Q

Qu’est-ce que la validité concurrente, convergente et divergente?

A

Concurrente:
- But: Prédire les résultats d’un autre outil de mesure

Convergente:

  • But: Démontrer que le nouvel outil de mesure permet de dégager des résultats similaires à un autre outil s’intéressant au même construit
  • Corrélées positivement
  • Est-ce quel’instrument évalué mesure des variables similaires du construit avec lesquelles il devrait être relié?

Les validités ci-dessus réfèrent toutes deux à l’utilisation de mesures corrélationnelles (coefficient de Pearson) afin de documenter des relations entre deux mesures d’un même construit

Divergente:
But: Démontrer que le nouvel outil de mesure permet de dégager des résultats différents à un autre outil s’intéressant au même construit
- consiste à comparer deux ou plusieurs instruments entre eux qui mesurent des construits différents.
- Corrélées négativement
- Est-ce que l’instrument évalué mesure des variables différentes du construit visé, c’est-à-dire des variables avec lesquelles il ne devrait pas être relié?

34
Q

Qu’est-ce qu’une validité discriminante?

A

Comparaison des résultats de deux groupes d’individus.

Permet de discriminer des individus, de les «différencier» en:

  • Individus qui possèdent la caractéristique relative au construit mesuré
  • Individus qui ne possèdent pas la caractéristique relative au construit mesuré
35
Q

Quelle est la relation entre la fidélité et la validité d’un instrument de mesure?

A

Pour être valide, un instrument doit être fidèle, MAIS il peut être fidèle et non valide

•Un instrument peut être valide dans un contexte et non valide dans un autre

36
Q

Comment doit-on interpréter la validité d’un instrument de mesure?

A

Les coefficients de validité qui sont généralement jugés satisfaisants (0,60) sont en moyenne moins élevés que ceux de fidélité (0,70 -0,90).

37
Q

Qu’est-ce que la validité prédictive?

A

Validité prédictive: Étude de la précision d’une mesure afin de déterminer une performance future

Utilise souvent les concepts de spécificité et la sensibilité pour documenter cette validité prédictive des instruments servant à dépister ou diagnostiqué.

38
Q

Qu’est-ce que la sensibilité et la spécificité d’un instrument prédictif?

A

Sensibilité (Sn): Capacité d’un instrument à classer adéquatement les participants ayant la caractéristique étudiée (vrais positifs)

Spécificité (Sp): Capacité d’un instrument à reconnaître les participants qui n’ont pas la caractéristique étudiée (vrais négatifs; sujets «sains»)

39
Q

Quelles sont les valeurs prédictives qui permettent d’établir la validité de l’interprétation d’un test?

A

Valeur Prédictive Positive (VPP) :Capacité du test à bien prédire la «maladie» surtout influencée par la spécificité du test

Valeur Prédictive Négative (VPN) :Capacité du test à bien «éliminer» un diagnostic surtout influencée par la sensibilité du test

Toutes 2 dépendent de la prévalence…
La VPP augmente si la prévalence augmente et la VPN diminue si la prévalence augmente

40
Q

Qu’est-ce qu’un likelyhood ratio (ratios de vraisemblance) et pourquoi il est préférable de l’utiliser plutôt que les valeurs prédictives?

A

La sensibilité et la spécificité à elles-seules n’indiquent pas que la maladie est présente (ou absente selon le cas) ;elles en donnent plutôt une probabilité.

De plus, parfois il y a un besoin de contourner le problème lié à la variabilité dans les valeurs prédictives selon la prévalence.
En gros, il est parfois souhaitable de ne pas tenir compte de la prévalence (par exemple car la maladie est très rare) pour établir l’efficacité de notre instrument (évaluer l’utilité potentielle d’un test diagnostique) ou parce qu’une VPP est trop élevé en raison de la prévalence, faussant l’interprétation.

Permet donc de trouver le gain de diagnostique réel.

41
Q

Qu’est-ce qu’un LR+ et un LR-?

A

LR+: probabilité qu’une personne avec la maladie soit évaluée «positive» (vrai positif) divisée par la probabilité qu’une personne sans la maladie soit évaluée «positive» (faux positif)

LR+= Sensibilité/1-Spécificité

LR-: probabilité qu’une personne avec la maladie soit évaluée « négative » (faux négatif) divisée par la probabilité qu’une personne sans la maladie soit évaluée « négative»(vrai négatif)

LR- = 1-sensibilité/Spécificité

42
Q

Comment doit-on interpréter des valeurs de ratios de vraisemblance?

A

LR+:
1-2 –> Affecte la probabilité de façon peu importante
2-5 –> Petit effet sur la probabilité, mais parfois important
5-10 –> Affecte la probabilité de façon modérée/importante
> 10 –> Effet très important et décisif sur la probabilité

LR-:
0.5-1 –> Affecte la probabilité de façon peu importante
0.2-0.5 –> Petit effet sur la probabilité, mais parfois important
0.2-0.1 –> Affecte la probabilité de façon modérée/importante
< 0.1 –> Effet très important et décisif sur la probabilité

43
Q

Qu’est-ce que la sensibilité au changement?

A

Capacité d’une mesure à détecter un changement suite à une intervention.

Pas de consensus sur ce qui constitue une mesure «sensible au changement».

Sensibilité au changement interne: Mesure qui permet de documenter une différence statistiquement significative

Sensibilité au changement externe: Mesure qui permet de documenter une différence cliniquement significative

44
Q

Quels sont les 2 effets qui interfère avec la sensibilité au changement?

A

Floor effect (effet plancher):

  • Test est trop «difficile» ou le construit mesuré est trop rare
  • Résultat: Tous les individus obtiennent un score faible
  • Exemple: Échelle d’équilibre de Berg 14 jours après l’AVC

Ceiling effect (effet plafond)

  • Test est trop «facile» ou la mesure ne permet pas de « capter » une amélioration
  • Résultat: Tous les individus obtiennent un score élevé
  • Exemple: Échelle d’équilibre de Berg après 90 jours suivant l’AVC
45
Q

Malgré le fait qu’il n’y a pas de consensus sur ce qui constitue une mesure sensible au changement, que pouvons nous utiliser pour nous informer de cette sensibilité au changement?

A
  1. Le Minimal Detectable Change (MCD)

2. Le Minimal Clinically Important Difference (MCID)

46
Q

Qu’est-ce que le MCD?

A

MCD: plus petite différence détectable par l’instrument pour considérer qu’il y a eu un changement

N’indique pas si c’est cliniquement significatif, doit plus se fier sur le MCID pour cela.

47
Q

Qu’est-ce que le MCID?

A

Plus petite différence observable d’un score (pour un domaine d’intérêt) pour lequel un patient perçoit un effet bénéfique sur le plan clinique

48
Q

Bravo! Tu es à la dernière question du powerpoint de psychométrie! Maintenant va te pratiquer à la diapo 88-89 de ce powerpoint.

A

:)