1 - Qualité d'un instrument de mesure

Question 1

Définir ce qu’est un instrument validé et nommer un exemple.

Answer 1

Instrument dont la qualité des mesures a été évaluée
Exemple : SF-36 = évaluation de la qualité de vie (à utiliser tel quel donc aucune modification possible)

Question 2

Quels sont les avantages et les désavantages de l’usage d’un questionnaire validé ?

Answer 2

Avantages : économie de temps et d’argent, permet de comparer les résultats avec d’autres populations à d’autres moments, crédible
Désavantage : plus ou moins adapté à une étude précise, évaluation des propriétés psychométriques incomplète / moins pertinente pour une étude précise, aspects pratiques (ex : langue) ne conviennent pas toujours

Question 3

Selon quoi se fait la sélection d’un instrument de mesure ?

Answer 3

But (objectif primaire ou secondaire)
Hypothèse (concept et domaines)
Ressources (temps, coût, personnel)
Population (symptômes / incapacités, âge, habileté cognitive, ethnicité)

Question 4

Quelles sont les 3 propriétés psychométriques d’un instrument ?

Answer 4

Fiabilité, validité, capacité de détecter des changements dans le temps

Question 5

Qu’est-ce que la fiabilité ?

Answer 5

Capacité de mesurer un concept de manière reproductible et logique = PRÉCISION

Question 6

Quels sont les 3 types de fiabilité ?

Answer 6

1. Fiabilité du test-retest
2. Cohérence interitems
3. Fiabilité intercorrecteurs

Question 7

Qu’est-ce que la fiabilité du test-retest ?

Answer 7

Reproduction des mêmes résultats lorsque réadministré
Attention : intervalle entre le test et le retest ne doit pas être trop court (surestimation due à la mémoire) ni trop long (ce que l’on mesure peut avoir changé)

Question 8

Quels sont les tests statistiques pour la fiabilité du test-retest ?

Answer 8

1. Coefficient de corrélation de Pearson ou de Spearman
2. Coefficient de corrélation intraclasse
3. Différence moyenne entre le test et le retest
4. Coefficient de concordance Kappa

Question 9

Fiabilité du test-retest : coefficient de Pearson ou de Spearman ?

Answer 9

Correspondance entre les résultats obtenus au test et au retest
Coefficient de 1 = correspondance parfaite
Coefficient de 0 = pas de correspondance
TEST INADÉQUAT car ne détecte pas les différences systématiques (pas causées par le hasard) et dépend de la variabilité des résultats

Question 10

Fiabilité du test-retest : coefficient de corrélation intraclasse ?

Answer 10

Proportion de la variance totale qui est attribuable à des variances réelles entre les répondants (autre que dû au test-retest et aux erreurs de mesure)
CIC de 1 = 100% de la variance attribuable aux variances réelles
CIC de 0 = 0% de la variance attribuable aux variances réelles
Seuil d’acceptabilité de 0.7 au niveau des groupes et de 0.9 au niveau individuel
TEST ADÉQUAT car sensible à la variabilité (coefficient de Pearson = CIC si absence de différences systématiques)

Question 11

Fiabilité du test-retest : comparaison des scores moyens obtenus au test et au retest ?

Answer 11

Si aucune différence entre le résultat moyen obtenu au test et au retest alors le test est fiable
TEST INADÉQUAT car différences de valeurs peuvent passer inapercues si elles s’annulent entre elles

Question 12

Fiabilité du test-retest : coefficient Kappa ?

Answer 12

Concordance entre le test et le retest lorsque les mesures sont faites sur une échelle nominale (kappa) ou ordinale (kappa pondéré)
K < 0.4 : concordance faible
0.4 - 0.6 : concordance modérée
0.61 - 0.8 : concordance élevée
K > 0.8 : concordance presque parfaite
TEST ADÉQUAT car tient compte du hasard (car proportion observée et attendue)

Question 13

Qu’est-ce que la cohérence interitems ?

Answer 13

Corrélation entre les différents items d’un test mesurant le même domaine

Question 14

Quels sont les 2 tests statistiques pour la cohérence interitems ?

Answer 14

1. Formule de Kruder-Richardson : moyenne des coefficients de bissection, s’applique à des variables catégoriques
2. Coefficient alpha de Cronbach : moyenne des coefficients de bissection, s’applique à des variables continues
   Bissection = questionnaire séparé en deux parties puis évaluation de la corrélation entre les résultats de chacune des parties

Question 15

Qu’est-ce que la fiabilité intercorrecteurs ?

Answer 15

Concordance entre les mesures obtenues par différents évaluateurs

Question 16

Quels sont les 2 tests statistiques pour la fiabilité intercorrecteurs ?

Answer 16

1. Coefficient kappa (variables catégoriques)
2. Coefficient intraclasse (variables continues)

Question 17

Vrai ou faux ? Moins un test est fiable, plus le nombre de sujets requis pour détecter une différence statistiquement significative est élevé

Answer 17

Vrai

Question 18

Qu’est-ce que la validité ?

Answer 18

Capacité d’un test à mesurer ce qu’il est censé mesurer = EXACTITUDE

Question 19

Quels sont les 3 types de validité ?

Answer 19

1. Validité de contenu
2. Validité de critère
3. Validité conceptuelle

Question 20

Qu’est-ce que la validité de contenu ?

Answer 20

Tous les aspects importants d’un domaine sont mesurés et les items sont formulés correctement

Question 21

Qu’est-ce que la validité de critère ?

Answer 21

Administration du test et du test étalon (gold standard) en même temps (validité concourante) ou à un intervalle différent (validité prédictive) afin de déterminer si le test peut prédire les résultats du test étalon

Question 22

Quels sont les 7 tests statistiques pour la validité de critère ?

Answer 22

Variables continues : coefficient intraclasse, modèle multivarié
Variables catégoriques : sensibilité, spécificité, VPP, VPN, courbe ROC

Question 23

Différencier la sensibilité, la spécificité, la valeur prédictive positive et la valeur prédictive négative.

Answer 23

Sensibilité = probabilité d’identifier correctement les personnes malades = VP / (VP + FN)
Spécificité = probabilité d’identifier correctement les personnes non malades = VN / (VN + FP)
VPP = probabilité qu’une personne ayant un test positif ait la maladie = VP / (VP + FP)
VPN = probabilité qu’une personne ayant un test négatif n’ait pas la maladie = VN / (VN + FN)

Question 24

Quelle est la relation entre la sensibilité et la spécificité ?

Answer 24

Si la spécificité augmente alors la sensibilité diminue
Courbe ROC = sensibilité vs 1 - spécificité
Sensibilité > spécificité pour des maladies sérieuses
Spécificité > sensibilité pour le dépistage de facteurs de risque

Question 25

Que se passe-t-il lorsque la prévalence de la maladie augmente ?

Answer 25

VPP augmente
VPN diminue
Sensibilité et spécificité constantes

Question 26

Qu’est-ce que la validité conceptuelle ?

Answer 26

Capacité d’un test de mesurer le concept qu’il est censé mesurer
Validité convergente = le test produit des résultats similaires à ceux d’un autre test mesurant un concept similaire
Validité discriminante = le test produit des résultats différents de ceux d’un autre test mesurant un concept différent

Question 27

Qu’est-ce que la responsiveness ?

Answer 27

Capacité de détecter des changements dans le temps même si ces changements sont de faible ampleur
Devis expérimental : étude prospective mesurant l’évolution des patients durant une période de changement (ex : pré et post Tx) ou étude prospective comparative (ex : 2 groupes)

Question 28

Comment peut-on améliorer la responsiveness ?

Answer 28

1. Augmenter le nombre de catégories de réponses
2. Présenter les réponses antérieures
3. Utiliser une question de transition