Cours 7 - Psychométrie (partie 2 et 3) Flashcards
nomme 3 propriétés psychométriques des instruments de mesure (on veut les retrouver dans les outils!!!)
- validité
- fiabilité
- sensibilité au changement
qu’est-ce que sont les propriétés psychométriques des instruments de mesure
caractéristiques quantifiables d’un instrument de mesure qui reflètent sa précision et sa cohérence
comment le thérapeutes choisissent meilleur instrument de mesure pour leur pt
en fct des propriétés psychométriques des instruments
pq on mesure?
principe 1 OPPQ : efficacité de la prise en charge devrait être démontrée objectivement
autres :
1. mesurer de façon standardisée
2. guider la prise de décision
3. évaluer l’évolution
4. déterminer la normalité
ÉVALUER LES PHÉNOMÈNES AVEC LE DEGRÉ DE PRÉCISION LE + ÉLEVÉ POSSIBLE
caractéristiques qu’on cherche dans un instrument de mesure
- propriétés psychométriques : fidèle, valide et sensible au changement
- lié aux objectifs fonctionnels de la prise en charge et significatifs pour le travailleur
- basés sur les composantes de structure, de fonction, d’activité et de participation
- spécifiques à l’atteinte du travailleur
propriétés psychométriques permettent d’éviter quel biais lié à la VI des études
biais de mesure
construit
ce que l’on souhaite mesurer
mesure
comment on mesure le construit
synonymes de mesure
outil ou instrument
nomme 4 objectifs de mesure
- dépistage
- diagnostic
- pronostic
- mesure de résultat
à quoi servent mesures de dépistage
visent à estimer la probabilité qu’une personne en bonne santé développe une condition et à déterminer s’il convient de poursuivre les investigations
ex. mammographie (mesure dépistage) VS biopsie (mesure diagnostic)
à quoi servent les mesures diagnostiques
conçues pour déterminer si une personne souffre ou non d’une certaine affection (ex. test de Lachman pour la rupture du LCA)
à quoi servent les mesures pronostiques
conçues pour aider à prédire si ou quand un patient va atteindre un résultat clinique déterminé
à quoi servent les mesures de résultats (Outcomes)
conçues pour suivre le niveau ou la présence d’un sx, d’une fct ou d’un marqueur de maladie
** certaines mesures peuvent servir à plrs fins
quelles sont les 2 méthodes de mesure
- mesures rapportées par le patient (questionnaire ou réponse à des questions oralement)
- mesures évaluées par les observateurs (impliquent observations du clinicien)
laquelle des méthodes de mesure est + subjective
mesure rapporte par pt n’est ø + subjective qu’une mesure réalisée par le tx dans le contexte d’outils (mesure) avec de bonnes propriétés psychométriques !!
que faut-il considérer pour que les mesures de résultat soient cliniquement significatives
faut considérer la pertinence de cette mesure pour le patient!
types de données : nomme 3 types de variables
- continue
- catégorique
- dichotomique
chaque type de variable a…
ses propres tests statistiques
type de données : variable continue
score peut prendre toutes les valeurs au sein d’un continuum, nombre reflètent une valeur RÉELLE
ex. amplitude articulaire, force en kg, score à un questionnaire
type de données : variable catégorique
nominales : permet de classer les individus dans des groupes (ex. groupes sanguins)
ordinales : valeur numérique qui reflète + une catégorie qu’une quantité (ex. bilan musculaire)
type de données : variable dichotomique
variable discrète à 2 catégories
ex. présence du diagnostic : oui/non
échelle de Likert
variable ordinée transformée en variable continue
nomme 2 types de mesure (interprétation de la mesure)
- mesure basée sur une norme
- mesure basée sur un critère
mesure basée sur une norme
on compare le score d’un individu à celui d’autres individus (ex. percentiles)
mesure basée sur un critère
on compare l’individu à une valeur standard établie par des experts
ex. Functional Independence Measure : critère pour chaque item = être indépendant
comment choisir le bon outil parmi ceux disponibles
en fonction de ses propriétés psychométriques
fiabilité
à quel point une mesure est exempte d’erreur aléatoire (vrai valeur! sans aucune erreur)
qu’est-ce que va nous donner un test fiable
la même mesure quand il sera utilisé pour évaluer le même construit plusieurs fois
comment faire pour gagner de la fiabilité?
standardisation de la procédure
- permet d’avoir les mêmes conditions d’application de la mesure
- information sur l’environnement
- information sur l’utilisation de l’instrument
- information sur les instructions (ex. verbatims)
- information sur le calcul et l’interprétation du score
en quoi la fiabilité est-elle importante?
- si un test diagnostic peu fiable est appliqué à un patient :
- peut être positif comme négatif (voir varier d’une séance à l’autre)
- aura impact sur mon raisonnement clinique et ma prise de décision thérapeutique - si une mesure peu fiable de la gravité des sx était recueillie auprès d’un pt avant et après intervention, serait alors impossible de dire si ce sx s’est amélioré, resté idem ou aggravé
que m’apporte les données collectées avec un instrument de mesure non fiable?
AUCUNE INFO UTILE
nomme les 4 types de fiabilités
- inter évaluateurs
- intra-évaluateurs
- test-retest
- cohérence interne
procédure fiabilité inter-évaluateurs
- plusieurs professionnels évaluent les mêmes patients
- évaluations sont réalisées en même temps
*même séance de mesure, différents évaluateurs
objectif de la fiabilité inter-évaluateur
déterminer si plusieurs évaluateurs trouvent le même résultat chez les mêmes patients
procédure fiabilité intra-évaluateur
le même professionnel va évaluer plusieurs fois les mêmes participants
*même séance de mesure, même évaluateur
objectif de la fiabilité intra-évaluateur
déterminer si le même professionnel obtient le même résultat
procédure fiabilité test-retest
même procédure que pour la fiabilité intra-évaluateur (même professionnel va évaluer plusieurs fois les mêmes participants)
- différente séance de mesure, même évaluateur
objectif fiabilité test-retest
déterminer la stabilité du test (ex. test de personnalité)
type de fiabilité : cohérence interne
unité ou similarité des items d’un instrument de mesure
quand est-ce que cohérence interne est pertinente (type de fiabilité)
- quand plusieurs items mesurent le même construit
- quand la mesure comprend plusieurs sous-échelles
** doit être bonne pour les items d’une même sous-échelle et doit montrer une différence entre les items de différentes sous-échelles
valeur IDÉALE de fiabilité inter-évaluateur
ICC ou kappa =1 signifie que l’ensemble des évaluateurs ou le même évaluateur ont/a obtenu les mêmes résultats
indices de fiabilité inter et intra-évaluateur
kappa : valeurs ordinées
ICC : valeurs continues
fiabilité inter et intra évaluateur : indice kappa
fiabilité inter et intra évaluateur : indice ICC
validité
capacité qu’a la mesure à refléter réellement le construit d’intérêt
réfère à l’habileté d’un test de mesurer ce qu’il est censé mesurer !!
si un test sur les obstacles au retour au travail ne nous donne pas d’info sur les comportements douloureux… alors le test est
VALIDE
en quoi la validité est importante?
difficile de savoir si l’on mesure correctement des construits “cachés” comme la qualité de vie, l’incapacité, la douleur, etc.
validité de construit
s’assure que l’instrument mesure vraiment le ou les construits d’intérêt et qu’il en offre une mesure adéquate
méthode idéale pour évaluer validité de construit
comparer l’instrument à un gold standard
qu’est-ce qu’un gold standard (évaluation validité de construit)
Test de référence
- meilleur test disponible à un moment donné pour établir la validité d’un fait
On va donc comparer le test au résultat obtenu avec le test de référence
que faire quand il n’y a pas de gold standard pour un construit
on utilise une norme de référence (reference standard) qui est un gold standard imparfait.
on va tester la validité via un test d’hypothèse pour déterminer des associations entre la mesure et certaines caractéristiques : si les données sont cohérentes avec les hypothèses prédéterminées, on obtiendra des preuves de la validité de la mesure
nomme 5 différents types de validité qui contribue à la validité de construit globale d’un instrument de mesure
- validité concurrente
- validité convergente
- validité divergente
- validité discriminative
- validité prédictive
validité convergente
association avec des instruments qui mesurent le même construit
–>existe-t-il une association forte entre l’instrument développé et un autre instrument faisant office de norme de référence?
validité divergente
association avec des instruments qui mesurent des construits non associés
–>existe-t-il une association entre l’instrument développé et des instruments qui évaluent d’autres construits non associés?
validité concourante/concurrente
l’instrument développé est-il capable de prédire le résultat d’un autre instrument qui mesure le même construit?
version courte d’un questionnaire plus long est élaboré à partir de quel type de validité
concourante
validité discriminante
l’instrument développé est-il capable de discriminer ceux qui présentent le construit d’intérêt et ceux qui ne le présentent pas?
ex. test de dépression de Beck : peut-il distinguer patient qui souffre de dépression de ceux qui sont en deuil (pas les mêmes construits soutiennent chacun)
validité prédictive
l’instrument développé est-il capable de prédire un événement futur dans une direction cohérente avec le construit?
valeurs en lien avec la validité prédictive
- Sp et Se
- VPP et VPN
- Likelihood ratio
que permet accumulation des preuves concernant les 5 types de validité
renforcer (ou non) validité de construit de l’instrument développé
décris validité et fiabilité de chaque cible
sensibilité
capacité d’un test à détecter si la condition est présente
combien parmi les malades, combien ont testé +
quand est utile la sensibilité?
si le test est négatif : exclusion de la condition
sensibilité élevée = je vais attraper tous les malades : donc si le test est négatif, je sais que tu es vrm PAS malade
spécificité
capacité d’un test à éviter de détecter la condition quand elle n’existe pas
parmi les non malade, combien ont testé négatif
quand est utile la spécificité?
si le test est positif : confirmation de la condition
comment avoir proportion de faux positif et de faux négatifs
faux positifs : 100% - Spécificité
faux négatifs : 100% - Sensibilité
VPP
probabilité que la condition soit présente si le test est +
taux de vrais positifs parmi tous ceux qui ont testé positif
VPN
probabilité que la condition ne soit pas présente si le test est négatif
taux de vrais négatifs parmi tous ceux qui ont testé négatif
de quoi dépendent VPP et VPN
prévalence de la condition dans la population
ex. si maladie très rare (donc prévalence faible), alors la probabilité que la condition soit absente si le test est négatif est plus élevée!! (et vice versa) // si prévalence très élevée, le VPN diminue (donc probabilité que condition soit absente si test est négatif est moins élevée
rapport de vraisemblance (RV) ou Likelihood ratio (LR)
estiment le rapport entre la probabilité d’avoir un test positif (ou négatif) chez les sujets malades et celle d’avoir un test positif (ou négatif) chez les sujets sains
LR+ ou RV+
quantifie le gain diagnostique d’un test positif : un individu malade a LR+ fois plus de chance d’avoir un test positif qu’un individu sain
interprétation des LR+ et LR- par coeur
sensibilité au changement
dans le cadre d’une mesure pour déterminer la progression d’un patient : important que la mesure puisse détecter ce changement
** la vérifier si on souhaite utiliser un outil dans un but de suivi
sensibilité au changement : effet plancher
test trop difficile ou construit trop rare donc la plupart des patients auront un score très bas
sensibilité au changement : effet plafond
test trop facile donc tous les patients auront score élevé
sensibilité au changement : MCD (minimal detectable change), MCID (Minimal Clinically Important difference)
MCD= + petite différence détectable par l’instrument et qui permet de dire qu’il y a un changement (amélioration réelle non due à une erreur de mesure)
MCID : est le plus petit changement considéré comme cliniquement significatif pour un patient ou un groupe (déf du MCIC…)
MCD de Rolland Morris
4
