Qualité d'un instrument de mesure Flashcards
Questionnaire validé
avantages (3)
- économie tenps et $
- permet de comparer nos résultats avec ceux obtenus dans d’autres pop. à d’autres moments
- Crédibilté
Questionnaire validé
Désavantages (3)
- +/- adapté à notre étude
- évaluation des propriétés psychométriques est incomplète ou +/- pertinente pr notre étude
- aspects pratiques ne conviennent pas
Documenter les 3 propriétés psychométriques
- fiabilité : résultats précis ?
- validité : résultats justes ? test mesure bien ce qu’il est censé mesurer ?
- Responsiveness : est-ce que le test peut détecter des changements ds le temps associés à la progression de la maladie ou à une intervention/tx
Définition
FIABILITÉ (3)
PRÉCISION
- capacité de mesurer un objet/concept de façon reproductible et logique
- indique ds quelle mesure les résultats obtenus sont précis
- un nstrument est précis/fiable, plus il produit de scores similaires lorsque les mesures sont répétées dans des conditions similaires aux mm sujets
3 types de fiabilité
- test-retest
- cohérece interitems
- fiabilité intercorrecteurs
Fiabilité test-retest
définition
Habileté d’un test à reproduire les mêmes résultats lorsque réadministré, ds des conditions similaires aux mêmes sujets
Fiabilité du test-retest
devis expérimental (2)
- intervalle entre test et retest : trop court : surestimation mémoire; intervalle long : ce qu’on mesure peut avoir changé
- conditions d’admin : environnement, consignes et limite de temps
Fiabilité du test-retest
tests statistiques (4)
- coefficient de corrélation Pearson
- Coefficient de corrélation intraclasse
- différence moyenne entre test et retest
- coeffiencet de concordance : kappa
Pearson (3)
1= correspondance parfaite
0 = pas de correspondance
trash
- ne détecte pas les différences systématques entre le test-retest
- dépend de la variabilité ou étendue des résultats
- pour des mesures obtenues sur une échelle d’intervalle ou de ratio
erreur systématique exemple : test#1 et test#2 ou tout le monde a augmenté de 20% => dans les 2 cas, r=1.
plus on a de pts, plus on a de chances d’avoir une corrélation qui suit la moyenne
CIC
définition
sensible à ?
indique la proportion de la variance totale qui est attribuable à des différences réelles entre les répondants
… à la variabilité/étendue des résultats
CIC calcul
= Variance entre les participants / variance totale = vraie variance / variance totale
variance totale : variance entre répondants + variance entre test/retest + variance due aux erreurs de mesures
vraie variance = variance entre les répondants
CIC résultats
cic =1 : 100% de la variance est attribuable à des différences réelles , 0 erreur de mesure, précision parfaite
cic = 0 , 0 % de la variance est attribuable à des différences réelles
Quelle situation il n’y a pas de différence systématique entre test/retest ?
qd pearson et cic son équivalents
Interprétation du CIC
> =0.7 : utilisation au niveau des groupes : (comparer 2 grps)
> =0.9 : utilisation au niveau individuel :
(échelle mesure de douleur pr décider si on augmente la dose d’analgésie)
Fiabilité du test-retest
comparaison des scores moyens
définition
trash
si aucune différence entre score moyen obtenu au test et au retest => test est fiable
problème : grandes différences entre résultats peuvent être inaperçues si sont dans le sens inverse
Fiabilité
Coefficient KAPPA
définition
Indique le degré de correspondance entre le testretest lorsque les mesures sont faites sur
kappa : échelle nominale
kappa pondérée : échelle ordinale à plus de 2 niveaux
coefficient kappa:
calcul
K = (prop.obs-prop. attendue) / (1-prop.attendue)
Interprétation kappa
<0.4 : concordance faible
- 4-0.6 : concordance modérée
- 61-0.8 : concordance élevée
> 0.8 : concordance très élevée : presque parfaite
2e type de fiabilité :
Cohérence interitems
définition
homogénéité des items ou le degré de corrélation entre les différents items d’un test mesurant le mm domaine
le test doit être formé de plusieurs items qui mesurent un mm concept
plus la corrélation entre les items sera grande plus la fiabilité sera élevée
Cohérence interitems
Devis expérimental
administre le test à un grp de participants à une seule occasion