Examen théorique démarche Flashcards
Standardisation?
Uniformisation de la passation des instruments de mesure / prise de mesure:
- Permet que tous thérapeutes dans tous milieux prennent mesure de la même façon
- Améliore reproductibilité (fidélité) et favorise validité de la mesure
Instruments de mesure standardisés?
Tests / instruments normés qui permettent de poser une jugement par rapport à la distribution de la mesure dans une population de référence
Tests critériés?
- Test / intruments avec critères déterminés
- Permettent de poser un jugement par rapport à certains niveaux de performance
Tests ipsastifs?
Comparaison avant-après chez le même client
Observation non structurée?
- Flexible (ex. va voir routine du matin à domicile)
- Permet une approche écologique de l’évaluation
Observation structurée?
- Offre souvent une grille, parfois échelles de cotation
- Permet d’orienter l’observation vers des composantes plus spécifiques
- Offre un meilleur potentiel de reproductibilité et de comparaison (points d’observation constant, base solide qui permet au débutant de savoir quoi regarder)
Mise en situation en contexte réel ou simulé?
- Biais d’observation (pas complet)
- Validité écologique de la mesure varie selon le contexte observé
- Doit identifier environnement et préciser activité
Observation directe?
- Mesure de divers paramètres, souvent observables donc physiologiques, à l’aide d’appareils (souvent très standardisés)
- Peut être un « proxy » (mesure associée à une autre autrement non objectivante (stress, douleur)
Échelle nominale?
- Échelle qui utilise des nombres (ou non) pour classer des objets dans une catégorie donnée
- Valeurs de l’échelle indiquent seulement la catégorie d’appartenance et n’ont aucune valeur quantitative
- Les chiffres sont simplement des étiquettes
- Échelle qui comporte des catégories dont les valeurs ne représentent pas un ordre particulier (imp) (ex: étudiant à temps plein, étudiant à temps libre)
Avantages échelle nominale?
- Limite possibilités de choix de réponse
- Permet de catégoriser sujets mais pas de les classer ou les ordonner
Inconvénients échelle nominale?
- Ne permet pas de faire des opérations mathématiques
- Permet de faire un calcul de fréquence
Caractéristiques d’une bonne échelle de mesure?
- Classes mutuellement exclusives: chaque observation ne peut appartenir qu’à une seule classe
- Classes collectivement exhaustives: chaque observation possible doit appartenir à une classe
Échelle de mesure ordinale?
- Échelle dont les divers choix sont ordonnés ou supérieurs les uns aux autres
- Identifié ou non par un chiffre: ce chiffre représente le rang et non la quantité
- Exemples: niveau de satisfaction, autonomie, bilan musculaire, degré d’une brûlure
- Différence entre 2 catégories peut varier (5 vs 4 au bilan musculaire n’est pas 2x + grand)
Avantages échelle de mesure ordinale?
- Limite possibilités de choix de réponse
- Permet de catégoriser sujets mais pas de les classer ou les ordonner
Inconvénients échelle de mesure ordinale?
- Ne permet pas de faire des opérations mathématiques (catégories ne représentent valeur de la réponse)
- Permet de faire un calcul de fréquence
Analyse statistique de l’échelle de mesure ordinale?
- Analyse Rasch - Item response theory (IRT) permet de compenser et de calibrer:
- Items entre eux
- Valeurs accordées à chacune des cotes
- Évaluateurs
- Renter infos dans système + score qu’on donnerait = score IRT (qu’on peut additionner)
Échelle par intervalles?
- Échelle comportant des chiffres qui ont une valeur numérique et qui sont séparés par des intervalles égaux (aussi appelée échelle numérique)
- Valeurs sont continues, mais le 0 ne représente pas l’absence de l’attribut
Avantages échelle par intervalles?
- Plus précis et permet un ordonnancement par rang plus fin
- Possibilités de calculs mathématiques (addition, moyenne) puisque données sont vraies valeurs
Inconvénients échelle par intervalles?
- Pas de calcul de ratio possible (pas de % car 2/0 = 0_
Type d’échelle de mesure proportionnelle ou avec ratio?
- Même chose qu’une échelle par intervalles, mais 0 ne représente pas l’absence de quantité
- Toutes opérations mathématiques possibles
- Exemples: poids, AA, degré, force
Type d’échelle composite?
- Utilisée lorsque attribut est déterminé par 2 ou plusieurs variables ou une formule
- Exemple: stade d’une maladie, indice de sévérité, hypertension artérielle
Le choix d’un outil dépend de quoi?
- Qualités métrologiques (psychométriques)
- Qualités pragmatiques (compatibilité avec milieu de pratique, fardeau)
Qualités métrologiques?
- Ensemble des caractéristiques qui fera qu’un instrument de mesure effectuera les mesures avec la qualité correspondant aux attentes de l’utilisateur
- À quel point outil bon, constant et mesure ce que je veux mesurer
- Validité
- Fidélité (fiabilité)
- Sensibilité
Types de fidélité?
- Intra évaluateur
- Interévaluateur
- Cohérence interne
Erreur liée à la mesure et types?
- Écart entre mesure réelle et celle qui est obtenue à l’aie d’un instrument de mesure
- Erreur aléatoire et erreur systématique
Erreur aléatoire?
- Liée au client (différence de performance ex. fatigue)
- Liée à l’évaluateur (ex. + gentil avec un vs autre)
- Liée aux conditions d’évaluation (exam SAAQ tempête)
- Aléatoire, donc ne peut pas être corrigée ensuite (peut pas chiffrer l’erreur mais en tient compte)
Erreur systématique?
- Apprentissage (niveau 1 vs 45 candy crush)
- Biais (conformité sociale)
- Calibration (balance + 1 kg)
- Systématique, donc peut être corrigée post-hoc
Fidélité?
- Réfère au caractère fiable, reproductible, prévisible de l’instrument, mais aussi à la précision et à la constante des mesures obtenues
- Aussi appelée reproductibilité, stabilité, concordance, fiabilité
- Dépend de l’absence d’erreur aléatoire et systématique
Fidélité intra-évaluateur?
- Aussi appelée fidélité intra-juge ou test-retest
- Même instrument utilisé de façon répétée par même personne donne même mesure?
- Stabilité de l’outil, constance des résultats dans le temps
- Important quand veut mesurer effets d’une intervention (avant/après), vrai amélioration ou juste liée à erreur?
Fidélité intra-évaluateur méthode?
- Répéter une mesure chez les mêmes sujets, avec même instrument et dans même conditions pour mesurer stabilité dans temps
- Coefficient de corrélation mesure fidélité
- Période de temps est critique
- Trop court: effet de l’apprentissage et de la mémoire
- Trop long: effet lié au changement
- Pour augmenter fidélité, répéter mesures et suivre procédure standardisée
Fidélité inter-évaluateur?
- Est-ce que même instrument utilisé par différents thérapeutes donne même mesure?
- Important si on veut se comparer à d’autres
- Influencée par formation des utilisateurs / standardisation des conditions de passation
Comment estimer fiabilité?
- Pour échelle à intervalles ou ratio: coefficient de corrélation intraclasse (ICC)
- Pour échelle ordinale ou nominale: coefficient kappa (k) ou coefficient kappa pondéré (kw)
Intervalles numérique et interprétation?
- 0,00 à 0,39: pauvre fidélité
- 0,40 à 0,74: fidélité adéquate
- 0,75 à 1,00: excellente fidélité
Qu’est-ce que la cohérence interne?
- Accord des éléments d’une mesure entre eux
- Si instrument unidimensionnel, scores devraient être reliés entre eux
- Items seront corrélés au score total
-Homogénéité entre composantes - Chaque item permet de différencier les sujets de la même façon que score global
- permet d’explorer comment tous les items mesurent bien la même variable
Avec quoi est mesuré généralement la cohérence interne?
- Avec un alpha de Cronbach
- 0,6 à 0,7 est limite inférieure de l’acceptabilité
- 0,71 à 0,8: respectable
- 0,81 à 0,9: très bon
- 0,91 à 1: excellent
Lien entre fiabilité et validité?
- Fiabilité nécessaire mais insuffisante pour affirmer qu’il y a validité
- Si pas de reproductibilité, il ne peut pas refléter adéquatement ce qu’il mesure
Comment améliorer fidélité?
- Définir variables opérationnelles
- Standardiser procédures, clarifier consignes
- Entraîner les évaluateurs
Types de validité?
- Apparente
- De contenu
- De critère (concomitante ou prédictive)
- De construit
Qu’est ce que la validité?
- L’utilité clinique d’un instrument dépend de sa validité
- Instrument démontré valide lorsqu’il mesure vraiment ce qu’il prétend mesurer
- Toujours relatives à un contexte ou à une population
- Important de se demander si valide auprès d’un individu en particulier
Qu’est ce que la validité apparente?
- Instrument de mesure semble (« à vue de nez ») mesurer ce qu’il doit mesurer?
- Appréciation par des pairs (experts cliniques)
- Aucune statistiques ou appui théorique fort degré + faible de validité
- Important dans premiers stades de développement d’un instrument de mesure ou adoption
Validité de contenu?
- Dans quelle mesure les éléments séléctionnés représentent bien toutes les facettes importantes du concept à mesurer (items choisi mesurent bien sujet traité? tous éléments couverts? représentatifs?)
- Souvent établie par consultation de groupe d’experts
- Content validity index (CVI > 80%)
Validité de critère?
- On compare notre instrument avec un critère
- On vérifie corrélation entre mesure qu’on souhaite vérifier et ce critère
- Mesure étalon (validité concomitante)
- Critère futur (ex: chute, hospitalisation, décès est validité prédictive)
Validité concomitante?
- On veut regarder corrélation entre mesure reconnue et notre mesure
- Version courte d’un test
- Dépistage vs test exhaustif
- Nouvelle forme de mesure (ex: autorapportée)