Cours 17- Les instruments de mesure et d'évaluation Flashcards

1
Q

Qu’est-ce que l’évaluation?

Quels pourraient être les objectifs de l’évaluation? (4)

A

Processus à travers lequel on utilise des
tests/instruments,soit des informations objectives et aussi subjectives (ex.:entrevues,…) afin de porter un
jugement clinique.« Processus d’évaluation ».

a) identifier les besoins (forces et lim pr avoir image juste de sa condition)
b) « prédire »le potentiel de récupération
c) évaluer l’effet/progression de l’intervention
d) recherche (collecter données objectives pr avoir données probantes)

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
2
Q

Qu’est-ce que le PROCESSUS d’évaluation?

Quel ê le but du processus d’évaluation?

A

cueillette infos objective & subjective pr mieux comprendre mon client ou la problématique de recherche.

Organiser l’information pertinente (client)thérapeute
puisse planifier intervention.

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
3
Q

Nomme quelques types d’évaluation (6)

A
  • test de dépistage
  • évaluation globale (éval où on veut le profil général du patient) versus évaluation spécifique (ex: sa force musculaire)
  • évaluation initiale
  • réévaluation
  • évaluation périodique (un peu mm chose que rééval)
  • évaluation finale
How well did you know this?
1
Not at all
2
3
4
5
Perfectly
4
Q

Nomme diverse méthodes d’évaluation (3)

A

1- l’entrevue

a) structurée (ex: questionnaire avec choix de rép)
b) semi‐ structurée (questionnaire avec rép ouvertes)
c) non structurée (on a un guide, mais sans questions nécessairement)

2- l’observation (a,b,c comme entrevue)

3- mise en situation: réelle ou simulée

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
5
Q

LES INSTRUMENTS DE MESURE/TESTS: Définis ce qu’est la mesure

A

La mesure = Le test = instrument de mesure

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
6
Q

LES INSTRUMENTS DE MESURE/TESTS: Que vise la mesure? (2)

LES INSTRUMENTS DE MESURE/TESTS: pourquoi utiliser la mesure? (4)

A
  1. Construit– {opérationnaliser}–>comportements observables:
    * J’ai qqch d’abstrait que je vx rendre + concret. Ex: Test d’intelligence. Cmt je mesure l’intelligence? (abstrait –> concret. Opérationnalisation= dans l’exemple: dév un instrument d’éval pr “mesurer” l’intelligence.
  2. Donner une valeur quantitative à un ensemble de comportements recueillis en utilisant un test. 1986).Cette assignation de nombres doit se faire selon des règles clairement préétablies
  • comprendre, faire le lien entre les connaissances et les observations cliniques.(Théorie (données probantes) –> empirisme (observation))
  • structurer l’information
  • mieux saisir une problématique
  • interpréter en fonction des résultats au test et des fondements théoriques.
How well did you know this?
1
Not at all
2
3
4
5
Perfectly
7
Q

UTILITÉ DES INSTRUMENTS DE MESURE/ D’ÉVALUATION (suite…) Décris en quelques mots ce qui se passe avec les instruments de mesure/ pk les utiliser.

A

Quantifier —>Objectiver

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
8
Q

À quoi faut-il faire attention avec les instruments de mesure?

A

• N’est pas une fin en soi
• *Dangers
Usage à d’autres fins, Modifier l’instrument

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
9
Q

Nomme les 4 échelles de cotation.

A

ÉCHELLES DE COTATION

  1. Échelle nominale
  2. Échelle ordinale
  3. Échelle par intervalle
  4. Échelle par ratio
How well did you know this?
1
Not at all
2
3
4
5
Perfectly
10
Q

Qu’est-ce qu’une échelle nominale?

A

Échelle nominale
- « L ‘échelle nominale comprend des valeurs numériques utilisées strictement pour étiqueter des éléments et ne tiennent pas compte d’un ordre,de distances égales entre les unités,ou d’une origine fixe »

  • Ils ‘agit d’indiquer si des objets sont équivalents ou différents
  • Ex: joueur 1, joueur 9, les # permettent seulement d’identifier les joueurs.
How well did you know this?
1
Not at all
2
3
4
5
Perfectly
11
Q

Donne un exemple d’échelle nominale.

A

Ex.:0= masculin et 1= féminin

  • la forme la plus rudimentaire.
  • des nombres sont assignés à des fins de distinction, de classification, de catégorisation.
  • les nombres ne correspondent pas à des valeurs numériques significatives.
How well did you know this?
1
Not at all
2
3
4
5
Perfectly
12
Q

Qu’est-ce qu’une échelle ordinale?

A
  • ” Une échelle de mesure qui permet d’ordonner les sujets par rapport à une variable. La différence entre les rangs n’est pas égale”
  • Les valeurs numériques les plus élevées sont attribuées aux individus qui présentent le plus la caractéristique mesurée.
How well did you know this?
1
Not at all
2
3
4
5
Perfectly
13
Q

Donne un exemple d’échelle ordinale.

A

Ex.:Placer des gens selon leur taille(grandeur)
allant du plus petit individu au plus grand;
Échelle de Likert
- elle est la plus fréquemment rencontrée.
- Tout comme la précédente échelle,elle permet de distinguer des éléments; cependant,elle indique un ordre de grandeur(>,

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
14
Q

Qu”est-ce que l’échelle par intervalle?

A
  • « Une échelle de mesure qui décrit des variables de façon à ce que la distance entre deux unités de mesure (intervalle)soit la même,sans avoir de 0 significatif »
  • Cette échelle indique aussi des rangs mais la distance entre les nombres est significative selon les caractéristiques mesurées.
How well did you know this?
1
Not at all
2
3
4
5
Perfectly
15
Q

Donne un exemple d’échelle par intervalle.

A

Ex.:La mesure de la température en Celsius.0° C ne représente pas une absence de la caractéristique.
- les nombres assignés sont ordonnés comme dans l’échelle ordinale.
- la distance entre chacun des rangs est
constante.
- les nombres représentent la distance effective entre chacun des niveaux.
- le zéro n’est pas significatif

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
16
Q

Qu’est-ce que l’échelle par ratio?

A
  • « L’échelle de ratio est une échelle par intervalle avec un zéro”réel” plutôt qu’un zéro arbitraire »
  • Cette échelle présente un zéro absolu.
How well did you know this?
1
Not at all
2
3
4
5
Perfectly
17
Q

Donne un exemple d’échelle par ratio.

A

Ex.: le poids en livres ou kilogrammes
- mêmes caractéristiques que l’échelle par intervalle sauf que le zéro est significatif, i.e. qu’il indique une
absence de la caractéristique mesurée.

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
18
Q

Qu’est-ce que les qualités métrologiques?

A
  • Techniques et principes reliés à la Mesure

- Fidélité et validité

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
19
Q

x= T+e, quelle sont les variables dans cette équation?

A
T: valeur réelle
e: error (vient contaminer le résultats)
x: score observé
ex: Poids de la pers sur balance (x), ce serait la mesure noté. 
x= valeur réelle + marge d'erreur
Fidélité --> erreur la + petite possible
How well did you know this?
1
Not at all
2
3
4
5
Perfectly
20
Q

Qu’est-ce que la fidélité/ fiabilité?

A
  • Erreur aléatoire
  • « Étendue à laquelle une expérience, un test une procédure de mesure tend à donner les même résultats lors d’essais répétés »
  • Focus: indicateurs empiriques (constance lors de mesures répétées)
How well did you know this?
1
Not at all
2
3
4
5
Perfectly
21
Q

Quels sont les 3 types de fidélités?

A
  • inter‐ examinateurs
  • test‐ retest
  • consistance interne
22
Q

Qu’est-ce que la fidélité de type inter-examinateur?

A

Degré de concordance entre 2 ou+examinateurs lors de la passation d’un test pour un même sujet dans des conditions identiques

23
Q

Qu’est-ce que la fidélité de type test-retest?

A

Concordance obtenue entre les scores de 2 passations d’un même test, séparées par un délai, par une même personne (même évaluateur)

24
Q

Qu’est-ce que la fidélité de type consistance interne?

A
  • Estimation de la fidélité basée sur la corrélation moyenne entre les items d’un test (en considérant le nombre d’items)
  • homogénéité du test
25
Y-a-t-il des coefficient pour évaluer la validité et la fidélité? si oui, lesquels?
Validité: Ø coefficient (exception) ‐ Fidélité: coefficient entre 0 et+1 exception: kappa (‐ 1 et +1) --> fidélité, près de 0: fidélité pas bonne. + le coefficient est près de 1: dim l'erreur aléatoire, meilleur fidélité.
26
Dans le coefficient de fidélité, que signifie une proximité à 0? à 1?
+ proche de 0: résultat pas précis (p-t dû au hasard?) j'évalue pas seulement un seul construit. + proche de 1: j'évalue un seul construit.
27
Sur quelles variables peut-il y avoir des biais lorsque j'évalue la fidélité? (5)
Biais possibles 1. participant (motivation, anxiété,...) (biais liés à mon participant) 2. caractéristique étudiée 3. instrument de mesure 4. personne qui recueille l'information 5. conditions de passation
28
Nomme quelques moyens pour améliorer la fidélité. (6)
Moyens d'améliorer la fidélité 1. définir les variables. 2. valider les instruments, les procédures; clarifier les consignes et échelles de cotation. 3. fournir un entraînement aux évaluateurs. 4. s'assurer de la stabilité des évaluateurs. 5. vérifier régulièrement les instruments de mesure (ex.:calibrer le pèse personne). 6. utiliser la moyenne de plusieurs mesures (ex.: données au pèse‐ personne)
29
Qu'est-ce que la validité? (4)
- démarche théorique, de réflexion - x=T+e - Processus par lequel on recueille des évidences pour supporter les inférences supposées se confirmer par les scores à un test - Intérêt: concept ----- indicateurs
30
Nomme quelques types de validité. (5)
1. validité apparente 2. validité de contenu 3. validité de critère 4. validité de construit 5. validation transculturelle
31
Qu'est-ce que la validité apparente?
- « Évidence» (apparence) que les items semblent mesurer un construit - Est‐ ce que l'instrument semble mesurer ce qu'il est supposé mesurer? *pas très utile. Il n'y a pas de démarche scientifique. On fait juste réfléchir à l'instrument
32
Qu'est-ce que la validité de contenu?
- Dépend du degré auquel une mesure empirique (instrument d'évaluation) reflète un contenu spécifique * Ex: on demande aux experts en psychiatrie: Quel cpt devrait-on cibler pr voir un risque ou une dépression chez notre clientèle? En validité, on a rarement un coefficient. On décrit ce qui en est ex: la validité a été testée et l'instrument semble mesurer ce pour quoi il a été conçu.
33
Qu'est-ce que la validité de critère ou pragmatique?
inférence à partir du score à un test en rapport avec la performance à un comportement
34
Quels sont les 2 types de la validité de critère ou pragmatique? + explique.
1. Prédictive: peu de test ont été soumis sur celui-ci, car demande bcp de test à faire préalablement. Elle me permet de prédire ce qui arrivera plus tard. Je dois m'assurer que les @ instruments de métrologies soient OK. Ex: pilote d'avion doivent simuler des vols pour passer à d'@ étapes de leur formation. S'ils réussissent ces tests, alors ils feront d'@ test. Ex#2: Médecine dentaire: premier test= sculpté un savon. 2. concomitante (de convergence): ex: GDS. Ici on compare l'instrument avec un goal standard. On compare le GDS avec un @ instrument qui permet de regarder la dépression. Cet instrument de testage a déjà fait ses preuves et a été approuvé.
35
Qu'est-ce que la validité de construit?
S'effectue par une série d'études avec un ou plusieurs instruments dans le but de confirmer ou non des relations hypothétiques concernant un construit **la + complexe. On va faire des analyse stats très sophistiquées pr se repencher sur notre concept. On remet en quest' les items de nos instruments: e-c-q j'ai seulement 1 concept? E-c-q mon concept pt ê subdivisé. Ex: Un instrument mesurant l'intelligence, mais je me rend compte que certains items n'ont pas nécessairement de lien avec les @ items. Donc ex: sect' 1 du test= mémoire, section 2: capacité d'abstraction. Ce sont des analyses qui me permettent vrm de confirmer mes hypothèses sur mon concept.
36
Qu'est-ce que la validation transculturelle?
- Adaptation d’un instrument d’évaluation dans une autre langue: - Il ne s’agit pas d’une simple traduction dans une autre langue *On pt pas directement le traduire, car on touche aux qualités métrologiques ex: à la validation ex: validation de contenue, etc.
37
A/n de la validation transculturelle, on tient compte de 5 niveau d'équivalence transculturelle, quels sont-ils? + explique
1. contenu: ex: expert dans le domaine (si GDS) --> version anglais, on le fait traduire par traducteurs professionnels en français (habituellement 2 traducteurs indépendants), une fois qu'on a leur traduction on la compare avec l'original et ensuite d'@ experts pour analyser tt ça. 2. sémantique: Au niv de la terminologie, des énoncés... 3. technique: S'assurer que la traduction de techniques ne changent pas les techniques d'une culture à une @. 4. critère(ex.:interprétation,normes): il y a instruments qui peuvent avoir des interprétation différente d'une culture à l'@. ex: MCRO, il y a aspect lié à la spiritualité qui diffère d'une culture à une @. On s'assure que cela ne modifie pas la validité de nos interprétations. 5. conceptuelle(ex.:construit)
38
Nomme quelques coefficients qui évaluent la fidélité
- ICC (coefficient corrélation-intra‐ classe) - r (coefficient de corrélation) - kappa (+kappa pondéré) - alpha de Cronbach
39
Exemple: MOCA, -Internal consistency: Cronbach’s alpha (alpha= 0.83) -Test-retest: test‐ retest reliability(r= 0.92) Que peux-tu déduire?
- alpha 0,83 ê très bien. Les items sont assez cohérents pr évaluer les fct cognitives. - coefficient de corrélation (r). Il est très élevé, donc fidélité test-retest est très bonne. Cependant, il faudrait vérifier quel était le délais entre le test-retest. Donc, ici, le délais dt ê assez long pr pas que le client se souvienne de ses réponses, mais pas trop de temps pr que sa condition ne se soit pas modifié.
40
Fidélité et validité des formes parallèles | Lien: test‐ retest?
Ex: Une personne âgée arrive à l'urgence confuse, déstabilisée. Le médecin lui administre MoCA 8,1. Le lendemain, la condition de la pers a changé, elle est bcp - confuse. Elle est plus stable. On vt lui adminitré un nouveau MOCA, mais sa condition a changé et le délais est très court (- de 24h). Donc, on lui administre MOCA 8,2 pr diminuer le biais relier à la notion de test re-test (délais extrêment court et condition changeante). Le MOCA 8,2 est un test équivalent à 8,1. On l'appelle une forme parallèle.
41
Nomme 3 éléments en lien avec la validité.
- Coefficient: pas toujours (exception) - réflexion - cadre théorique
42
Quels pourraient être les dangers en lien avec la validité?
La validité d'un instrument sera affectée si on l’utilise avec une autre population que celle prévue.
43
Qu'ê-ce que l'échelle de Borg?
Échelle de Borg: conçu pr évaluer la percept' à l'effort: de 6 à 20 pr les adultes. 6-7 très très léger, 8-9: très léger, 10-11: léger, 12 et 13 mi léger, mi-dur. ICI c'est échelle ordinale plus précisément de Likert (mm terminologie, mais avec des nuances différentes pr donner une certaine intensité à mes différentes cotes ). Originalement, échelle pr adulte, mais après il y a aussi échelle pr enfant. Celle avec enfant il y a image, donc un peu différents. Les cotes sont les mm. Adulte et enfants différents pcq la percept' à l'effort n'ê pas la mm. Donc, il faut prendre stratégie un peu diff pr mesurer là chez l'enfant. Donc ici, on refait l'instrument pr valider pr une @ population.
44
Quelles 2 autres caractéristiques métrologiques peut-on étudier outre la fidélité et la validité?
- Sensibilité | - Spécificité
45
Qu'est-ce que la sensibilité?
probabilité d'avoir un résultat positif au test parmi les patients qui ont un diagnostic positif. -on vt voir sa capacité à voir les vrais positifs. Ex: GDS: Je vx ê sure de détecter les gens qui sont vrm en risque de dépression. Les vrais positif et NON les faux positifs.
46
Qu'est-ce que la spécificité?
probabilité d'avoir un résultat négatif au test parmi les patients qui ont diagnostic négatif. Je vx que mon instrument détecte les vrai négatifs, GDS: Qd qql n'ê pas dépressif, je vx que mon test puisse me le dire
47
Que veut-on dire lorsqu'un instrument est standardisé? Que regarde-t-on pour le qualifié de standardisé?
instruments (ou mesures ou tests) standardisés: - Normes - Particularité *qd on dit qu'un instrument est standardisé c'est pcq il y a étude de norme, mais aussi pcq il pourra avoir un guide de passassion ultra précis méthode de cotation précisément décrite. Donc on pt appeler instrument standardisé mm s'il n'y a pas eu de norme, mais puisque le guide de passation est très très précis et on doit se conformé exactement aux règles qui y sont énoncé.
48
Quel est le danger avec l'instrument-maison?
Danger= pas soumis à étude de validité/fidélité, donc très haut risque de biais de l'ergo. On n'a pas nécessairement de lien cibler entre les concepts... grande composante de subjectivité. La portion du E dans la formule prendra bcp de place dans ma formule. Meilleure stratégie= se pairé avec chercheur pr rafiné l'objectivité de l'instrument.
49
Pourquoi doit-on vérifier les qualités métrologiques?
Pour s'assurer de: Rigueur -scientifique - clinique Formation - Parfois nécessaire pour certains instruments - Expertise requise
50
Quels sont les risques d’utiliser instruments sans qualités métrologiques?
- Erreur d’interprétation - Diagnostic (mauvais dx) - Problèmes non identifiés;faux problèmes - Mauvais traitement