Brainscape's Knowledge GenomeTM

Browse over 1 million classes created by top students, professors, publishers, and experts.


See full index

PSE2202 > Cours 5 > Flashcards

Cours 5 Flashcards

1
Q

Qu’est-ce que la validité?

A

On veut savoir si l’instrument de mesure mesure vraiment ce qu’il prétend ou devrait mesurer.
- Validité des scores
- L’échantillon d’item de l’échelle représente bien le construit qu’on veut mesurer.
- Degré de validité détermine l’interprétation et les inférences que l’on peut faire à partir des scores d’une échelle

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
2
Q

Vraie question pour mesurer la validité

A

Est-ce-que le ce test est une mesure valide de ce construit, pour cette population et pour cette utilisation en particulier?

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
3
Q

3 aspects de la validité à être évalués

A
  1. Est-ce qu’il mesure bien le construit qu’il prétend mesurer?
  2. Est-ce qu’il mesure bien ce construit pour la population ciblée?
  3. Est-ce qu’il mesure bien ce construit pour une application particulière?
How well did you know this?
1
Not at all
2
3
4
5
Perfectly
4
Q

3 points clés que les organisations professionnelles soulignent à propos de la validité des tests (IDB)

A
  1. La validité concerne l’interprétation des scores d’un test (pas une caractéristique du test)
  2. La validité est une question de DEGRÉ (pas noir ou blanc)
  3. La validité repose sur des bases théoriques et empiriques
How well did you know this?
1
Not at all
2
3
4
5
Perfectly
5
Q

Différentes sources de validité (3)

A
  • Contenu
  • Construit : factorielle, convergente, discriminante
  • Critère : concomitante, prédictive, incrémentielle
How well did you know this?
1
Not at all
2
3
4
5
Perfectly
6
Q

Qu’est-ce que la vraisemblance?

A

Aussi appelé “validité d’apparence”.
- Pas une source de validité!!!
- Degré auquel une mesure semble adéquate pour les personnes qui sont évaluées avec le test ET/OU les personnes qui utilisent le test.
- Bonne vraisemblance quand la majorité des personnes (évaluées ou qui évaluent) jugent qu’elle semble pertinente et adéquate.
- Parfois confondu avec validité de contenu : mais ce ne l’est pas.
- Si pas vraisemblable pour les personnes, peut être une menace à la validité.

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
7
Q

Validité de contenu

A

Réfère au degré de représentativité des items (questions)

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
8
Q

La validité de contenu est pour la plupart du temps établie de façon …(D)

A

Déductive : auteur.trice demande à des experts indépendants de se prononcer sur la pertinence des items

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
9
Q

2 questions posées aux experts indépendants sur la validité de contenu

A
  1. Chaque item individuellement correspond bien au construit? (est-ce que chaque question individuellement est représentative du concept)
  2. Est-ce que tous les items dans leur ensemble sont un échantillon représentatif du construit?
How well did you know this?
1
Not at all
2
3
4
5
Perfectly
10
Q

Quelle est la forme de validité la plus négligée?

A

Validité de contenu

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
11
Q

La représentativité dans la validité de contenu

A

Est-ce que tous les domaines et sous-domaines du contruit sont représentés?
- Évite sur ou sous représentation de certains contenu.
Ex. 15 item qui mesure 1 concept et 2 items seulement qui représentent un autre concept.

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
12
Q

Validité de contenu : Avant de construire une échelle, les auteur.trices doivent toujours…

A

Décrire en détails et de façon compréhensive les différents domaines (sous-domaines) du construit d’intérêt
- Important de bien définir le concept qui est mesuré.

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
13
Q

Validité de contenu : à partir de quoi les chercheur.euses définissent un construit? (3)

A
  1. Cadre théorique
  2. Recherche empirique (recension) : des études qui montrent c’est quoi les caractéristiques
  3. Connaissances et expériences professionnelle
How well did you know this?
1
Not at all
2
3
4
5
Perfectly
14
Q

Deux types de validité de contenu

A
  • Nominale : auteur.trices du test
  • Consensuelle : groupes de spécialistes indépendants
How well did you know this?
1
Not at all
2
3
4
5
Perfectly
15
Q

Comment estimer le degré de validité de contenu empiriquement?

A

Avec une échelle de mesure quantitative, on demande à des experts indépendants d’estimer
1. À quel point chacun des items d’un test est pertinent et représentatif du construit d’intérêt
2. À quel point l’ensemble des items constitue un bon échantillon représentatif du contenu du construit

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
16
Q

Afin de quantifier le degré de validité de contenu…

A

On donne aux expert.es un choix de réponse avec une gradation à propos de chaque item afin de synthétiser le tout
- Quand on quantifie, on peut calculer les indice de validité de contenu.

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
17
Q

Deux grandes menaces à la validité de contenu

A
  1. Inclusion du contenu conceptuellement non pertinent : items hyperactivité sont intégrés dans échelle inattention.
  2. Sous-représentation de certains domaines du construit
How well did you know this?
1
Not at all
2
3
4
5
Perfectly
18
Q

Validité de construit : réfère à quoi? (r-r)

A

A. Au degré de reproductibilité de la structure interne théorique de l’instrument : est-ce que je peux reproduire la structure théorique que les auteurs proposent de l’instrument?

B. Au degré de les relations du construit d’intérêt avec d’autres construits externes: relation avec construits et avec concepts indépendants.

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
19
Q

Deux grandes façons de vérifier la validité de construit

A
  1. Validité factorielle
  2. Validité convergente/discriminante
20
Q

Théorie sous-jacente à la validité de construit : Réseau nomologique
Théorie expliquant…

A

Théorie expliquant le construit par le biais de ses interrelations avec d’autres construits de façon CLAIRE
- Peut inclure facteurs étiologiques et conséquences développementales
- Devrait tjrs se retrouver dans le document expliquant l’instrument mais y est rarement

21
Q

Qu’est-ce que la nomologie?

A

Étude des lois

22
Q

Validité de construit : validité factorielle

A

Vérifier si la structure factorielle théorique qui représente le construit est reproduite sur le plan empirique
- Multidimensionnel : plus d’une dimension (ex. EDC)

23
Q

Validité factorielle : L’objectif est de vérifier deux aspects inter-reliés de la structure factorielle théorique

A
  1. Les items sont-ils associés au bon facteur (construit)?
  2. Si instrument multidimensionnel :
    a) Items sont-ils associés au bon facteur et non associés aux autres facteur?
    b) Si hiérarchique, est-ce que les sous-domaines sont significativement associés au domaines général?
    * Ex. problème extériorisé (dom général) - hyperactivité, opposition, agressivité (dom spécifique)
24
Q

Validité factorielle : Analyse factorielle exploratoire

A

On cherche les items inter-corrélés (individus tendent à répondre de façon similaire)
- Critère classique : saturation factorielle de 0,40 et plus (équivalent à une corrélation entre un item et un score total)
- Matrice de corrélation

25
Q

Validité factorielle : analyse factorielle confirmatoire

A
  • Chercheur impose une structure stricte a priori à la matrice de corrélation et teste si elle correspond aux données
  • Méthode normalement employée à l’étape de validation (structure supposée être connue)
  • Corrélation peut avoir tendance à augmenter
26
Q

Validité de construit : validité convergente et discriminante

A

Les 2 souvent testés en même temps
- Convergente : degré auquel les scores de mon instrument sont fortement corrélés avec un autre instrument qui mesure le même construit.
- Divergente : degré auquel les scores de mon instrument ne corrèlent pas avec un instrument qui mesure le même construit.

27
Q

Matrice multitraits-Multiméthodes

A
  • Pour tester la validité convergente et discriminante
  • Diagonale est la fidélité
  • Multitraits : construits différents
  • Multiméthode : méthodes différentes
  • Discriminante : corrélation entre deux traits différents
  • Convergente : corrélation entre deux traits semblables
28
Q

Validité de critère

A
  • Validité pragmatique
  • Prédire l’adaptation sur des choses externes et indépendantes
  • Voir si les score de l’insturment sont liés à quelque chose qui N’EST PAS dans l’instrument
  • Si vient du même instrument : ce n’est pas de la validité de critère.
29
Q

Validité de critère concomitante : quoi et 2 façon de l’estimer

A

La corrélation entre 2 choses mesurées au même moment
1. Corrélation avec un critère indépendant. Ex. Corrélation entre test empathie et conduite délinquantes.
2. Méthode des groupes contrasté : on teste les différences de scores moyens entre 2 groupe

30
Q

Validité de critère prédictive

A

À quel point une mesure est capable de prédire un critère dans le temps ? (prospectivement)
* Pas mesuré en même temps.
* Plus l’intervalle est loin, moins on s’attend à une corrélation forte.
Ex. Score d’une échelle d’impulsivité à l’enfance peuvent-ils prédire abus de psychotropes à l’adolescence?

31
Q

Validité de critère : validité incrémentielle

A

Est-ce que les score obtenus ont une valeur ajoutée (meilleure prédiction) avec d’autres instruments?
- Forme spécifique de la validité de critère
- Meilleur ou pas

32
Q

Théorie de la décision et validité de critère

A
  • Série de concepts visant l’analyse des effets quantitatifs des décisions prises avec des tests
  • Déterminer à quel point les scores d’un test peuvent classifier adéquatement les personnes des groupes
  • Liée à la validité de critère
33
Q

Validité et prédiction : tableau 2 par 2

A

Verticale : Statut de l’individu
Horizontale : résultat de l’évaluation

Si résultat vrai : bien identifié
Si résultat faux : mal identifié

34
Q

Sensibilité

A

Échelle est capable d’identifier % des gens qui ont la condition clinique
- Capacité de procurer un résultat positif pour les personnes qu’on sait qui présentent le statut (condition clinique)
- Capacité de détection

Nombre de vrai + / (Nombre vrai + + Nombre faux -)

35
Q

Spécificité

A

Échelle qui identifie le % des individus qui n’ont pas la condition clinique
- Procurer un résultat négatif pour les personnes qu’on sait qui ne présentent pas le statut (condition clinique)
- Capacité de discrimination

Nombre vrai - / (Nombre faux + + Nombre vrai -)

36
Q

Sensibilité et spécificité : perfomance rétrospective

A

Rétrospective parce qu’on connaît déjà le statut des personne!
- Déterminés par le score critère

37
Q

Sensibilité et spécificité : varient en fonction…

A
  • Varient en fonction du critère.
  • Si je change le critère ( Score T) = les valeurs de sensibilité et spécificité changent
38
Q

Pouvoir prédictif

A
  • Niveau de confiance qui peut être accordée à un résultat positif ou négatif.
  • À quel point la personne présente réellement le trouble ou ne le présente pas.
39
Q

PPP

A

Probabilité que l’individu avec un résultat positif ait réellement le statut.
- Statut : a le trouble - à quel point l’individu à réellement le trouble.

Nombre vrai + / (Nombre vrai + + Nombre faux +)

40
Q

PPN

A

À quel point je peux me fier à un résultat négatif
- Probabilité que l’individu avec un résultat négatif n’ait réelleement pas le statut prédit
- Statut : pas le trouble - à quel point il n’a réellement pas le trouble.

Nombre vrai - (Nombre faux - + Nombre vrai -)

41
Q

PPP et PPN : indices de performances extrinsèques. Varient selon…

A
  • Varient selon la prévalence du trouble
42
Q

Comment choisir le PPP et PPN?

A

Choisir la prévalence où ils se croisent à leurs optimum.

43
Q

PPP et PPN : prévalence faible ou grande

A

Prévalence faible = PPN > PPP

Prévalence grande = PPP > PPN

44
Q

Deux problèmes potentiels avec les indices de sensibilité, spécificité et pouvoir prédictif

A
  1. Estimations des indices statistiques dépendent de la validité et fidélité du critère utilisée
  2. L’estimation de la prévalence réelle dans certains contextes cliniques peut être difficile.
45
Q

Validité et fidélité : cible

A
  • Validité : les points seront autour du centre
  • Fidélité : les points seront près l’un des autres.
46
Q

Validité et fidélité : interreliées

A
  • Validité : préalable à la fidélité. Pourquoi ne pas faire d’erreur de mesure si je ne sais pas ce que je mesure?
  • Fidélité : nécessaire à la validité. Est-ce que je mesure vraiment le concept que je souhaite mesurer si je fais plein d’erreur de mesure?
47
Q

Ne jamais oublier : validité et fidélité

A
  • Validité : pour une population particulière et/ou une utilisation particulière
  • Toujours question de degré!

PSE2202 (12 decks)

Brainscape helps you reach your goals faster, through stronger study habits.
© 2024 Bold Learning Solutions. Terms and Conditions