La validité Flashcards

1
Q

Fidélité:

A

mesure la consistance d’un test à l’autre

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
2
Q

Validité:

A

Est-ce que je mesure ce que je dois mesurer…

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
3
Q

3 types de validité selon Powerpoint

A

Validation de contenu
Validation pragmatique
Validation de construit

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
4
Q

Est ce que ces 3 validités se recoupent/ressemblent?

A

OUI

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
5
Q

Définition générale de la validité?

A

Le degré avec lequel un test mesure ce qu’il prétend mesurer, et cela seulement.

*****Plusieurs instruments de mesure ne permettent pas d’observer directement le concept qu’on cherche étudier; alors, il est nécessaire de procéder au processus de validation.

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
6
Q

Est-ce que la validité peut être parfaite?

A

NON, mais on veux essayer de s’en approcher.

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
7
Q

Exemples:

Concept: agressivité
- S’assurer que l’instrument se rapporte uniquement à l’agressivité, et non pas à la frustration, à la colère, à l’impulsivité, à la dangerosité, etc.

Concept: dépression
- S’assurer que l’instrument se rapporte uniquement à la dépression, et non pas à la tristesse, la solitude, l’ennui, etc.

A

Donc, il est imp de bien définir ce que l’on cherche au départ (importance de la définition de départ)

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
8
Q

La validité concerne l’instrument de mesure lui-même ou l’interprétation des résultats?

A

l’interprétation des résultats,

validité est un processus qui permet de déterminer le niveau de confiance qu’on peut avoir par rapport aux inférences qu’on fait en s’appuyant sur les résultats obtenus a un test.

Ce qui nous préoccupe c’est qu’avec la mesure que je prends, est-ce que j’en fait une bonne interprétation?

EXEMPLES: on fait passer un moca
La personne est déprimée, a va dire ca me tente pas
Mais Déficit va donner une reponse erronée avec conviction
Mais les 2 vont obtenir échec au test

BDI il faut que patient compare plusieurs items, si prob de mémoire on sait pas si la personne on teste vrmt sa dépression ou sa mémoire déficiente

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
9
Q

Est-ce qu’on peut dire qu’un test est valide?

A

NON, on peut seulement dire qu’on a démontré qu’il est valide dans TEL contexte d’utilisation (telles conditions/telles clientèles)
Donc, validité lié au contexte

C’est une accumulation de preuves, processus continu

Ne sera jamais valide à l’eternité pcq le contexte change toujours (ex: téléphone cadran, les jeunes aujourd’hui savent pas cest quoi)

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
10
Q

GDI: Dépression pour ainés, je px lutiler pour adultes mais cest dans mon interprétation que je vais devoir faire attention

A

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
11
Q

Validité, c’est pas valide ou pas valide cest plutôt un degré de validité

A

jamais valide à 100%

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
12
Q

Il faut éviter de considérer le nom du test comme un indice précis de ce qu’il mesure

A

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
13
Q

Selon le Standards for Educational and Psychological Testing (2015) quelles sont les 3 grandes catégories de validité:

A
DE CONTENU (contenu vs apparente)
PRAGMATIQUE (critériée/ prédictive)
DE CONSTRUIT (conceptuelle/théorique)
How well did you know this?
1
Not at all
2
3
4
5
Perfectly
14
Q

V-F

certains attributs ne sont pas mesurables?

Une mesure peut s’appliquer parfois à plusieurs attributs?

A

VRAI

VRAI

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
15
Q

VALIDATION DE CONTENU

A
  • appréhender les aspects de contenu pour lesquels il a été conçu, et ceux-là seulement
  • les contenus des items utilisés contribuent tous à évaluer un aspect significatif (ou dimension) de ce domaine; en d’autres termes, qu’ils forment un échantillon important de tous les items

***Là que c’est imp de savoir ce qu’on vx vrmt mesurer, avoir une bonne définition

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
16
Q

VALIDATION DE CONTENU

A

-veiller à ce que les contenus des items ne fassent pas appel à des caractéristiques que l’on souhaite pas explicitement solliciter

17
Q

On examine la VALIDATION DE CONTENU généralement quand?

A

lors de la construction de l’instrument de mesure (choix des items)

18
Q

Ainés avoir des caractères plus gros

A

19
Q

La VALIDATION DE CONTENU est généralement estimé par quelle méthode?

A

Méthode des JUGES EXPERTS

**Les experts sont des personnes qui ont une bonne connaissance du concept à mesurer ou qui ont une expertise dans l’élaboration d’instrument de mesure. Ces derniers sont invités à se prononcer sur le contenu des énoncés, soit sur leur clarté, leur représentativité, l’exhaustivité, dimensionnalité et la pertinence de l’outil dans son ensemble.

20
Q

VALIDATION PRAGMATIQUE

A

Est-ce que ca prédit bien ce qu’on vx prédire

Prédire x élément en fct d’une situation (ex: niveau de réussite, d’adaptation etc)

EX: QI/Évaluation du succès professionnel/tests d’interet pour profil de carrière

***C’est lourd a faire

21
Q

VALIDATION PRAGMATIQUE

A
  • Procédure la plus simple (mais pas nécessairement la plus facile à cause du délai de temps que ca demande) pour évaluer = étudier corrélation (ou comparaison de moyennes mais moins —— robuste) entre les résultats obtenus par un même groupe d’individus à deux moments différents
  • on peut avoir recours à une méthode issue de l’approche corrélationnelle (l’analyse de régression), dont un des objectifs est précisément de prédire la situation future d’un individu sur la base d’éléments qui caractérisent sa situation présente.
22
Q

VALIDATION PRAGMATIQUE =

A

déterminer dans quelle mesure les prédicteurs retenus permettent de fournir une estimation valide des résultats qui seront obtenus ultérieurement (pourcentage de variance prédite ou «expliquée»).

23
Q

Quelles sont les 2 types de validité pragmatique:

A

Validité concomitante/concourante

Validité prédictive

24
Q

Validité concomitante/concourante (VALIDITÉ PRAGMATIQUE) =

*fait penser à fidélité parallèle

A

-degré de corrélation entre les scores obtenus au test ET scores obtenus à une mesure de référence (administration du test et de la mesure du critère pratiquement en MËME TEMPS )

25
Q

Validité prédictive (VALIDITÉ PRAGMATIQUE) =

*ex: SAT/ressources humaines/test de carrière

A

-évalue la qualité des prédictions faites en fct des résultats obtenus au test et une réalité future
(administration du test et du critère séparée d’un LAPS DE TEMPS important, le test étant administré en premier);

26
Q

VALIDATION DE CONSTRUIT

A

-la justesse avec laquelle un instrument de mesure permet d’obtenir des résultats conformes aux construits définis par son contexte théorique; elle indique dans quelle mesure les énoncés d’un instrument sont cohérents avec la théorie et les concepts, définis de façon opérationnelle.

*Définition opérationnelle: définit qqchose de précis et pas autre chose
ex: pleurez vous des fois/rarement = pas assez précis
mais pleurez vous 3/5/10 par jour ca cest plus opérationnel

27
Q

VALIDATION DE CONSTRUIT

A

Dans de nombreuses situations en psychologie, on cherche à étudier des entités hypothétiques, qui résultent d’une élaboration psycho-sociale et théorique: intelligence, aptitudes, personnalité, connaissances, compétences, capacités et habiletés diverses, motivation, intérêt, attitudes. Ces entités (qu’on appelle précisément des «construits») ne sont pas directement accessibles à l’observation et à la mesure.

EX:
-Je ne px pas mesurer la motivation la personnalité de qqun, on a fait des construits pour pouvoir identifier

-Intelligence = on mesure rapidité d’apprentissage, flexibilité mentale

28
Q

VALIDATION DE CONSTRUIT

A

Les construits sont considérés des «mini-théories» qui expliquent la relation entre différents concepts, que ce soient des comportements, attitudes… On les appelle aussi des «facteurs» (dimensions, composantes) et ils viennent en fait expliquer les corrélations qu’on observe entre différentes variables.

29
Q

Quelles sont les méthodes pour calculer la validité de construit?

A

Méthodes issues de l’approche corrélationnelle:
-analyse multitrait-multiméthode

-analyse factorielle
démontrer la pertinence (relation, association) d’un item par rapport à sa propre dimension théorique (AF).

  • **corrélation C’EST PAS un lien de causalité
  • ** si les choses se suivent = corrélation positive
30
Q

Analyse multitrait-multiméthode (VALIDATION DE CONSTRUIT)

Voir notes iphone

A
  • Matrice de corrélation entre les résultats obtenus à différents tests: illustre à la fois la validité convergente et la validité discriminante;
  • On s’attend à ce que la plus forte corrélation soit trouvé pour même trait-même méthode; et la plus petite corrélation pour traits différents-méthode différente;
  • Limite: demande beaucoup de temps de la part des sujets (faire plusieurs tests…) + difficulté à trouver des tests qui évaluent

-Il y a toujours deux temps à la méthode multitrait-multiméthode, qui sont représentés par les axes des abscisses (x) et des ordonnées (y)
Exemples de traits (A,B,C):
Dépression (A), tristesse (B), désespoir (C)
Exemples de méthodes (1,2,3):
Observation directe (Méthode 1), questionnaire papier (Méthode 2), entrevue semi-structurée (Méthode 3)

31
Q

Analyse factorielle (VALIDATION DE CONSTRUIT)

A

-Projeter 3 variables (ou plus) qui sont fortement corrélées entre elles sur une nouvelle variable qui retient l’essentiel de la variance commune. Cette nouvelle variable représente le facteur.

(1) Combien de facteurs l’analyse nous propose?
(2) Quel est le pourcentage d’explication de la variance?
(3) Est-ce que tous les items sont valides par la biais de la validation de construit ou y a-t-il des items nécessitant une reformulation?

32
Q

Conclusion VALIDATION DE CONSTRUIT

A

Comme vous pouvez bien noter, le résultat du processus de validation de construit n’amène pas à un indice statistique unique mais bien à plusieurs résultats qui doivent être interprétés en lien avec les éléments théoriques sur lesquels le test se base. La validité de construit d’un instrument sera plus facilement mesurable si la théorie utilisée est explicite et bien définie.

33
Q

Quelles sont les 2 types de validité de construit?

A

Validité:

  • convergente
  • discriminante
34
Q

Validité convergente (VALIDITÉ DE CONSTRUIT) =

A

-Vérifier à quel point est-ce que l’échelle est reliée à des variables et des mesures du même construit. En ce sens, l’outil devrait corréler avec les autres outils qui évaluent des construits identiques ou très similaires

35
Q

Validité discriminante (VALIDITÉ DE CONSTRUIT) =

A

-Vérifier à quel point l’échelle s’écarte de variables et de mesures de construits différents. En ce sens, l’outil ne devrait pas corréler avec des construits indépendants de celui qu’il évalue.

Ex: Si j’évalue anxiété y devrait pas avoir corrélation avec déficits cognitifs

36
Q

Questions examen:

A

1)Est-ce quon peut affirmer qu’un test est valide en soi? NON
Pcq cest l’interprétaion qu’on fait du test qui est valide

2) Si un test est validé 1 fois est ce qu’il est valide de facon permanente?
NON, pcq c’est une accumulation d’indices de validité, historique change, règles société change etc

37
Q

Questions de déonto

A

1.Psy tombe malade, elle est remplacé par un autre psy, constate que ya des évaluation en cours est ce quelle peut les compléter?
RÉP: processus non terminé, nouveau psy doit faire une rencontre pour réavluer besoin, expliquer son rôle de nouveau psy, doit avoir droit aux données brutes , faut dire ca a été fait par un tel un tel puis ca cest ma partie a moi, possible de récupérer mais bien dire cest les résultats de l’autre, pas nécessairement refaire l’évaluation au complet, nommer que ca été fait par un tel mais que tu confirme ou infirme

2.Les évaluations sont faites , mais pas le rapport, est ce que la psy remplacante peut le faire?
RÉP: Peut entre autre prendre le temps de faire une rencontre pour faire son propre jugement et après idem 1
Dire que cest pas moi qui a évalué ca mais ca concorde ou pas avec ce que je pense, si ca concorde pas on aurait interet a refaire évaluation complète

3.Psy remplacante Faire entrevue de bilan (genre annoncé les scores pas les brutes la)?
RÉP: Encore une fois, faire une entrevue avant pour se faire notre propre jugement