Cours # 9 Flashcards

1
Q

Quelle est la définition générale de la validation?

A

Le degré avec lequel un test mesure ce qu’il prétend mesurer et cela seulement.

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
2
Q

Vrai ou faux: Plusieurs instruments de mesure ne permettent pas d’observer directement le concept qu’on cherche à étudier

A

Vrai, il est donc nécessaire de procéder au processus de validation.

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
3
Q

Vrai ou faux: Les comportements d’une personne c’est la conséquence de ce qu’il a vécu avant le comportement

A

Vrai

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
4
Q

Vrai ou faux: La validité concerne seulement l’instrument de mesure lui-même

A

Faux:
- L’interprétation des résultats associés à ses items
- Le contexte de son utilisation

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
5
Q

Qu’est-ce que concerne la validation?

A
  • L’interprétation des résultats associés à ses items
  • Le contexte de son utilisation (Clientèle et conditions en générale)
How well did you know this?
1
Not at all
2
3
4
5
Perfectly
6
Q

Le processus de validation est une façon de déterminer le niveau de ___ qu’on peut avoir, en s’appuyant aux indices obtenus

A

Certitude

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
7
Q

Vrai ou faux: Si un instrument a démontré ses preuves de validités avec une clientèle X, il peut être utilisé pour toute la population

A

Faux: si le test a été validé pour une population X et pas pour une population Y il ne peut donc pas être utilisé pour la population Y.

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
8
Q

L’évaluation de la validité est un processus continu d’_____ de « ___ » ou « d’____»

A

accumulation
Preuves ou d’évidences

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
9
Q

Vrai ou faux : Nous pouvons considérer le nom du test comme une « preuve » ou « évidence» de ce que le test mesure

A

Faux

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
10
Q

Vrai ou faux: Seulement les méthodes statistiques sont utilisé pour étudier le degré de validité des instruments psychométriques (et psychologiques)

A

Faux: Multiples méthodes statistiques Et quelques un non strictement statistiques

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
11
Q

Quels sont les « 5 sources de preuves » de validité? (* = 3 + fondamentaux) ( CPSRC)

A
  • Contenu du test *
  • Processus de réponse
  • Structure interne (construit) *
  • Relations avec d’autres variables *
  • Conséquences du test
How well did you know this?
1
Not at all
2
3
4
5
Perfectly
12
Q

ÉTUDIER DIAPO #8 …

A

ÉTUDIER DIAPO # 8

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
13
Q

Qu’est-ce que la validité de contenu?

A

Faire référence à toutes les facettes d’un concept donné (toutes les dimensions)

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
14
Q

Qui suis-je? Types de validité qui doit faire référence à toutes les facettes d’un concept donné

A

Validité de contenu

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
15
Q

La validité de contenu est aussi appelé ___

A

Validité logique

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
16
Q

La validité de contenu nécessite le recours à des ____ reconnus en la matière pour évaluer si les items du test évaluent un contenu défini

A

Experts

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
17
Q

Qui suis-je? Personne qui ont une connaissance reconnue du concept à mesurer et préférablement ont aussi une expertise dans l’élaboration d’instrument de mesure.

A

Experts

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
18
Q

Sur quoi les juges experts sont-ils invités à se prononcer sur le contenu de chaque énoncé? (5)

A

Clarté, représentativité, exhaustivité, dimensionnalité et pertinence des différents items

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
19
Q

Quand est-ce que la validité de contenu est la plus souvent abordée?

A

Dans les tests académiques et professionnels.

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
20
Q

À quoi fait référence la validité de contenu dans un contexte clinique?

A

À la correspondance entre les items (contenus) du test et le contenu des symptômes d’une maladie

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
21
Q

Qui suis-je? Type de validité qui fait référence à la manière dont un instrument évalue tous les aspects théoriques du concept qu’il est censé mesurer

A

Validité de contenu

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
22
Q

Pour la validité de contenu, qu’est-ce qui pourrait aider les juges experts à mieux évaluer le contenu des items ?

A

Présenter une synthèse solide de la théorie du trait latent

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
23
Q

Qui suis-je? Type de validité qui est supposée pouvoir évaluer dans quelle mesure un instrument couvre toutes les parties pertinentes du concept qu’il vise à mesurer

A

Validité de contenu

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
24
Q

Quelle est la méthode bien connu pour mesurer la validité de contenu? (Dev par qui et l’expliquer)

A

Lawshe (1975)
Chaque expert doit répondre à la questions suivante : « Pour chaque item, la connaissance mesureée par cet item est-elle ‘‘essentielle’’, ‘‘Utile, mais pas essentielle’’ ou ‘‘pas nécessaire’’
Si + de la moitié des expert indique d’un item est essentiel = cet item a au moins un certaine validité de contenu.

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
25
Q

Comment interpréter la formule de Lawshe pour expliquer le ratio de validité de contenu?

A
  • Les résultats de cette formule varient entre -1 et +1 ;
  • Les valeurs positives indiquent qu’au moins la moitié des spécialistes ont jugé l’item comme
    essentiel.
  • Le CVR (Ratio de validité de contenu) moyen pour l’ensemble des items peut être utilisé comme indicateur de la validité globale
    du contenu du test
How well did you know this?
1
Not at all
2
3
4
5
Perfectly
26
Q

Quand est-ce qu’on étudie la validité de contenu? (Selon Balbinotti)

A

Lors de la construction de l’instrument de mesure (choix initial des contenus des items)

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
27
Q

La validation pragmatique est aussi appelé __.

A

De critère, critériée, prédictive

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
28
Q

Qui suis-je? Capacité d’un instrument à prédire (aussi explicite et invariable que possible) le niveau de performance (comportement) d’un groupe d’individus par rapport à des situations qu’ils rencontreront (ou pourraient rencontrer) ultérieurement.

A

Validation pragmatique (ou de critère)

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
29
Q

Expliquer la validation pragmatique (Ou de critère)

A

Capacité d’un instrument à prédire (aussi explicite et invariable que possible) le niveau de performance (comportement) d’un groupe d’individus par rapport à des situations qu’il rencontreront (ou pourraient rencontrer) ultérieurement.

30
Q

Quel est l’exemple classique de la validation pragmatique (ou de critère)?

A

L’évaluation du QI et le succès professionnel.

31
Q

Quel est la procédure pour évaluer la validité pragmatique (ou de critère)?

A

Calculer la corrélation entre les résultats obtenus par un même groupe d’individus à deux moments différents.

32
Q

À partir de quels résultats pouvons-nous faire un corrélation pour mesurer la validité pragmatique? (2 exemples)

A
  • 2 passations de tests au moment présent (virtuellement simultané)
  • 2 passations de tests : L’une au moment présent et l’autre au « future »
33
Q

Quelle approche corrélationnelle pouvons-nous utiliser pour évaluer la validation pragmatique (ou de critère)?

A

L’analyse de régression

34
Q

Quel est l’un des objectifs de l’analyse de régression?

A

Prédire la variance d’une variable (présente ou future) par le biais d’une (ou plusieurs) variable indépendante

35
Q

Quand utilisons-nous la corrélation r au carré et R au carré?

A

r = corrélation
R= Régression

36
Q

Quels sont les 2 types de validité pragmatique?

A
  • Validité concomitante/concourante
  • Validité prédictive
37
Q

Qui suis-je? Degré d’association entre les scores obtenus au test et les scores obtenus à un mesure de référence, ou critère (l’administration du test et de la mesure du critère pratiquement en même temps - temps présent)

A

Validité pragmatique de type validité concomitante/concourante

38
Q

Expliquer le type de validité concomitante/concourante (Validité pragmatique ou de critère)

A

On détermine le degré d’association entre les scores obtenus au test et les scores obtenus à une mesure de référence, ou critère (l’administration du test et de la
mesure du critère pratiquement en même temps – temps présent)

39
Q

Qui suis-je? La qualité des prédiction faites sur la base des résultats obtenus au test et une réalité future (Administration du test et du critère séparée d’un laps de temps important, le test étant administré en premier)

A

Validité prédictive (Type de validité pragmatique ou de critère)

40
Q

Expliquer la validité prédictive (Type de validité pragmatique ou de critère)

A

On évalue la qualité des prédictions faites sur la base des résultats obtenus au test et une réalité future (administration du test et du critère séparée d’un laps de temps important, le test étant administré en premier);

41
Q

Quelles sont les statistiques habituellement utilisées pour évaluer la validation pragmatique?

A
  • Coefficient de Détermination (r au carré)
  • Corrélation multiple au carré (R au carré)
42
Q

Expliquer le coefficient de détermination

A

% d’explication de la variance entre 2 mesures, sans considérer l’ordre des mesures

43
Q

Expliquer la corrélation Multiple au carré

A

% d’explication de la variance entre 2 (ou plusieurs) mesures, en considérant l’ordre des mesures.
Peut être simple (VI + VD, Corrélation de Pearson) ou multiple (Plusieurs VI + VD)

44
Q

Qui suis-je? Type de validité qui se défini comme étant la justesse/certitude avec laquelle l’ensemble d’items d’un instrument de mesure psychologique permet d’obtenir des résultats conformes aux concepts (ou construits ou traits) définis par son contexte théorique.

A

Validité de construit

45
Q

Expliquer la validité de construit

A

Se définie comme étant la justesse/certitude avec laquelle l’ensemble d’items d’un instrument de mesure psychologique permet d’obtenir des résultats conformes aux concepts (ou construis, ou traits) définis par son contexte théorique

46
Q

La validité _____ indique dans quelle mesure les énoncés d’un instrument son cohérents (structure interne) avec la théorie.

A

Validité de construit

47
Q

Quelles sont les validités qui nous intéresse le plus dans les rapports?

A

Validité de construit et de contenu

48
Q

Vrai ou faux : La validation de construit fait des comparaison avec d’autres instruments

A

Faux: Évalue la structure interne de l’instrument

49
Q

Qu’est-ce que les entités hypothétiques?

A

Terme utilisé dans la validité de construit pour nommer les construits ou traits qui résultent d’une élaboration psycho-sociale et théorique qui ne sont pas accessible directement.

50
Q

Nommer des exemples d’entités hypothétiques

A

Intelligence,
Personnalité,
Connaissances,
Compétences
Dépression
Motivation
Intérêt,
etc

51
Q

Dans la validité de construit, les construits peuvent aussi être considérés comme des « ____ » qui expliquent les relations entre différents concepts (ou contenus) évalués directement par les items et les dimensions.

A

Mini-théories

52
Q

Qu’est-ce que les « mini-théories » (construits) expliquent-elles?

A

Les relations entre différents concepts (ou contenus) évalués directement les items et les dimensions.

53
Q

Comment peuvent être nommé les dimensions dans la validité de construits?

A

« Facteurs » (ou construits, ou traits latents, ou variables latentes)

54
Q

Comment sont expliqué les « facteurs » (ou dimensions, ou construits, ou traits latents ou variables latentes)?

A

Par la combinaison linéaire des contenus des items (L’association entre les concepts, contenus- les variables directement mesurables) ou même la combinaison linéaire d’autres construits.

55
Q

ÉTUDIER SCHÉMAS DIAPO # 26

A

ÉTUDIER SCHÉMAS DIAPO # 26

56
Q

Comment pouvons-nous calculer la validité de construit?

A

Par l’approche corrélationnelle :
- Par l’analyse multitrait-multiméthode OU
- Par l’analyse factorielle

57
Q

Expliquer l’analyse multitrait-multiméthode

A

Une matrice de corrélation entre les résultats obtenus à différents traits (hétérotraits vs monotraits) et à différents méthodes (hétérométhode vs
monométhode)

58
Q

Quels sont les résultats attendu par l’analyse multitrait-multiméthode?

A

+ forte corrélation entre « même trait-même méthode »

+ faible corrélation pour les traits différents-méthodes différentes

59
Q

Quels sont les limites de l’analyse multitrait-multiméthode?

A
  • Demande bcp de temps des sujets (faire plusieurs tests.. 2 temps)
  • Difficulté à trouver et faire la passation de plusieurs tests qui évaluent les mêmes traits.
60
Q

Vrai ou faux: Il y a toujours 2 temps à la validité multitrait-multiméthode

A

Vrai

61
Q

Exemples de l’analyse multitrait-multiméthode pour évaluer la validité de construits

A
  • Exemples de traits (A, B, C):
  • Dépression (A), Tristesse (B), Désespoir (C)
  • Exemples de méthodes (1, 2, 3):
  • Observation directe (Méthode 1),
  • Questionnaire papier (Méthode 2),
  • Entrevue semi-structurée (Méthode 3)
62
Q

Quel est le rationnel de l’analyse factorielle?

A

D’avoir minimalement 3 variables observées (préférablement plus) qui soient expliquées par une variable latente (Variable qui retient l’essentiel de la variance commune, variance vraie)

63
Q

Par quoi est représenté la variable latente dans l’analyse factorielle (Validité de construit)

A

Par le facteur

64
Q

Quelles sont les questions typiques d’une analyse factorielle?

A

(1) Combien de facteurs l’analyse nous propose?
(2) Quel est le pourcentage d’explication de la variance?
(3) Est-ce que tous les items sont valides ou existe-il des items
nécessitant une reformulation/exclusion?

65
Q

Quelles sont les colonnes importantes pour l’analyse factorielle (Tableau : Total Variance Explained)

A

Dans la section : Extraction Sums of Squared Loadings :
- % of Variance
- Cumulative %

66
Q

Que devons-nous comprendre du tableau avec les résultats de l’analyse factorielle?

A
  • Le nbr de ligne indique le nombre de facteurs
  • Le % of Variance de écrit ex au facteur 2 est le % de plus qui n’a pas été expliqué par la variance précédente et ainsi de suite ( voir le % de variance cumulative)
  • % cumulative qui est considéré comme bon est entre 40 et 60%
67
Q

ÉTUDIER DIAPO # 33

A

ÉTUDIER DIAPO # 33

68
Q

Vrai ou faux : La validation de construit n’amène pas à un indice statistique unique

A

Vrai: plusieurs résultats qui doivent être interprétés en lien avec les éléments théoriques sur lesquels le test est basé.

69
Q

Quand est-ce que la validité de construit d’un instrument (ensemble de preuves de validité) sera plus facilement mesurable?

A

Si la théorie utilisé est claire et bien définie.
Ex: Dans la théorie du BigFive, il y a 5 variables, donc le test doit tester les 5 dimensions pour avoir bonne validité de construit.

70
Q

Quels sont les 2 types de validité de construit?

A
  • Validité convergente
  • Validité discriminante
71
Q

Qui suis-je? Type de validité de construits où les résultats de l’outil devrait corréler avec les autres outils qui évaluent le même construit

A

Validité convergente

72
Q

Qui suis-je? Type de validité de construit où l’outil ne devrait pas corréler de façon importante avec ces autres construits

A

Validité discriminante