Cours 3 - Conceptualisation Flashcards
Qu’est-ce que la validité en général vs la validité à l’étape de la conceptualisation?
- Validité en général : «Est-ce que le test mesure ce qu’il est censé mesuré? »
- Validité à l’étape de la conceptualisation : « Qu’est-ce que je veux mesurer? »
À la conceptualisation, nomme moi 3 objectifs ainsi que 3 moyens utilisés à l’étape de la préparation.
OBJECTIFS:
1) Définir le problème
2) Catégoriser et organiser les composantes du phénomène à mesurer
3) Positionnement avec d’autres concepts
MOYENS:
1) Synthèse du phénomène
2) Synthèse des aspects conceptuels des instruments
3) Lectures théoriques et empiriques
4) Consultations
Justement, dans les objectifs de la conceptualisation, nomme moi les 3 choses pour lesquelles l’auteur devra se positionner sur la définition qu’il utilisera (soit à l’étape 2 des objectifs).
- Énoncé général
- Positionnement sur la structure du phénomène
- Indicateurs et exemples clairs de la définition
Voici un exemple de définition et explique moi à quelle caractéristiques d’une définition chacun de ses éléments fait référence :
- Texte en gras jaune = ?
- Texte italique cyan = ?
- Texte souligné vert = ?
- Texte en gras jaune = énoncé général
- Texte italique cyan = positionnement sur la structure du phénomène
- Texte souligné vert = indicateurs et exemples clairs de la définition
Explique moi pourquoi l’exemple suivant est un contre-exemple de définition INCOHÉRENTE à ne pas faire :
=> Car deux définitions contradictoires de la vulnérabilité :
1. Authenticité, exposition de ses émotions
2. Disposition au stress
Vrai ou faux? La validité, c’est le degré auquel un test mesure ce qu’il prétend mesurer.
Vrai!
Vrai ou faux? Une précision à faire sur ce qu’est la validité est qu’elle réfère aux inférences que les résultats d’un test nous permettent de faire.
Vrai!
Vrai ou faux? Ce qui doit être valide c’est l’interprétation des scores issus de l’instrument, et non “l’instrument” lui-même.
Vrai!
Nomme moi les 4 types de validité vus dans le cours.
- Validité d’apparence
- Validité critériée
- Validité de contenu
- Validité de construit
Qu’est-ce que la validité d’apparence?
- Est-ce que le questionnaire semble mesurer ce qu’il doit mesurer? Quelles impressions l’instrument laisse-t-il sur les participants?
- Professionnalisme perçu du test
- “Est-ce que tu trouves que le test est legit.” = comme un feeling
Dans la validité d’apparence, les preuves sont empiriques ou non empiriques?
Non empirique (la plupart du temps).
Dans la validité d’apparence, est-ce qu’on utilise un jugement subjectif ou objectif?
Subjectif!
Qu’est-ce que la validité critériée?
- La validité critériée est un type de validité qui évalue dans quelle mesure un test ou une mesure est corrélé(e) avec un critère externe censé représenter le concept mesuré.
- En lien avec l’étape 3 (ou C) dans la conceptualisation.
Dans la validité critériée (en lien avec l’étape 3 de la conceptualisation), quelle question doit-on se poser?
« Quelles sont les autres manifestations concrètes qui seraient liées aux résultats que mon instrument génèrera ? »
Dans la validité critériée, qu’est-ce que le critère? (3 choses qui l’accompagne)
Critère = manifestation externe au phénomène qui…
- (1) Informe sur la nature ou l’intensité du phénomène de façon indépendante du nouvel instrument ;
- (2) Génère un chiffre ou une classification au sujet de chacun des participants à l’étude de validation
- (3) Le critère doit être fiable et valide.
En bref, qu’est-ce que le critère?
En bref : c’est tout autre mesure qui est relié au phénomène mesuré par notre instrument!
À quoi servent les critères (utilité)?
À créer un système hypothético-déductif, qui servira à démontrer la validité de notre instrument à l’étape 5 (congruence).
Quels sont les 3 types de critères?
- Critère réaliste externe
- Autres tests
- Groupes contrastés
Qu’est-ce qu’un critère réaliste externe?
- Un instrument mesurant déjà exactement le même phénomène.
- Habituellement, le test est conçu pour remplacer le critère externe dans le futur.
- Exemples :
=> NEO-PI —> NEO-PI-R
Dans le cas d’un critère réaliste externe et d’un nouveau test qui sont tous les deux composés d’items : si ces deux mesures corrèlent à plus de ___ cela reflète une redondance dans le contenu des items.
0,90.
Pourquoi on veut que ça ne corrèlent pas plus que 0,90?
Sinon, pourquoi avoir fait un nouveau test?
Qu’est-ce que le critère “Autres tests”?
- Toute mesure d’un autre phénomène qui est reliée au phénomène évaluée par mon instrument.
=> Qui permet de formuler une hypothèse propre à une étude de validation.
=> Habituellement, il doit permettre de démontrer un lien entre les résultats que l’instrument en cours de validation génère (la réalité que l’instrument tente de décrire) et la réalité (représentée par le critère).
Dans quel contexte utilisons-nous le critère “Autres tests”?
Lorsqu’il n’y a pas de tests pré-existent et qu’on veut voir tout autre phénomène en lien avec notre nouvel instrument.
Pour les types de validité critériée 1 et 2 (critère réaliste externe et autres tests), il existe des caractéristiques qui sont basées sur 2 choses :
- Le délai
- La direction
Nomme moi les 2 caractéristiques basées sur le délai.
- Validité concomitante
- Validité prédictive
Qu’est-ce que la validité concomitante?
- Passation d’un nouvel instrument et du critère en même temps.
- Ex: Passer un test d’anxiété et un test de dépression au même moment.
Qu’est-ce que la validité prédictive?
- Passation du nouvel instrument, puis du critère après un délai.
- Ex: Passer un test d’habiletés intellectuelles au début de l’année et mesurer la performance à l’emploi après 6 mois.
- Validité prédictive, il faut attendre avant de passer l’autre test.
Validité prédictive ou concomitante?
Prédictive.
Validité prédictive ou concomitante?
Concomittant.
Validité prédictive ou concomitante?
Concomittant.
Nomme moi les 2 caractéristiques basées sur le direction.
- Validité convergente
- Validité divergente
Qu’est-ce que la validité convergente.
- Les phénomènes mesurés par le nouvel instrument et le critère vont dans le même sens.
- Ex: Hypothèse : la corrélation entre la dimension “névrosisme” du NEO-PI-R et le questionnaire d’anxiété sera moyenne et positive.
- Convergente = quand l’un augmente, l’autre augmente (corrélation positive)
Qu’est-ce que la validité divergente?
- Les phénomènes mesurés par le nouvel instrument et le critère vont dans des directions opposées.
- Ex: Hypothèse : La corrélation entre le questionnaire d’épuisement professionnel et la satisfaction à l’emploi sera forte et négative.
- Divergente = si l’un augmente, l’autre diminue (corrélation négative)
Dans l’image ci-dessous, explique-moi les réponses pour H1, H2 et H4.
H1 :
Q1 = critère réaliste externe
Q2 = convergent
Q3 = concomitant
H2 :
Q1 = autre test
Q2 = divergent
Q3 = prédictif (car on doit attendre qu’il soit à l’université)
H4 :
Q1 = autre test
Q2 = convergent
Q3 = concomitant
Qu’est-ce que le type 3 de critère, soit les “groupes contrastés”?
- Démontre que le test différencie un groupe d’un autre.
- Plus la différenciation est grande, plus le test est valide.
- Ex: groupe d’enfants ayant un TDAH vs groupe d’enfants ne présentant pas de TDAH
- Voir image :
Qu’est-ce que la validité de contenu?
- La correspondance entre le contenu d’un test et le domaine défini de connaissances/comportements que l’on veut mesurer.
- Ex: L’examen pour le cours de psychométrie a une bonne validité de contenu car il couvre l’ensemble des connaissances transmises dans le cours.
- Est-ce que le domaine est bien couvert par notre instrument?
Dans la validité de contenu, le domaine doit (2 choses) :
- Être concret
- Être défini
Nomme moi les 2 utilisations principales de la validité de contenu :
- En milieu éducatif
- En milieu du travail
Vrai ou faux? La validité de contenu ne s’applique pas à la personnalité, car on ne sait pas où ça commence et où ça se termine.
Vrai!
La validité de contenu s’applique à quelle étape de la conceptualisation?
La 2e (B).
Quelle est la question que l’on doit se poser en rapport avec la validité de contenu?
«Quel est le domaine et quels en sont les thèmes particuliers que je veux représenter par les résultats que mon instrument génèrera ?»
Quelles sont les 3 implications de la validité de contenu?
- Définir clairement tous les domaines du concept à l’étude
- Connaître le niveau de connaissance des concepts qu’on veut évaluer (niveau de difficulté)
- Pouvoir déterminer à quel point les questions correspondent réellement au contenu défini
Qu’est-ce que la validité de construit?
- Un construit est un concept abstrait qui tente de représenter la réalité.
- En psychologie, les concepts sont bien souvent abstraits (ou latents).
- On tente de se représenter le construit et de le mesurer pour pouvoir mieux comprendre.
La validité de construit s’applique à quelle étape de la conceptualisation?
2e (B).
Quelle est la question que l’on doit se poser en rapport avec la validité de construit?
«Quelle est la définition du phénomène que je veux mesurer ?»
Vrai ou faux? L’étape 2 vise à définir de façon claire et concise le construit et ses dimensions.
Vrai!
Vrai ou faux? Chaque dimension doit être conceptuellement reliée au construit et être relativement indépendante des autres dimensions.
Vrai!
Qu’est-ce que la variance non-reliée au construit?
C’est le degré auquel les résultats du test subissent l’influence d’éléments extérieurs au construit.
Qu’est-ce que la sous-représentation du construit?
C’est le degré auquel un test omet d’importants aspects du construit.
Explique moi cette image :
Il peut y avoir différents degrés de mesure valide étant donné la variance non-reliée au construit et la portion sous-représentée du construit!
Explique moi cette image :
- Que les items 1 à 6 se regroupent en une dimension.
- Que les items 7 à 12 se regroupent en une dimension.
- Que les items 13 à 18 se regroupent en une dimension.
- Que les trois dimensions précédentes se regroupent en un construit «soutien social».
- P. ex., on ne veut pas que l’item 4 corrèle avec l’item 14…
Complète les trous dans l’image suivante :
(voir image pour réponses)
