Cours 3 Flashcards
Objectifs/Moyens/Étapes de la conceptualisation
Objectifs
o Définir le phénomène
o Catégoriser et organiser les composantes des phénomènes à mesurer (Créativité)
Moyens
o Lectures théoriques (recherche déjà fait sur la créativité)
o Synthèse du phénomène
o Synthèse des aspects conceptuels des instruments (S’il y a déjà un test qui mesure la créativité)
o Consultations (Aller voir des experts)
Étapes
o Connaître et différencier les différentes définitions du phénomène
On veut s’éduquer sur le construit pour se faire une tête par rapport à celui-ci
o Positionnement de l’auteur sur la définition qu’il utilisera (Choix de la définition, la notre) :
Énoncé général ; c’est quoi
Positionnement sur la structure du phénomène ; différentes sortes de créativités, sous-composantes?
Indicateurs et exemples clairs de la définition. Des exemples quotidiens de créativité ou des contre-exemples
o Positionnement du phénomène avec d’autres variables
Ex : si on prend dépression, fortement corrélé avec anxiété
À quoi correspond la validité
C’est le degré auquel un test mesure ce qu’il prétend mesurer
Précision : réfère aux inférences que les résultats d’un test nous permettent de faire
o Ce qui doit être valide c’est l’interprétation des scores issus de l’instrument, et non «l’instrument» lui-même
o Nos questions sont valides selon le contexte
o Ex :
Intelligence de 100 dans Ways = intelligence moyenne
Intelligence de 55 dans bdi = dépressif
La validation est le processus par lequel on prouve de manière scientifique que les inférences sont vraies (à l’étape 5 de la cible)
Qu’est-ce que la validité d’Apparence
Est-ce que le questionnaire semble mesurer ce qu’il doit mesurer? Quelles impressions l’instrument laisse-t-il sur les participants?
Preuve non-empirique (la plupart du temps) pas de calcul pour la validité d’apparence mais plutôt du jugement subjectif
Jugement subjectif
Professionnalisme (Beau questionnaire vs. Questionnaire boboche)
Dans certains cas, il n’est pas désirable que le test semble mesurer le réel concept qu’il prétend mesurer par exemple les questionnaires ou il pourrait avoir le biais d’autodésirabilité
Se mesure avec des experts qui connaissent bien le domaine
Plutôt qualitative et subjective
Par exemple, on veut pas trop de validité d’apparence quand on mesure la psychopathie
Qu’est-ce que la validité critériée
Corrélation attendu avec d’autres variables
Si les hypothèses sont confirmées l’instrument mesure comme il le devrait
Qu’est-ce qu’un critère dans la validité critérié?
Critère relié au construit : Manifestation externe au phénomène qui :
informe sur la nature ou l’intensité du phénomène de façon indépendante du nouvel instrument ;
Permet de mieux mesurer le phénomène
génère un chiffre ou une classification au sujet de chacun des participants à la recherche de validation.
En bref: c’est n’importe quoi qui est relié au phénomène mesuré par notre instrument!
À quoi servent les critères dans la validité critériée
À créer un système hypothético-déductif, qui servira à démontrer la validité de notre instrument à l’étape 5 (congruence).
Les critères nous permettent de faire des hypothèses
Quels sont les trois types de critères
Critère réaliste externes
Autres tests
Groupes contrastés
Caractéristiques du critère réaliste externe
Un instrument mesurant déjà exactement le même phénomène.
Habituellement, le test est conçu pour remplacer le critère externe dans le futur.
Une autre mesure de ce qu’on veut mesurer ex: questionnaire sur la dépression ou entrevue sur la dépression d’une personne
Exemples:
o Questionnaire sur le stress -> Niveau de cortisol
o Test de Léger (V02max) -> Mesure du V02max en laboratoire
o Questionnaire sur la dépression -> 3 cliniciens experts ayant fait l’évaluation
o ICI LES DEUX TESTS MESURES LA MÊME CHOSE, donc si tu score fort à un tu score fort à l’autre
Caractéristiques des “autres tests” dans la validité critériée
Pas de lien avec l’instrument qui est entrain de se créer ex: prendre une mesure de l’anxiété et voir comment il se comporte avec la variable dépression quelle corrélation peut être observer?
N’importe quel test qui est relié au phénomène évalué par mon instrument
o Qui permet de formuler une hypothèse propre à une recherche de validation.
o Le critère doit être fiable et valide.
o Habituellement, il doit permettre de démontrer un lien entre les résultats que l’instrument en cours de validation génère (la réalité que l’instrument tente de décrire) et la réalité (représentée par le critère)
Différentes validité dans les “autres tests”
Validité concomitante : Passation du nouvel instrument et du critère en même temps
o Comparer échelle d’anxiété avec celle de dépression
o Exemple: Passer un test d’anxiété et un test de dépression au même moment
Validité prédictive : Passation du nouvel instrument, puis du critère après un délai
o Exemple: Passer un test d’habiletés intellectuelles au début de l’année et mesurer la performance à l’emploi après six mois
- Différence entre concomitant et prédictive : le délai
Validité convergente : Les phénomènes mesurés par le nouvel instrument et le critère vont dans le même sens
o Exemple: H1: La corrélation entre la dimension « névrosisme » du NEO-PI-R et le questionnaire d’anxiété sera moyenne et positive
Validité divergente : Les phénomènes mesurés par le nouvel instrument et le critère vont dans des directions opposées
o Mesure prise à intervalle distinct et voir si les mesures en temps 1 prédit celle au temps 2
o Exemple: H2: La corrélation entre le questionnaire d’épuisement professionnel et la satisfaction à l’emploi sera forte et négative
Groupes contrastés dans la validité
Comment l instrument se comporte avec deux groupes différents = Pop. TDAH vs. Sans TDAH plus il y a de la distinction entre les groupes plus l’instrument est valide
Permet de démontrer que le test permet de différencier un groupe d’un autre
Plus la différenciation est grande, plus le test est valide
Il faut que la différence soit statistiquement significative, mais ait aussi une taille d’effet importante
Exemples:
Groupe d’enfants ayant un TDAH VS Groupe d’enfants ne présentant pas de TDAH
Groupe atteint d’une déficience intellectuelle VS Groupe n’en présentant pas
Qu’est-ce que la validité de contenu
La correspondance entre le contenu d’un test et le domaine défini de connaissances / comportements que l’on veut mesurer.
o Si le niveau de difficulté est bien réparti à travers l’instrument
o On évalue le niveau de difficulté que les items ont
Le domaine dans la validité de contenu doit être?
Concret et fini (On peut identifier tous les éléments faisant partie du concept)
o EX : Est-ce que l’exam de mi-session couvre bien toutes la matières qu’on a vu et les connaissances du cours qu’on veut évaluer
Qu’est-ce qui est attendu dans la validité de contenu?
Définir clairement tous les domaines du concept à l’étude
Connaître le niveau de connaissance des concepts qu’on veut évaluer (difficulté)
o Jusqu’à quel point on veut que les étudiants soient des professionnels en la matière, niveau BAC ou DOC ?
Pouvoir déterminer à quel point les questions correspondent réellement au contenu défini
À quoi correspond la validité de construit?
Un construit est?
Voir si chaque item est assez indépendant l’un de l’autre et qu’ils soient reliés entres eux pour faire le construit global
Analyse factorielle
Un construit est un concept abstrait qui tente de représenter la réalité.
En psychologie, les concepts sont bien souvent abstraits (ou latents)
On tente de se représenter le construit et de le mesurer pour pouvoir mieux le comprendre
