Fidélité, validité, contrôle Flashcards
Qui suis-je? Réfère à la précision de l’instrument peu importe ce qu’il mesure
Fidélité
Quand est-ce qu’on considère une technique de mesure fidèle?
Lorsque son application entraîne toujours des résultats semblables
La fidélité d’une mesure dépend de quoi?
L’absence relative d’erreur de mesure
Vrai ou faux? Des mesures constantes ou fidèles sont toujours valides.
Faux, peuvent ne pas être valides
Il y a 3 types de fidélité. Lesquels?
Stabilité temporelle, équivalence, homogénéité
Qui suis-je? Je me détermine sur la base de la constance des résultats obtenus à la suite d’applications répétées de l’instrument
Stabilité temporelle
Pour évaluer la stabilité temporelle, on a recours à quoi et comment se nomme cette technique?
2 administrations de l’instrument
Test-retest
Qui suis-je? Je suis recommandé pour des construits qui possèdent une stabilité temporelle, mais peu recommandé pour des tests de type situationnel qui mesure un état passager, ou des tests qui sont influencés par la mémoire ou l’apprentissage
Test-retest
Qui suis-je? Consistance des résultats obtenus à la suite de l’utilisation soit de différents instruments visant la mesure de la même caractéristique (p. ex., 16PF formes A et B) ou soit d’un même instrument où l’observateur est une source possible d’erreurs
Équivalence
Si plusieurs observateurs sont impliqués, l’indice d’équivalence peut être quoi?
Le pourcentage d’accord inter- juges (coefficient Kappa)
Si ce sont des questions de tests, l’indice d’équivalence est quoi?
un coefficient de corrélation entre les réponses à des échantillons de questions des
deux instruments
Qui suis-je? Degré de consistance qu’offrent les réponses d’un individu aux questions variées d’un test
Homogénéité (ou consistance interne)
L’homogénéité peut aussi être appelé comment?
Consistance interne
L’homogénéité (ou consistance interne), s’intéresse à quoi?
La probabilité qu’un (des) item(s) mesure(nt) autre chose que ce qui est prévu
Qui suis-je? Statistique fréquemment utilisée pour mesurer la consistance interne d’instruments de mesure
Alpha de Cronbach
L’alpha de Cronbach est une statistique approprié pour quels échelles?
Dichotomiques, Likert ou mesures intervalle/rapport
- alpha < 0,60 →
- alph entre 0,60 et 0,65 →
- alpha entre 0,65 et 0,70 →
- alpha entre 0,70 et 0,80 →
- alpha entre 0,80 et 0,90→
- alpha > 0,90 →
- inacceptable
- indésirable
- minimalement acceptable
- respectable
- très bien
6 excellent
Qui suis-je? Une statistique anciennement utilisée pour mesurer la consistance interne d’instruments de mesure où les items sont dichotomiques (e.g., oui-non)
Formule 20 de Kuder-Richardson (K-R 20)
Puisque le 20 de Kuder-Richardson (K-R 20) est désuet, quelle statistique peut faire le travail aussi?
Alpha de Cronbach
Interprétation du coéficient de K-R 20 (étendue 0.0 – 1.0) similaire à quelle autre statistique?
Alpha de Cronbach
Qui suis-je? Méthode pour laquelle on divise en deux le test pour évaluer la relation entre les deux moitiés.
Méthode moitié-moitié
(split-half de Spearman-Brown)
Dans la méthode moitié-moitié, La corrélation nous dit ce que serait la ____1____ si le test était N fois plus _____2____ que ses _____3____
1 Fidélité
2 Long
3 Moitiés
Dans la méthode moitié-moitié :
N > 2 : prédiction pour test plus ____1____
N < 2 : prédiction pour test plus ____2____
1 Long
2 Court
Quels sont les 4 types de validité?
Interne, externe, écologique, de construit
À quoi je fais référence?
Est-ce que les données sont vraiment dues à ce qu’on prétend (expérience) ou à ce qu’on observe (étude)?
Alternativement, est-ce que les résultats ne dépendent pas d’autres facteurs non contrôlés?
Validité interne
Un haut degré de validité interne permet d’empêcher quoi?
Que des éléments étrangers ou variables parasites ne contaminent la mise à l’épreuve de l’hypothèse
Qui suis-je? Je tiens à la qualité ou à la solidité du protocole expérimental utilisé et à l’efficacité et à la rigueur des contrôles effectués
Validité interne
Quelles sont les 7 sources d’invalidité à considérer?
- Expérience vécue du participant
- La maturation
- L’opération de mesure
- La constance de l’instrument
- La régression statistique
- La sélection des participants
- La perte de participants (mortalité ou attrition)
De quelle source d’invalidité il s’agit? Événements qui surviennent pendant et entre les prises de mesures et qui ne dépendent pas de la manipulation expérimentale (e.g., divorce, perte d’emploi, nouvelle relation, etc.)
Expérience vécue du participant
De quelle source d’invalidité il s’agit? Les processus individuels qui se développent en fonction du passage du temps, tels le vieillissement, la croissance, l’expérience personnelle,
La maturation
De quelle source d’invalidité il s’agit? Le seul fait de répéter un test risque d’influencer les résultats
L’opération de mesure
De quelle source d’invalidité il s’agit? Il peut se produire des changements dans la calibration d’instrument de mesure ou dans la manière dont l’expérimentateur recueille ses données
La constance de l’instrument
De quelle source d’invalidité il s’agit? Phénomène qui se manifeste surtout quand on choisit des groupes qui se situent aux extrémités d’une échelle de mesure
La régression statistique
De quelle source d’invalidité il s’agit? Déformations systématiques dans la composition comparative des groupes expérimentaux et témoins
La sélection des participants
De quelle source d’invalidité il s’agit? Si plusieurs participants d’un même groupe abandonnent, il peut s’en suivre des effets spécifiques qui ne dépendent aucunement de la variable expérimentale
La perte des participants (mortalité ou attrition)
Maturation : Les modifications des processus individuels qui se développent en fonction du passage du temps, tels le vieillissement, la croissance, ou l’expérience personnelle, se produisent souvent à l’intérieur de périodes de temps _____1_____ _____2_____
Étant donné que ce facteur joue dans toutes études, l’utilisation d’un ____3____ ____4____ provenant de la même population ____5____ et ____6____ les effets de la ____7____
1 Très
2 Brève
3 Groupe
4 Témoin
5 Précisera
6 Contrôlera
7 Maturation
L’opération de mesure :
Le seul fait de répéter un test risque d’influencer les résultats
Les différences observées entre la ____1____ mesure et sa ____2____ peuvent dépendre simplement de l’opération de mesure et non du ____3____ ___4___ (naïf vs savant)
Un groupe ___5___ qui n’est pas exposé à la VI permettra de préciser cet ___6___ de l’opération de mesure
1 Première
2 Répétition
3 Traitement
4 Expérimental
5 Témoin
6 Effet
La constance de l’instrument : Le changement observé entre les mesures du ___1___ et du ___2___ peut donc dépendre de l’instrument de mesure
1 Pré-test
2 Post-test
La régression statistique : En faisant la sélection des participants, l’expérimentateur choisit ceux-celles qui obtiennent un score très ___1___ou très ___2___ à un moment ___3___, ce qui ne représente pas la position ___4___ de ces individus
Lors d’évaluations ___5___, ils auront tendance en tant que groupe à se rapprocher de la ___6___ (S’applique aux ___7___ ___8____
Les mesures ___9___ moins ___10___)
1 Élevé
2 Bas
3 Précis
4 Habituelle
5 Subséquentes
6 Moyenne
7 Construits
8 Variables
9 Stables
10 Susceptibles
Sélection des participants : Le fait que les participants proviennent d’une population différente peut-il être suffisant pour expliquer un changement éventuel?
Oui
La perte de participants (mortalité ou attrition) :
Si plusieurs participants d’un même groupe abandonnent, il peut s’en suivre des effets spécifiques qui ne dépendent aucunement de la variable expérimentale
Peut entraîner une diminution de la _______
Représentativité
Qui suis-je? Se préoccupe de la possibilité de généraliser les résultats de l’étude au-delà de l’échantillon, des circonstances
Validité externe
4 facteurs sont importants à considérer en lien avec la validité externe. Lesquels?
1- La réaction à la mesure
2- Les effets d’interaction d’un ou des facteurs de validité interne avec VI
3- Effets spécifiques liés au déroulement de l’expérience
4- L’interférence associée à un traitement multiple
De quel facteur de la validité externe il s’agit?
La prise de mesure au cours d’un pré-test peut contribuer à augmenter ou diminuer la sensibilité du participant à l’endroit de la variable étudiée
Les individus qui savent qu’ils sont observés vont agir différemment de ceux qui ne sont pas avertis
La réaction à la mesure
Dans la réaction à la mesure, le seul fait de demander d’observer ou d’enregistrer la fréquence ou la durée d’un comportement entraînera quoi?
Une modification du comportement
De quel facteur de la validité externe il s’agit? Se produit alors qu’un élément de validité interne co-varie avec une variable indépendante
Les effets d’interaction d’un ou des facteurs de validité interne avec VI
De quel facteur de la validité externe il s’agit?
Parfois, les particularités de la démarche expérimentale sont telles qu’elles incitent les sujets à donner telle réponse plutôt que telle autre
Effets spécifiques liés au déroulement de l’expérience
Dû aux effets spécifiques liés au déroulement de l’expérience, parfois, les particularités de la démarche expérimentale sont telles qu’elles incitent les sujets à donner telle réponse plutôt que telle autre. Ainsi, les résultats obtenus limitent grandement quoi?
La portée des conclusions ou les rendent invalides
De quel facteur de la validité externe il s’agit? Lorsque plusieurs traitements sont présentés simultanément, il devient difficile d’évaluer le poids relatif de chacun d’eux
L’interférence associée à un traitement multiple
Lorsque plusieurs traitements sont présentés simultanément, il devient difficile d’évaluer le poids relatif de chacun d’eux, à moins d’avoir quel plan?
Factoriel
Qui suis-je? Contexte dans lequel se déroule la recherche, y compris les tâches que les participants effectueront
Validité écologique
Qui suis-je? Signification que confère le sujet à la situation dans laquelle le chercheur le place ou l’étudie
Validité écologique
Quelles sont les 2 approches de validité de construit?
Validité convergente
Validité divergente (ou discriminante)
Qui suis-je? Capacité d’une mesure de produire des résultats semblables à ceux produits par d’autres mesures qui sont reliées au construit en question
Validité de construit convergente
Qui suis-je? Consiste à corréler un test avec un critère approprié
E.g., deux questionnaires d’estime de soi
E.g., deux mesures d’anxiété (l’une par questionnaire et l’autre par entrevue ou taux de cortisol)
Validité de construit convergente
Qui suis-je? Consiste à démontrer que le test n’est pas significativement corrélé avec des critères non pertinents
E.g., l’échelle d’intelligence verbale ne corrèle pas avec l’échelle de narcissisme dans notre batterie intelligence-personnalité
Validité de construit divergente
Les conclusions sont impossibles à tirer en présence de quoi?
D’interprétation alternatives plausibles
Les interprétations alternatives surviennent quand ?
quand des variables externes ou parasites ou confondantes peuvent avoir influencé les résultats
Les interprétations alternatives empêchent le progrès. Un ensemble de procédures existent pour contrôler les variables _______
parasites
Maintenir la variable parasite constante certifie qu’elle ne peut avoir causé les ___1____ entre les ___2____ et peut limiter la peut limiter la validité ____3____ des résultats
1 différences
2 groupes
3 externe
L’échantillonnage aléatoire protège contre quoi?
Les biais d’échantillons
L’assignation aléatoire « assure » que les groupes sont __________ avant toute intervention
comparables
L’assignation aléatoire « assure » que les groupes sont comparables avant toute intervention
Les variables parasites sont distribuées ____1____ à travers les différents groupes
Tout ce qui peut être ____2____ devrait l’être (e.g., stimuli, ordre des tâches, expérimentateurs…)
Demande un ___3____ échantillon
1 également
2 randomisés
3 gros
Si on ne peut les éliminer les variables parasites, on les inclus. Elle deviennent quoi?
La variable parasite devient une VI additionnelle
Lorsque les contrôles expérimentaux sont inexistants ou insuffisants, on fait quoi?
Contrôles statistiques
Comment faire le contrôle statistique?
Scores de changement (avant-après)
Analyse de la covariance
Corrélations partielles
Quelle est la a meilleure approche?
Le plus de contrôles possible!
Contrôle total n’est pas un objectif réalisable
Quel est l’un des obstacles les plus importants en science?
L’incapacité à contrôler les variables parasites est
