fidélité-validité-contrôle Flashcards
La ___________d’une mesure dépend de l’absence relative d’erreur de mesure
a) fidélité
b) validité
c) Contrôle
fidélité
son application entraîne toujours des résultats
semblables. Si elle mesure toujours le construit psychologique de la même façon Intelligence, personnalité,
anxiété…
a) fidélité
b) validité
c) Contrôle
fidélité
Trois types de fidélité :
Se détermine sur la base de la constance des résultats obtenus à la suite d’applications répétées de l’instrument. Habituellement, on a recours à 2 administrations de
l’instrument. **test retest **
a) Stabilité temporelle
b) Équivalence
c) Homogénéité
Stabilité temporelle
Trois types de fidélité :
Peu recommandé pour des tests de type situationnel qui mesurent un état passager (émotions, humeur) ou des
tests qui sont influencés par la mémoire ou l’apprentissage
a) Stabilité temporelle
b) Équivalence
c) Homogénéité
Stabilité temporelle
Trois types de fidélité :
Consistance des résultats obtenus à la suite de l’utilisation soit de différents instruments visant la mesure de la même caractéristique (p. ex., 16PF formes A et B) ou soit d’un même instrument où l’observateur est une source possible d’erreurs.
a) Stabilité temporelle
b) Équivalence
c) Homogénéité
Équivalence
Trois types de fidélité :
degré de consistance qu’offrent les réponses d’un individu aux questions variées d’un test. S’intéresse à la probabilité qu’un (des) item(s) mesure(nt) autre chose que ce qui
est prévu.
a) Stabilité temporelle
b) Équivalence
c) Homogénéité
Homogénéité
Équivalence : l’indice d’équivalence peut être le pourcentage
d’accord inter juges (coefficient Kappa).
a) Si plusieurs observateurs sont impliqués
b) Si ce sont des questions de tests
Si plusieurs observateurs sont impliqués
Équivalence : l’indice d’équivalence est un coefficient de corrélation entre les réponses à des échantillons de questions des deux instruments
a) Si plusieurs observateurs sont impliqués
b) Si ce sont des questions de tests
Si ce sont des questions de tests
Est-ce que les données sont vraiment dues à ce qu’on prétend (expérience) ou à ce qu’on observe (étude)?
Est-ce que les résultats ne dépendent pas d’autres facteurs non contrôlés?
a) Validité Interne
b) Validité externe
c) Validité écologique
d) Validité de construit
Validité Interne
tient à la qualité ou à la solidité du protocole expérimental
utilisé et à l’efficacité et à la rigueur des contrôles effectués : 7 sources d’invalidité à considérer
Haut degré = empêcher que des éléments étrangers ou variables parasites ne contaminent la mise à l’épreuve de l’hypothèse (Pensez aussi biais)
a) Validité Interne
b) Validité externe
c) Validité écologique
d) Validité de construit
Validité Interne
Validité interne: Événements qui surviennent pendant et entre les prises de mesures et qui ne dépendent pas de la manipulation expérimentale :divorce, perte d’emploi, nouvelle relation, etc.
a) Expérience vécue du participant
b) La maturation
c) L’opération de mesure
Expérience vécue du participant
Validité interne: Les processus individuels qui se développent en fonction du passage du temps; vieillissement, croissance, expérience personnelle, etc. Étant donné que ce facteur joue dans toutes études, l’utilisation d’un groupe témoin provenant de la même population précisera et contrôlera ses effets
a) Expérience vécue du participant
b) La maturation
c) L’opération de mesure
La maturation
Validité interne: La répétition d’un test peut influencer les résultats, car les différences entre les mesures successives peuvent être dues à l’effet même de la mesure plutôt qu’au traitement expérimental. L’utilisation d’un groupe témoin non exposé à la variable indépendante (VI) permet de distinguer si les changements observés proviennent de l’opération de mesure elle-même ou du traitement expérimental.
a) Expérience vécue du participant
b) La maturation
c) L’opération de mesure
d) Constance de l’instrument
L’opération de mesure
un participant devient plus familier avec le test après l’avoir passé une première fois
Validité interne: Il peut se produire des changements dans la calibration d’instrument de mesure ou dans la manière dont l’expérimentateur recueille ses données.
Observateurs peuvent se fatiguer, s’améliorer, ou empirer! changement observé entre pré-test et post-test
a) Expérience vécue du participant
b) La maturation
c) L’opération de mesure
d) Constance de l’instrument
Constance de l’instrument
Validité interne: Il peut se produire des changements dans la calibration d’instrument de mesure ou dans la manière dont l’expérimentateur recueille ses données.
Observateurs peuvent se fatiguer, s’améliorer, ou empirer! changement observé entre pré-test et post-test
a) Perte des participants
b) Sélection des participants
c) Régression statistique
d) Constance de l’instrument
Constance de l’instrument
Validité interne: Quand on choisit des groupes qui se situent aux extrémités d’une échelle de mesure. Lors d’évaluations subséquentes, ils auront tendance en tant que groupe à se
rapprocher de la moyenne. S’applique aux construits variables. Les mesures stables = moins susceptibles
a) Perte des participants
b) Sélection des participants
c) Régression statistique
d) Constance de l’instrument
Régression statistique
Validité interne: Les déformations systématiques dans la composition des groupes expérimentaux et témoins peuvent fausser les résultats. Par exemple, si le groupe expérimental est composé de personnes consultant un psy pour une peur des hauteurs, tandis que le groupe témoin provient de la population générale, ces différences initiales peuvent expliquer les changements observés plutôt que le traitement expérimental lui-même
a) Perte des participants
b) Sélection des participants
c) Régression statistique
d) Constance de l’instrument
Sélection des participants
Validité interne: Si plusieurs participants d’un même groupe abandonnent, il peut s’en suivre des effets spécifiques qui ne dépendent aucunement de la variable expérimentale. Peut entraîner une diminution de la représentativité.
a) Perte des participants
b) Sélection des participants
c) Régression statistique
d) Constance de l’instrument
Perte des participants
Se préoccupe de la possibilité de généraliser les résultats de l’étude au-delà de l’échantillon, des circonstances.
a) Validité Interne
b) Validité externe
c) Validité écologique
d) Validité de construit
Validité externe
Validité externe:
Prise de mesure au pré-test peut influencer la sensibilité des participants envers la variable étudiée. Le simple fait de savoir qu’ils sont observés peut modifier leur comportement. Ex: compter leurs cigarettes durant le pré-test peut les rendre conscients de leur consommation et influencer leur comportement.
a) Réaction à la mesure
b) Effets d’interaction d’un ou des facteurs de validité interne avec VI
c) Effets spécifiques liés au déroulement de l’expérience
d) L’interférence associé à un traitement multiple
Réaction à la mesure
Validité externe:
Un problème de validité interne survient lorsqu’un facteur extérieur (ex. : surchauffe de l’ordinateur) affecte les résultats en covariant avec la variable indépendante. Par exemple, si le groupe contrôle est principalement testé en après-midi alors que l’ordinateur surchauffe, les temps de réaction peuvent être surestimés, faussant la comparaison avec le groupe expérimental. Cela reflète un manque de constance de l’instrument lié à un problème de fidélité.
a) Réaction à la mesure
b) Effets d’interaction d’un ou des facteurs de validité interne avec VI
c) Effets spécifiques liés au déroulement de l’expérience
d) L’interférence associé à un traitement multiple
Effets d’interaction d’un ou des facteurs de validité interne avec VI
Validité externe:
Certaines caractéristiques de la démarche expérimentale peuvent influencer les réponses des participants. Par exemple, un sondage sur l’anxiété liée aux vols rempli après un écrasement médiatisé peut fausser les résultats, limitant ou invalidant les conclusions obtenues
a) Réaction à la mesure
b) Effets d’interaction d’un ou des facteurs de validité interne avec VI
c) Effets spécifiques liés au déroulement de l’expérience
d) L’interférence associé à un traitement multiple
Effets spécifiques liés au déroulement de l’expérience
Validité externe:
Lorsque plusieurs traitements sont appliqués en même temps, il est difficile de déterminer l’impact spécifique de chacun. Par exemple, un programme contre le bégaiement combinant relaxation, imagerie et exposition peut réussir, mais sans plan factoriel, l’efficacité de chaque composante reste incertaine.
a) Réaction à la mesure
b) Effets d’interaction d’un ou des facteurs de validité interne avec VI
c) Effets spécifiques liés au déroulement de l’expérience
d) L’interférence associé à un traitement multiple
L’interférence associé à un traitement multiple
Le contexte de la recherche inclut les tâches assignées aux participants et la similitude avec leur environnement réel. Par exemple, un casino simulé en laboratoire peut reproduire le décor physique, mais pas l’expérience psychologique authentique. La signification que le participant attribue à la situation influence la pertinence des résultats
a) Validité Interne
b) Validité externe
c) Validité écologique
d) Validité de construit
Validité écologique
La validité de construit évalue si un test mesure correctement le construit défini par son cadre théorique. Elle se divise en deux approches :
Le test produit des résultats similaires à ceux d’autres mesures liées au même construit. Exemple : comparer deux questionnaires sur l’estime de soi ou deux mesures d’anxiété (questionnaire et taux de cortisol).
a) Validité convergente
b) Validité divergente
Validité convergente
La validité de construit évalue si un test mesure correctement le construit défini par son cadre théorique. Elle se divise en deux approches :
Le test ne corrèle pas avec des critères non pertinents. Exemple : une échelle d’intelligence verbale ne corrèle pas avec une échelle de narcissisme.
a) Validité convergente
b) Validité divergente
Validité divergente
V ou F
Les conclusions deviennent incertaines lorsque des interprétations alternatives plausibles existent. Celles-ci surviennent lorsque des variables externes, parasites ou confondantes influencent les résultats.
Vrai
Les interprétations, les biais et le bruit empêchent les avancées et ne peuvent être contrôlées par aucune procédures.
Faux
Ces interprétations empêchent les avancées et peuvent être contrôlées par diverses procédures. Une méthode consiste à maintenir constante la variable parasite, afin de garantir qu’elle n’ait pas causé les différences observées entre les groupes, bien que cela puisse limiter la validité externe des résultats.
L’échantillonnage ____________ protège contre les biais d’échantillons. Elle «assure» que les groupes sont comparables avant toute intervention.
aléatoire
(Les variables parasites sont distribuées également à travers les différents groupes.)
Tout ce qui peut être randomisé devrait l’être (stimuli, ordre des tâches, expérimentateurs…)
Demande un __________ échantillon!
gros
Plans factoriels
Si on ne peut les éliminer…. les inclure!
La variable parasite devient une _________ additionnelle
un plan 2 (sexe) x 3 (drogue) x 3 (eau)
VI
Contrôles statistiques
Lorsque les contrôles expérimentaux sont inexistants ou insuffisants
✓ Scores de ___________ (avant-après)
✓ Analyse de la __________________
✓ Corrélations ________________
✓ Scores de changement (avant-après)
✓ Analyse de la covariance
✓ Corrélations partielles
La meilleure approche= Le plus de _______________ possibles!
contrôles
V ou F
Le contrôle total est un objectif réalisable.
Faux
Contrôle total n’est pas un objectif réalisable. L’incapacité à contrôler les variables parasites est un
des obstacles les plus importants en science. Dès qu’un évaluateur identifie un parasite raisonnable,
la publication devient TRÈS difficile.
Concerne la consistance des résultats obtenus à l’aide :
De différents instruments mesurant la même caractéristique.
Du même instrument, mais lorsque plusieurs observateurs peuvent introduire des erreurs.
a) stabilité temporelle
b) Équivalence
c) Homogénéité ou consistance interne
L’équivalence
Exemples et méthodes pour mesurer l’équivalence :
Différents instruments : Par exemple, les formulaires A et B du test 16PF (un test de personnalité) sont deux versions différentes du même test. L’équivalence consiste à vérifier si les résultats obtenus avec ces deux versions sont ________________
cohérents.
Exemples et méthodes pour mesurer l’équivalence :
Accord inter-juges : Lorsque plusieurs observateurs évaluent les mêmes comportements, on mesure leur niveau d’accord avec le coefficient Kappa. Cela indique dans quelle mesure leurs évaluations sont ____________
similaires.
Exemples et méthodes pour mesurer l’équivalence :
Questions de tests : Pour comparer deux ensembles de questions mesurant le même concept, on utilise un ________________ de ____________pour évaluer si les résultats sont similaires.
coefficient de corrélation
Mesure le degré de cohérence des réponses à différentes questions d’un même test. Elle indique si tous les items mesurent bien le même concept ou s’il y a des items qui pourraient mesurer autre chose.
a) stabilité temporelle
b) Équivalence
c) Homogénéité ou consistance interne
L’homogénéité
Méthodes statistiques pour mesurer l’homogénéité :
Très courante pour mesurer la consistance interne d’échelles avec des réponses de type dichotomique (oui/non), Likert (par exemple : d’accord/pas d’accord), ou des mesures intervalle/rapport.
Plus l’alpha est proche de 1, plus la consistance interne est élevée.
une valeur de 0,70 ou plus est généralement considérée comme acceptable
a) Alpha de Cronbach
b) Formule Kuder-Richardson 20 (K-R 20)
c) Méthode moitié-moitié (split-half de Spearman-Brown)
Alpha de Cronbach
Méthodes statistiques pour mesurer l’homogénéité :
Le test est divisé en deux moitiés (par exemple, les questions paires et impaires).
Objectif : Évaluer la corrélation entre ces deux moitiés pour estimer la fidélité du test complet.
a) Alpha de Cronbach
b) Formule Kuder-Richardson 20 (K-R 20)
c) Méthode moitié-moitié (split-half de Spearman-Brown)
Méthode moitié-moitié (split-half de Spearman-Brown)
Corrélation P*xx’ :
Prédit la fidélité si le test était plus long ou plus court.
Exemple :
Si
𝑁>2 on prédit la fidélité pour un test plus __________
N<2, on prédit la fidélité pour un test plus ___________
𝑁>2 on prédit la fidélité pour un test plus long.
N<2, on prédit la fidélité pour un test plus court.
Méthodes statistiques pour mesurer l’homogénéité :
Ancienne méthode pour les tests avec des items dichotomiques (réponses oui/non).
Similaire à l’Alpha de Cronbach mais spécifiquement pour les questions à deux options
a) Formule Kuder-Richardson 20 (K-R 20)
b) Méthode moitié-moitié (split-half de Spearman-Brown)
Formule Kuder-Richardson 20 (K-R 20)
Garantit la cohérence des résultats entre différents instruments ou juges.
a) Équivalence
b) Homogénéité
Équivalence
Vérifie si les items d’un test mesurent bien le même concept.
Ces concepts assurent que les outils de mesure sont fiables et cohérents, contribuant ainsi à la validité des résultats obtenus.
Homogénéité
V ou F
Fidélité, Équivalence et Homogénéité sont des concepts qui assurent que les outils de mesure sont fiables et cohérents.
V
contribuant ainsi à la validité des résultats obtenus :)
