Les sources d'invalidité et de biais en recherche

Question 1

Qu’est-ce que la validité ?

Answer 1

Capacité d’une recherche ou d’un test à mesurer avec justesse ce dont il est censé rendre compte.

Question 2

Questions que l’on peut se poser pour savoir si c’est valide ? (2)

Answer 2

1. Les résultats obtenus sont-ils contaminés ?

2. Est-il possible d’expliquer les résultats autrement que par la VI ?

Question 3

Quels sont les trois grandes catégories de recherche quantitative ?

Answer 3

Recherche descriptive
Recherche corrélationnelle/transversale
Recherche expérimentale

Question 4

Qu’est-ce qu’un recherche descriptive ?

Answer 4

Permet de décrire les phénomènes. (observation)

Souvent seulement 1 variable.

Question 5

Qu’est-ce qu’une recherche corrélationnelle/transversale ?

Answer 5

Vise à décrire des liens ou des relations entre les phénomènes (corrélation).
2 variables ou plus.
Pas de lien de cause à effet.

Question 6

Qu’est-ce qu’une recherche expérimentale ?

Answer 6

Vise à établir des relations causales (lien entre cause et effet) entre les évènements.
Implique généralement la comparaison de deux groupes (contrôle VS expérimental)
Inclut méthode (pré), quasi-expérimentale et expérimentale.

Question 7

Qu’implique la méthode expérimentale ?

Answer 7

De manipuler certaines variables (indépendantes, habituellement un traitement, une intervention, une thérapie, un programme, etc.) ; variable provoquée.
De contrôler systématiquement tous les facteurs susceptibles d’influencer le phénomène à l’étude (biais).

Question 8

Quelles questions peut-on se poser pour la validité interne ?

Answer 8

Est-ce que les observés sur la VD sont dus aux VI ?
Est-ce que l’on peut conclure à la présence d’une relation causale (de cause à effet) ?
Y a-t-il des hypothèses rivales qui peuvent expliquer les résultats ? (plusieurs biais possibles).

Question 9

Qu’est-ce que la validité interne ?

Answer 9

Représente le degré auquel une étude établit clairement que les effets observés découlent de la manipulation de la VI.
(autre variable peut expliquer l’effet (VD) ).

Question 10

Quelles sont les sources de biais, par ordre d’importance ? (10)

Answer 10

Facteurs historiques
Maturation
Sélection des participants
Fluctuations de l'instrument
Réactivité de la mesure
Régression vers la moyenne (ou régression statistique)
Défection des participants
Attentes des participants
Diffusion/imitation du traitement
Effets de l'expérimentateur (ses actions, ses attentes et ses attributs)

Question 11

Qu’est-ce que les facteurs historiques ?

Answer 11

Tout évènements qui se produit en dehors de la recherche entre deux moments de mesure autre que la VI. (ex: évènements extérieurs)

Question 12

Qu’est-ce que la maturation ?

Answer 12

Tout changement qui se produit naturellement chez les participants avec le passage du temps. (ex: à l’intérieur du participant, biologie ou psychologique)

Question 13

Qu’est-ce que la sélection des participants ?

Answer 13

Toutes particularités dans le mode de sélection des participants à un groupe qui pourraient expliquer les résultats. Toutes différences dans le mode de sélection ou d’affectation des participants aux groupes lorsque deux groupes ou plus. (ex : auto-affectation; gens plus motivés à changer)
Faut que départ le groupe témoin soit semblable au temps 1 que le groupe expérimental

Question 14

Qu’est-ce que les fluctuations de l’instrument ?

Answer 14

Tout changement qui se produit dans la prise de mesure répétée (VD) qui pourrait entrainer des erreurs.
Ex: expérimentateur plus habile avec la mesure, ou fatigue, ennui, instrument fluctue ; balance dérèglé, pas même instruction au T1 qu’au T2.

Question 15

Qu’est-ce que la réactivité de la mesure ?

Answer 15

Toutes réactions du participant dues au fait d’être évalué.
Ex: effet de sensibilisation ou d’effet d’inoculation, motivation. Peut se rappeler des questions au T1 quand il répond au T2.

Question 16

Qu’est-ce que la régression vers la moyenne/ régression statistique ?

Answer 16

Phénomène statistique lorsqu’un individu ou groupe sur une mesure extrême est retenu.
Les extrêmes sont moins extrêmes avec le temps, retour vers la moyenne (statistiquement prouvé).
Ex: on sélectionne seulement les extrêmes pour notre expérience.

Question 17

Qu’est-ce que la défection des participants (mortalité expérimentale, attrition) ?

Answer 17

Départ de la recherche, abandon ou perte différentielle des participants.
Deux situations possibles :
1. Taux d’abandon différents dans les conditions (1 groupe).
2. Taux d’abandon similaire dans les conditions, mais groupes ne sont plus comparables (2 groupes).

Question 18

Qu’est-ce que les attentes des participants ?

Answer 18

Toutes attentes des participants face à la recherche (interprète, imagine ou planifie les réponses) qui influencent les résultats.
Ex: phénomène de désirabilité sociale.

Question 19

Qu’est-ce que la diffusion/imitation du traitement ?

Answer 19

Toutes ressemblances entre les conditions contrôle et témoin.

Question 20

Qu’est-ce les effets de l’expérimentateur, ses actions ?

Answer 20

Les informations données ne sont pas claires.

Les informations sont données différemment d’un participant à l’autre.

Question 21

Qu’est-ce que les effets de l’expérimentateur, ses attentes ?

Answer 21

Motiver à trouver des résultats significatifs ou qui confirment ses hypothèses.
Entreprendra une expérience s’il est convaincu de trouver des résultats :
1. Effets sur la collecte de données : objectivité scientifique VS cas limites.
2. Effets sur les participants : effet Pygmalion.
Effet de la tendance actuelle des revues scientifiques à publier des résultats positifs significatifs.

Question 22

Qu’est-ce que les effets de l’expérimentateur, ses attributs ?

Answer 22

Influence de ses caractéristiques personnelles sur les participants.
Ex: anxieux VS peu anxieux, empathique VS autoritaire.

Question 23

Quelles sont les trois méthodes pour contrôler les variables de nuisance ? Et laquelle nous étudions ?

Answer 23

1. Techniques statistiques : covariante.
2. Choix du protocole de recherche (expérimental).
3. Contrôle à l’intérieur du protocole de recherche.
   Nous étudions la troisième.

Question 24

Quels sont les 6 contrôles à l’intérieur du protocole de recherche par ordre d’importance ?

Answer 24

1. L’affectation aléatoire
2. L’appariement
3. Le contrebalancement
4. Les effets de l’expérimentateur
5. La défection des participants
6. Le contrôle des attentes du participants

Question 25

Qu’est-ce que l’affectation aléatoire ?

Answer 25

Principe de base : la distribution aléatoire des variables nuisibles entre les conditions annulera leur effet sur la mesure.
Contrôler les effets : maturation, historique, sélection, régression statistique.
Ex: Table de Yates

Question 26

Qu’est-ce que l’appariement ?

Answer 26

Permet de contrôler manuellement certaines variables, on apparie les sujets selon les variables nuisibles connus. Ex: 50/50 fille/gars
Contrôler les effets : maturation, sélection des participants.

Question 27

Qu’est-ce que le contrebalancement ?

Answer 27

Permet de contrôler les effets de la réactivité à la mesure lorsque les participants participent à plusieurs conditions (VI) ou plusieurs mesures (VD).
Ex: variation de l’ordre de présentation des questionnaires.

Question 28

Qu’est-ce que le contrôle sur les effets de l’expérimentateur ?

Answer 28

Erreurs d’enregistrement : plusieurs expérimentateurs, expérimentateur naïf face aux hypothèses de recherche.
Attentes : automatisation, à l’insu ou double insu.
Attributs: automatisation, à l’insu ou double insu.

Question 29

Qu’est-ce que le contrôle de la défection des participants ?

Answer 29

Évaluer les effets de la perte sur les résultats.
Identifier les variables liées à l’abandon (utiliser ensuite comme appariement).
Utiliser une mesure incitative (rémunération) pour prévenir ce biais.

Question 30

Qu’est-ce que le contrôle des attentes du participant ? (6)

Answer 30

1. Double insu
2. Enquête post-test : petit retour afin de voir si participants connaissent hypothèses/objectifs
3. Enquête pré-expérimentale : présenter l’ensemble de la situation expérimentale (sauf objectifs), sans les faie participer.
4. Simulation : en demandant de simuler la réponse de ceux qui participent.
5. Tromperie : ex: punition sur l’apprentissage VS recherche sur l’obéissance à l’autorité.
6. Expérience déguisée : sans consentement. Ex: porte pour filles et pour gars ; vidéo.

Question 31

Qu’est-ce qu’à l’insu et à double insu ?

Answer 31

À l’insu : la personne qui prend les mesures ne connaît pas les objectifs de la recherche.
À double insu : La personne qui prend les mesures ainsi que les participants ne connaissent pas les objectifs.

Question 32

Qu’est-ce que la validité externe ?

Answer 32

Le degré auquel les résultats peuvent être généralisés à des individus, des situations ou des moments du continuum temporel différents des conditions précises dans lesquelles la recherche s’est déroulée.

Question 33

Quelles sont les 3 validités externes ?

Answer 33

1. Validité échantillonnale : à d’autres population
2. Validité écologique : à d’autres situations
3. Validité temporelle : à d’autres moments

Question 34

Qu’est-ce que la validité échantillonnale ?

Answer 34

1. Généralisation = représentativité
2. Large échantillon constitué au hasard : probabiliste.
3. Rare : (a) ressources énormes exigées et risque de grande hétérogénéité. (b) déontologie (volontaires), (c) rarement accès à la totalité de la population selon le type d’étude.
4. Échantillon constitué pour les besoins de l’étude : De convenance (volontaire, facile d’accès, ex: étudiant)
5. Se fier à l’accumulation d’études différentes.

Question 35

Qu’est-ce que la validité écologique, caractéristique du stimulus (VI et VD) ?

Answer 35

1. Effet du milieu de la recherche : transférable aux caractéristiques d’autres milieux ?
2. Effet de l’expérimentateur : caractéristiques et attentes. Résultats transférables à d’autres situations où l’expérimentateur présentent des caractéristiques similaires ?
3. Effets du matériel : résultats transférables à d’autres situations invoquées par le matériel. Ex: films ou vignette VS réel

Question 36

Qu’est-ce que la validité écologique, caractéristiques du contexte sur le participant ?

Answer 36

1. Réactivité des participants : conscience d’être étudié, individus : volontaires, réactionnaires, méticuleux, etc.
   Ex: Laboratoire VS milieu naturel
2. Interférence d’intervention multiples : exposition à plus d’une intervention (VI). Similaire à l’effet de séquence.
3. Effet de nouveauté : effet d’interruption ou changement amené dans les routines habituelles des participants.

Question 37

Qu’est-ce que la validité temporelle ?

Answer 37

Moment de la mesure des effets (VD) qui peut agir sur les résultats selon le type d’étude et le phénomène étudié :

1. Variation saisonnière : temporelle fixe (prédictible et régulier), temporelle variable (évènements particulier et irrégulier)
2. Variation cyclique : changements cycliques de nature biologique qui interviennent chez des individus, ex: changement hormonaux.
3. Variation personnelle : Changements au niveau des caractéristiques (psycho.) des participants.

Question 38

Quels sont les liens entre la validité interne et externe ?

Answer 38

Un même facteur d’invalidité peut affecter à la fois la validité interne et externe.
En général, plus on augmente la validité interne, plus on diminue la validité externe.

Question 39

Qu’est-ce que la validité de concepts ou de construit ?

Answer 39

Capacité d’une étude à mesurer et manipuler réellement les concepts théoriques qui intéressent le chercheur.
L’expérience a-t-elle vraiment mesuré ce qu’elle voulait mesurer ?
Les concepts mesurés peuvent-ils être traduits par des comportements ?