Cours 6 - Validité et devis de recherche Flashcards
Qu’est-ce que la validité?
Indice de la valeur scientifique d’une recherche, Plus une recherche est valide, plus ses résultats sont fiables, ont de la valeur et sont généralisables.
Quels sont les 2 types de validité ?
Validité interne
Validité externe
Quelle validité est plus importante entre celle interne et externe ?
La validité interne est plus importante, s’il y en a pas, on se préoccupe même pas de la validité externe
Qu’est-ce que la validité interne ?
C’est la capacité d’une étude à produire des conclusions précises concernant les relations évaluées, et l’assurance que les effets observés (VD) sont attribuables (uniquement) aux variables manipulées (VI)
Qu’est-ce que la validité externe ?
C’est la capacité d’une étude à produire des conclusions généralisables au-delà du contexte de l’étude. Potentiel de généralisation des résultats de l’étude à d’autres populations, contextes ou périodes.
Qu’est-ce qu’une variable extragène ?
Aussi connue comme: variable parasite, confondante ou de confusion
C’est une variable non-planifiée et non-contrôlée dans l’étude qui procure une explication alternative à la conclusion de l’étude (par ex., à l’effet de la VI sur la VD).
combien existe t’il de source d’invalidité ?
Il existe dix sources d’invalidité (qui menacent la validité interne) dans une recherche
Complétez : Chacune des sources d’invalidité agit comme ____ _____ ou ______-_____ pour expliquer les effets
Chacune de ces sources agit comme hypothèse rivale ou contre-hypothèse pour expliquer les effets
VRAI OU FAUX
Il est possible d’éliminer complètement les sources d’invalidité
FAUX : impossible
Pourquoi les variables extragènes sont considérés comme des menaces à la validité interne ?
car elles en compromettent les conclusions.Leur présence fait qu’il est impossible de conclure avec certitude des effets reels du Tx (ou de la VI).
Quels sont les sources d’invalidités liées aux participants
- Biais de sélection des participants
- Attentes des participants
- Perte de participants (incluant la perte différentielle)
- Imitation du traitement
Quels sont les sources d’invalidités liées à la procédure ?
- Facteurs historiques
- Maturation
Quels sont les sources d’invalidités liées à l’instrument ?
- Fluctuations de l’instrument de mesure
- Réactivité à la mesure
- Régression vers la moyenne
Quel est la source d’invalidité liée au chercheur ?
- Effets (attentes) du chercheur
Qu’est-ce que l’on veut dire par la source d’invalidité “Facteurs historiques”
Une recherche prolongée dans le temps (longitudinal) comporte un risque que les participants vivent des événements dans leur vie personnelle qui soient responsables des changements observés (plutôt qu’au Tx).
Qu’est-ce que l’on veut dire par la source d’invalidité “Maturation “
Changement attributable au simple passage du temps
Qu’est-ce que l’on veut dire par la source d’invalidité “Biais de sélection des participants”
L’assignation différentielle des participants aux groupes (pour cause de critères différents, d’attribution non-aléatoire ou de manque de rigueur).
Qu’est-ce que l’on veut dire par la source d’invalidité “Attentes des participants”
Une expérience étant une situation sociale (et non une sit. naturelle), le comportement d’un individu qui participe consciemment à une expérience dépend en partie du rôle qu’il adopte.
L’appréhension de l’évaluation: La réaction du participant au fait qu’il est évalué. Désirabilité sociale, “faking good” et “faking bad”.
Qu’est-ce que l’on veut dire par la source d’invalidité “Perte de participants (incluant la perte différentielle)”
L’échantillon au terme de la recherche n’est plus comparable à celui de départ. La perte différentielle de participants entre les groupes de comparaison mène à des groupes non-équivalents
Qu’est-ce que l’on veut dire par la source d’invalidité “Imitation du traitement”
La diffusion de l’effet du traitement au-delà du groupe expérimental. L’intervention soumise au groupe expérimental est fournie à quelques participants du groupe témoin.
(Partage des informations pré-test entre des groupes exposés des conditions différentes)
Qu’est-ce que l’on veut dire par la source d’invalidité “Fluctuations de l’instrument de mesure”
Marges d’erreur dues aux imprécisions de l’instrument (ex : fatigue d’un codeur qui fait de l’observation)
Qu’est-ce que l’on veut dire par la source d’invalidité “Réactivité à la mesure”
L’expérience acquise lors de la première complétion leur a permis d’acquérir une certaine familiarité avec l’instrument de mesure
Qu’est-ce que l’on veut dire par la source d’invalidité “Régression vers la moyenne”
Le fait que les résultats extrêmes à une évaluation tendent à revenir plus près de la moyenne lors d’une évaluation subséquente. (moins de dispersion, écart type plus petit avec le temps)
Qu’est-ce que l’on veut dire par la source d’invalidité “Effets (attentes) du chercheur”
le chercheur peut influencer les résultats en encourageant ou en donnant plus d’informations aux participants qui reçoivent le véritable traitement
OU
Prophétie auto-réalisante (si chercheur pas assez détaché, ses attributions qui interagissent, biais)
Nommez au moins 5 solutions possibles quant aux sources d’invalidités
- Utilisation d’un groupe témoin (aussi appelé groupe contrôle ou de comparaison), équivalent au groupe expérimental
- Procédure d’assignation standardisée et aléatoire aux conditions (expérimentale versus témoin)
- Demandes de confidentialité, vérification de diffusion, diminution des contacts entre participants des diverses conditions
- Utilisation de critères de sélection explicites et rigoureusement appliqués
- Assignation en simple (participant connait pas son groupe) ou en double insu (participant et chercheur connait pas son groupe)
- Documenter l’attrition (pertes) et procéder à des ajustements statistiques
- Contrebalancement des mesures (séquence, contrer la fatigue)
- Utilisation de mesures standardisées
- Expérimentation non réalisée par le chercheur
- Entraînement complet et standardisé des juges et accords inter-juges
- Sélection au hasard, éviter la sélection de groupe par valeurs extrêmes
La validité externe d’une recherche expérimentale est fortement menacée par quoi ?
par l’interaction qui existe souvent entre la situation expérimentale et les résultats obtenus.
Pourquoi dit-on que la validité externe d’une étude n’est jamais complètement terminée ?
puisqu’elle varie selon l’échantillon et ses caractéristiques
Quelle est la pertinence de la validité externe à vouloir transcender les caractéristiques particulières dans lesquelles les résultats ont été obtenus ?
afin de pouvoir les généraliser à d’autres individus que ceux ayant participé à l’expérience.
VRAI OU FAUX
Quant à la validité externe, les chercheurs veulent que les relation observées s’appliquent dans un cadre contrôlé (comme un laboratoire)
FAUX : Les chercheurs veulent que les relations observées s’appliquent à la “vraie vie”
Pourquoi est-ce que la notion de validité externe n’a pas de sens sans validité interne ?
car sans validité interne, il n’y a pas de conclusion valide à généraliser.
Si la validité interne n’a pas été rencontrée (alors il est impossible de conclure que légitimement que les résultats livrent une image juste et claire du phénomène), alors il est superflu et inapproprié de s’interroger sur leur validité externe
Quels sont les types de validité externe ?
La validité échantillonnale
La validité écologique
La validité temporelle
À quel type de validité interne est-ce que cela fait référence :
a. échantillonale
b. écologique
c. temporelle
“Affirmer que l’échantillon est représentatif de la population spécifique étudiée”
a. échantillonale
À quel type de validité interne est-ce que cela fait référence :
a. échantillonale
b. écologique
c. temporelle
” concerne la généralisation à travers le temps (autre époque, saison,…)”
c. temporelle
À quel type de validité interne est-ce que cela fait référence :
a. échantillonale
b. écologique
c. temporelle
“représente à quel point le contexte de l’étude est représentatif des contextes d’intérêt.
“
b. écologique
À quel type de validité interne est-ce que cela fait référence :
a. échantillonale
b. écologique
c. temporelle
“Correspond à la possibilité de généraliser à l’ensemble de la population d’intérêt les résultats observés à partir de l’échantillon utilisé dans la recherche”
a. échantillonale
À quel type de validité interne est-ce que cela fait référence :
a. échantillonale
b. écologique
c. temporelle
“Degré auquel les résultats peuvent être généralisés à d’autres moments du continuum temporel”
c. temporelle
À quel type de validité interne est-ce que cela fait référence :
a. échantillonale
b. écologique
c. temporelle
” représente à quel point l’échantillon utilisé est représentatif de la population d’intérêt”
a. échantillonale
À quel type de validité interne est-ce que cela fait référence :
a. échantillonale
b. écologique
c. temporelle
“Possibilité de généraliser les résultats à d’autres situations que celle dans laquelle s’est faite la collecte de données. “
b. écologique
Qu’est-ce que la représentativité d’un échantillon ?
Les caractéristiques d’un échantillon représentatif sont très similaires aux caractéristiques de la population d’origine
Quelles sont les menaces à la validité externe ?
- Caractéristique du milieu où se fait la recherche (rare, milieu non-naturel, contexte experimental, etc.)
- Variations saisonnières ou cycliques
- Non-représentativité de l’échantillon
Nommez les 3 solutions présentées quant aux menaces à la validité externe
- Échantillonnage probabiliste (toutes les personnes de la population on une chance égale d’être sélectionné pour l’étude)
- Échantillon le plus représentatif possible
- Taille échantillonale importante: Un plus grand échantillon (n) donne accès à plus d’exemples de la population ciblée (N). = augmente la validité externe
Nommez un synonyme de régression vers la moyenne
régression statistique
Nommez deux synonymes de la perte de sujets (échantillon)
mortalité expérimentale, attrition
Nommez un synonyme de la réactivité à la mesure
situation de mesure
Qu’est-ce qu’un devis de recherche
Plan des activités à accomplir dans la recherche projetée pour répondre aux questions de recherche et∕ou vérifier les hypothèses
Nommez les 3 types de devis
Devis descriptifs
Devis explicatifs
Devis prédictifs
Nommez les sous types de devis explicatifs et descriptifs
Transversal (1 seul temps de mesure) vs
Longitudinal (au moins 2 temps de mesure)
Nommez les 3 sous-types de devis prédictifs
Devis expérimentaux
Devis quasi-expérimentaux
Devis pré-expérimentaux
Qu’est-ce que l’étude transversale ?
C’est l’analyse des relations entre les différents éléments mesurés (variables).
une seule collecte de données : photo de ce qui se passe auprès de notre échantillon
un seul temps de mesure (moins de validité que pour plusieurs comme en longitudinal)
Nommez deux particularités de l’étude transversale
- Très populaire pour examiner des associations positives ou négatives.
- Examen des caractéristiques associées à une VD au moment spécifique de la collecte de données.
Quel est l’avantage de l’étude transversale ?
Permet d’établir et quantifier des relations entre variables
Quel est le désavantage de l’étude transversale ?
Ne permet pas d’établir des relations causales, ni de mesurer le changement dans le temps.
Qu’est-ce qu’une étude longitudinale
Étude des mesures répétées permettent d’examiner les éléments de continuité et les changements dans le temps.
Quelle est la différence entre une étude longitudinale prospective et rétrospective
prospectif : suivre les changements au fur et à mesure qu’ils surviennent
Rétrospectif : sur le passé, pas aussi bon récit quand ça fait longtemps que ça s’est passé
Quels sont les types de devis utiliser pour le cours de métho quanti ?
- Descriptif (population)
- Explicatif (corrélationnel: explorer ou vérifier des relations)
- Prédictif (quasi- ou expérimental: tester des relations de causalité)
VRAI OU FAUX
L’étude transversale permet de trouver des liens de causalité entre les variables à l’étude
FAUX : juste liens d’associations, corrélationnels
VRAI OU FAUX
Seulement les devis expérimentaux permettent d’établir des liens de causalité
VRAI ET FAUX : exception = études longitudinales où la cause précède l’effet dans le temps
Qu’est-ce qu’implique un devis expérimental ?
Impliquent la MANIPULATION d’une ou plusieurs variables (VIs) tout en gardant constant le niveau des autres variables (i‧e. les autres variables qui pourraient influencer la VD sont contrôlées).
Donnez au moins un exemple de devis expérimental
L’efficacité d’une thérapie pour pédophiles (vs un groupe de soutien)
Médicament vs placebo
Quels sont les 5 particularités des devis expérimentaux ?
- Les individus sont assignés aléatoirement (randomized) entre les groupes (les groupes sont donc équivalents)
- Au moins une variable (la VI) est manipulée
(la condition, le mu) - Au moins une autre (la VD) est mesurée
- Les autres variables sont contrôlées
- Généralement, un groupe (ou condition) expérimental est comparé à un autre dit témoin (groupe contrôle), qui reçoit le niveau de base de la VI (absence de traitement, liste d’attente, pilule de sucre…)
Quels sont les 2 avantages des devis expérimentaux ?
- Permet d’établir des relations causales. Seule cette méthode permet d’établir des liens de causalité (à l’exception des études longitudinales où la cause précède l’effet dans le temps).
- Permet un plus grand contrôle des facteurs non-étudiés
Quelles sont les 3 désavantages des devis expérimentaux ?
- Est souvent plus coûteux
- Artificialité potentielle de la situation
- Tous les phénomènes humains ne peuvent pas être étudiés par des devis expérimentaux: on ne peut pas tout manipuler!
Quelle est la différence entre les devis expérimentaux et ceux quasi-expérimentaux
Il n’y a pas d’assignation aléatoire aux groupes dans les devis quasi-expérimentaux
Quel est l’avantage des devis quasi-expérimentaux ?
Les devis quasi-expérimentaux ressemblent aux études expérimentales,
*MAIS les participants ne sont pas assignés aléatoirement aux différents niveaux de la VI (aucune manipulation de la VI) - UTILE quand on ne peut pas assigner aléatoirement
Quel est le désavantage des devis quasi-expérimentaux ?
Les résultats peuvent être causés par un autre facteur non-contrôlé, ou par une différence initiale entre les groupes
Dans quel contexte on doit utilisé un devis quasi-expérimental (impossibilité éthique d’utiliser un devis expérimental) ?
quand on travaille avec des conditions existantes, des conditions qui ne peuvent pas s’attribuer aléatoirement
ex : Impact d’une campagne de prévention sur les comportements à risque ou sur les taux de VIH par rapport à ceux n’ayant pas été exposés
Comment distinguons-nous le devis quasi-expérimental du devis pré-expérimental ?
le devis pré-expérimental se distingue du quasi-expérimental qui lui a toujours un pré-test et un post-test avec deux groupes (expérimental et témoin/contrôle).
Quelles sont les 3 formes de devis pré-expérimental ?
1) Pré-test post-test avec un seul groupe (expérimental)
ex : questionnaire sur l‘image corporelle avant et après une intervention sur le sujet (pas de groupe contrôle)
2) Une seule mesure (post-test) avec un seul groupe (expérimental)
ex : fin de formation : questionnaire sur si on a acquis des connaissances
3) Une seule mesure (post-test) avec deux groupes non équivalents - PAS CONSENSUEL
ex : classe dans laquelle on fait le programme et l’autre non et on mesure la variable de l’image corporelle à la fin de la période
