Méta-analyse Flashcards

1
Q

La qualité de la méta-analyse dépend notamment de quoi ?

A

La qualité de la revue systématique

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
2
Q

Comment pouvons-nous décrire la taille d’effet moyenne dans une méta-analyse ?

A

Fait référence à une moyenne pondérée des résultats en fonction du n et de la dispersion des résultats (importance diff d’une étude à l’autre)

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
3
Q

Quels sont les critères préalables à endosser pour faire une méta-analyse ?

A

Au moins 2 études
Ressemblances au plan clinique (population, milieu, intervention, groupes de comparaison, mesures comparables) et méthodologique
→ Donc à partir de notre revue, on peut sélectionner les études qui vont fonctionner pour la méta-analyse

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
4
Q

Qu’est-ce que la méthode de comptage de votes et pourquoi cette méthode est-elle considérée comme étant inadéquate ?

A

Compter les études qui montrent un résultat significatif vs non-significatif.

Plus gros problème : méthode basée sur la valeur de p → un plus petit p (0.05 vs 0.01) ne signifie pas une meilleure/plus grande efficacité

Limité par la taille d’échantillonnage, influence du biais de publication (vs méta-analyse qui permet de le vérifier), ne donne pas des informations sur l’importance de l’effet/association
→ Donc oui la taille d’effet influence la valeur de p, mais il y a pleins d’autres choses aussi !!

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
5
Q

Qu’est-ce que la taille d’effet ?

A

Indique l’ampleur et la direction de la différence entre 2 groupes (p.ex. intervention vs contrôle) et de l’association entre 2 variables

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
6
Q

Expliquez différents exemples de tailles d’effet

A

DIFFÉRENCES ENTRE 2 GROUPES
- Différence de moyennes (variables continues ou dichotomiques)
→ différence sur une unité qui fait du sens (p.ex. nb de sx, réussite/échec), en fct de l’échelle que l’on utilise et si elle ns permet de la définir en termes concrets

  • Différence de moyennes standardisées (variables continues)
    → unité comparable pour toutes les mesures (d de Cohen, g de Hedges) en divisant par l’écart-type combiné
  • Rapport de cotes (VD dichotomique slmt)
    → ratio entre le risque (%) de réussite vs le risque d’échec pour les participants du groupe intervention vs contrôle

ASSOCIATION DE VARIABLES
- Coefficient de corrélation (r)

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
7
Q

Quelle taille d’effet est peu utilisée dans les méta-analyses et pourquoi ?

A

Différence de moyennes, pcq rare que toutes les études vont utiliser toutes la même mesure/manière de mesurer le outcome.

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
8
Q

Dans quelles circonstances utilisons-nous le d de Cohen vs le g de Hedges ?

A

g de Hedges : pour les très petits échantillons (n<20 pour l’ensemble des participants, pas par condition)

Sinon, d de Cohen

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
9
Q

Quelle est la différence entre les prémisses du modèle à effet fixe et le modèle à effets aléatoires ?

A

Effet fixe a comme prémisse qu’il existe une seule véritable taille d’effet et que les différentes études de la méta-analyse estiment cette même taille d’effet, soit que chaque étude est un échantillon de la même population. La méta-analyse sert donc à estimer cette véritable taille d’effet. La dispersion/variabilité s’expliqueraient par des erreurs intra-études

Effets aléatoires a comme prémisse qu’il existe plrs véritables tailles d’effets, pcq les différentes études ne feraient pas partie de la même population. Ainsi, il peut existe différentes “vraies” tailles d’effet selon différentes caractéristiques (intensité intervention, sexe, âge…). La méta-analyse permet d’estimer la MOYENNE de ces nombreuses tailles d’effet et de comprendre les variations. La dispersion s’expliqueraient par des erreurs intra-études et inter-études.

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
10
Q

Quelle étape est différente dans le calcul de la méta-analyse dans le modèle à effets aléatoires ?

A

Ajout d’une constante représentant la variance véritable dans le calcul du poids de chaque étude.

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
11
Q

Quelles sont les différences que l’on peut observer dans les résultats d’une même méta-analyse si on utilise un modèle à effet fixe vs modèle à effets aléatoires ?

A

Le modèle à effets aléatoires a des poids pondérés qui se ressemblent plus que dans le modèle à effet fixe en raison du calcul qui est différent.

Conséquemment, l’effet combiné varie d’un modèle à l’autre. Souvent, dans le modèle à effets aléatoires, l’effet combiné aura un intervalle de confiance plus grand, soit une plus grande marge d’erreur, ce qui fait qu’il est plus difficile d’obtenir un effet combiné significatif dans le modèle à effets aléatoires.

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
12
Q

Dans quel modèle de méta-analyse est-il possible de décrire l’hétérogénéité des études ? Que permet de faire la description de l’hétérogénéité ?

A

Effets aléatoires

Permet d’interpréter la taille d’effet combinée, soit la moyenne des tailles d’effet réelles → à quel point notre estimé est précis
Tester les explications de cette hétérogénéité → dépend du nb d’études recensées, il en faut un nb suffisant

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
13
Q

Quels sont les 3 indices d’hétérogénéité et que calculent-ils ?

A

T2 (tau carré) : estimé de la variance inter-études

Q de Cochran (par test de khi-carré) : teste si les tailles d’effets des études diffèrent significativement de la taille d’effet combinée au-delà des différences attendues en raison de l’erreur d’échantillonnage (avec valeur p : si sign = hétérogène)
→ variable comme telle du Q ne dit pas grand chose en soi, c’est vrm en regardant la valeur de p que ça fait du sens

I2 de Higgins : proportion de la variance totale due à l’hétérogénéité inter-études (%)

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
14
Q

Quel indice d’hétérogénéité perd bcp de puissance statistique s’il y a peu d’études dans la méta-analyse ? Sachant cela, quel indice d’hétérogénéité est-il mieux de privilégier ?

A

Q de Cochran.

Le I2 est à privilégier, car il permet de statuer le % d’hétérogénéité. Si le Q est significatif, intéressant de le considérer, mais s’il est non-significatif, il est hâtif de statuer que nos études sont homogènes, surtout sachant que la puissance statistique du Q est affectée par le nb d’études. Le I2 nous permet d’en savoir davantage sur le degré d’hétérogénéité.

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
15
Q

Quelles sont les analyses que l’on peut faire pour trouver les explications de l’hétérogénéité dans notre méta-analyse ?

A

Analyses de sous-groupes

Méta-régression

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
16
Q

Qu’est-ce que l’analyse de sous-groupes ? Que permet-elle de faire ?

A

Permet de voir si la taille d’effet varie selon les sous-groupes (p.ex. différentes populations [ados vs adultes], formes d’intervention [ind. vs groupe], différentes mesures [court vs long-terme])

L’analyse de sous-groupe implique donc le calcul d’une taille d’effet combinée pour chaque sous-groupe et d’un test de différence entre les 2 tailles d’effets des sous-groupes

17
Q

Qu’est-ce que la méta-régression ? Qu’est-ce qui diffère entre l’analyse de sous-groupes et la méta-régression ?

A

Permet de tester la relation entre une variable modératrice et la taille d’effet.

Dans l’analyse de sous-groupe, notre variable modératrice est dichotomique (p.ex. intervention 4 sem vs 6 sem). Dans la méta-régression, notre variable modératrice peut être dichotomique, mais aussi continue.

18
Q

Que permet de faire Jadad ? Quel est le résultat typique de ce test ?

A

Permet de voir selon la qualité de l’étude si la taille d’effet augmente ou diminue. Dans la majorité des cas, la taille d’effet diminue plus que la qualité de l’étude est bonne

19
Q

Dans quelles circonstances (étapes) de la méta-analyse retrouvons-nous une puissance statistique habituellement élevée et dans quelles étapes peut-elle être faible ?

A

Élevée : estimation de l’effet combiné (pcq on augmente le n)

Faible :

  • Évaluer l’hétérogénéité (notre n n’est plus le nb de participants mais le nb d’études → si peu d’études, ↓ puissance)
  • Analyser des effets modérateurs (si peu d’études dans chaque sous-groupe → ↓ puissance, ce qui signifie que l’on peut ne pas détecter l’influence des modérateurs alors qu’elle est réelle)
20
Q

Nommez et expliquez des considérations à prendre en compte dans l’utilisation de la méta-analyse.

A

Puissance statistique : il peut être parfois difficile de détecter l’hétérogénéité et l’influence des variables modératrices si peu d’études overall ou dans chaque sous-groupe

Multiples résultats : différentes mesures pour un même résultat (p.ex. différentes manières de quantifier le cmpt de l’enfant), différents groupes de comparaison, plrs temps de mesure (devis mesures répétées)… Aspect à considérer et à se prononcer avant la revue systématique et la méta-analyse

Quelle taille d’effet choisir : il peut exister plrs tailles d’effet pour le même résultat (p.ex. taille d’effet intervention 1 mois, 3 mois, 6 mois…). Il faut être transparent et expliquer pourquoi on a combiné ou analysé séparément les tailles d’effet (attention au biais de rapport, p.ex. si une seule mesure sur 3 fonctionne, ne pas automatiquement prendre la seule mesure qui marche) et choisir les analyses statistiques en conséquence si les tailles d’effet ne sont pas indépendantes (p.ex. corrélation entre mesure auto/hétéro-rapportée). Encore une fois, choses à considérer à priori.

21
Q

Qu’est-ce qu’une analyse de sensibilité ? Est-ce une analyse primaire ou secondaire ? Est-ce uniquement applicable à la méta-analyse ?

A

Permet de mesurer la sensibilité des résultats, soit à quel point nos résultats risquent de changer si on avait fait un autre choix méthodologique à quelque part. Une analyse de sensibilité vise donc à ré-analyser les données en faisant d’autres choix (p.ex. inclure/exclure, combiner/séparer différentes mesures)

Secondaire. Non.

22
Q

Sur quoi est fondée la critique que la méta-analyse est réductrice ? Que peut-on faire pour qu’elle soit moins réductrice et donc plus informative ?

A

Parce que la méta-analyse réduit plusieurs études à une seule taille d’effet.

Que faire ?

  • Toujours considérer l’hétérogénéité → si l’hétérogénéité est grande, c’est de ça qu’il faut parler plus que la taille d’effet combinée (p.ex. au lieu de centrer sur le fait qu’il n’existe pas de diff sign entre les 2 groupes, plutôt parler que les résultats sont hétérogènes d’une étude à l’autre) et expliquer cette hétérogénéité si possible à l’aide d’analyses de sous-groupes/méta-régression
  • Présenter une synthèse nuancée
23
Q

Sur quoi est fondée la critique que la méta-analyse est susceptible de présenter un biais de publication ou de rapport ? Que peut-on faire pour minimiser l’impact du biais de publication dans notre méta-analyse ?

A

Parce que les effets statistiquement significatifs ont tendance à être plus rapportés (biais de rapport) dans les études et les études ayant des résultats significatifs ont tendance à être plus publiées (biais de publication).

Que faire ?
- Rechercher des études non-publiées (consulter les auteurs, experts, protocoles d’essais cliniques, littérature grise)
- Examiner la distribution des tailles d’effet
→ Comparer études publiées vs non-publiées avec une analyse de sous-groupes
→ Faire un diagramme en entonnoir

24
Q

Qu’est-ce que le test Egger ?

A

Permet de mesurer statistiquement s’il y a une asymétrie dans le diagramme en entonnoir et manifeste des indices d’un biais de publication. Si test significatif, SUGGÈRE une asymétrie (mais pour en être sur, mieux de faire une analyse publiée vs non-publiées en sous-groupes)

25
Q

Quelles sont les caractéristiques d’un diagramme d’entonnoir qui suggèrent une symétrie dans les résultats ?

A

On s’attend à ce que les études plus précises (donc plus vers le haut) soient plus près de la ligne centrale (taille d’effet combinée) par rapport aux études moins précises (soit plus petit n, plus de variance, etc.) (vers le bas) qui devraient s’éloigner du centre. On s’attend à ce que les points soient symétriques de chaque côté.

26
Q

Sur quoi est fondée la critique que la méta-analyse compare des pommes et des oranges ? Que peut-on faire pour éviter de comparer des études trop hétérogènes ?

A

Parce que la méta-analyse peut parfois comparer des études qui sont trop différentes

Que faire ?

  • Critères d’inclusion/exclusion clairs
  • Parler de l’hétérogénéité
  • Tenter d’expliquer l’hétérogénéité avec des analyses supplémentaires
27
Q

Sur quoi est fondée la critique que la méta-analyse ait un fonctionnement “garbage in, garbage out” ? Que peut-on répondre à cette critique ? Que peut-on faire pour favoriser la qualité de la méta-analyse ?

A

Parce que la méta-analyse ne peut être meilleure que la qualité des études incluses.

Quoi répondre ?
- C’est vrai si tous les biais des études retenues vont dans le même sens, mais ça nous permet de trier la qualité des études et d’évaluer la qualité de la littérature et de faire des recommandations pour les études futures.

Que faire ?

  • Inclure la qualité des devis dans les critères d’inclusion (p.ex. essais randomisés)
  • Examiner si la qualité des études modère les résultats (sous-groupes ou méta-régression)
28
Q

Sur quoi est fondée la critique que la méta-analyse peut omettre des études importantes ? Est-ce vrai ? Que peut-on faire pour contrer cela ?

A

Critique souvent faite par un auteur dont son étude n’a pas été retenue. Pas une critique légitime si la revue systématique a bien été réalisée.

Que faire ?

  • Élaborer des critères de sélection transparents et clairs
  • Justifier l’exclusion des études
29
Q

Sur quoi est fondée la critique que la méta-analyse peut ne pas être répliquée dans un nouvel essai randomisé. Qu’est-ce que cela veut dire ?

A

Parce que le résultat de la méta-analyse est parfois contredit par un nouvel essai randomisé de grande envergure.

Qu’est-ce que ça veut dire ?

  • Est-ce qu’on parle slmt de la signification statistique de l’effet (comptage de votes) ? → au lieu du p, il faut regarder la taille d’effet et si elle rentre dans l’IC de la méta
  • Résultats de la nouvelle étude ne sont pas en accord avec les résultats des études incluses dans la méta-analyse
  • Reflète la variation dans les études