Cours Meta-Analyses Paris V - STC 2010
Cours Meta-Analyses Paris V - STC 2010
Cours Meta-Analyses Paris V - STC 2010
Sibilia Quilici
Objectifs
Comprendre le concept général des méta-
analyses
Comment les faire
Comment les interpréter
A partir d’une problématique, savoir identifier
le besoin pour une méta-analyse
A partir d’une revue de la littérature, savoir
lire, comprendre et interpréter les résultats de
la méta-analyse
1
Termes souvent rencontrés
Effect size DerSimonian & Laird
Pool / Combined Method
Fixed effect models Heterogeneity
Random effect models Publication bias
Direct comparison Indirect comparison
Bias Mixed treatment
Funnel plots comparison
Q test Forest plots
I²
Tau
Objectif de la présentation
Méta-analyses
2
Objectif du séminaire
Part I: Meta-analyses des données
issues des essais cliniques
3
Part I: Meta-analyses des données
issues des essais cliniques
Objectifs, sources des données, sélection des études
Estimation des mesures d’effet de traitement
Méthodes pour combiner les effets de traitement
Modèle à effets fixes
Modèle à effets aléatoires
Hétérogénéité entre études
Identification et source de biais potentiels
Analyse comparative
Comparaison directe
Comparaison indirecte
Comparaison multi-traitements
Population(s)
Mesures d’efficacité(s)
…..
4
Objectifs, sources des données,
critère de sélection des études
La qualité et validité de la méta-analyse dépend fortement des études
sélectionnées
Importance d’une revue systématique de la littérature
Sources de la littérature
Medline (www.pubmed.com), EMBASE....
Conférences (Abstracts / posters)
Registres d’essais cliniques
GlaxoSmithKline (GSK): http://ctr.gsk.co.uk/welcome.asp
5
Objectifs, sources des données,
critère de sélection des études
Fonction de l’objectif de l’analyse
Définir les critères d’inclusion / d’exclusion des études
Intêret traitement(s)
Population (age, séverité, etc. )
Design de l’étude (design, durée, etc.)
Qualité de l’essai (Méthodes de randomisation, gestion
de l’aveugle, des déviances de protocol, etc.)
Techniques de sélection
Equipe de min. 2 experts pour la sélection des articles
Représentation de la sélection
des études
6
Extraction des données
Lister tous les effets traitements recherchés et à
analyser
Donner des définitions, si nécessaire
Importance de l’effet traitement recherché:
Primaire ou secondaire
Période de temps
….
Information à l’inclusion:
Charactéristiques démographiques
Facteur maladie (sévérité, …)
….
7
Objectifs, sources des données,
sélection des études
8
Sélection des études
9
Part I: Meta-analyses des données
issues des essais cliniques
Objectifs, sources de donnée, sélection des études
Estimation de l’effet traitement
Méthodes pour combiner les effets de taille
Modèle à effets fixes
Modèle à effets aléatoires
Hétérogénéité entre études
Identification et source de biais potentiels
Analyse comparative
Comparaison directe
Comparaison indirecte
Comparaison multi-traitements
Estimation de l’effet
traitement
Définition de l’effet traitement
Comparaisons de (au moins) 2 traitements à évaluer celon des effets
identiques
Pour chaque mesure de l’effet: Estimation et inférence de la différence
de l’effet
Types de données
Des données d’essais cliniques
Estimateur à partir de rapport d’études d’essais cliniques ou de publication
Données individuelles de patients
Des données épidémiologiques
La méta-analyse est une mesure résumée de l’effet
traitement
Plusieurs manières d’évaluer l’effet
Odds-ratios Différence de moyenne
Risque relatif Donnée de survie
Différence de risque Etc…..
10
Odds-ratio (OR)
L’ Odds-Ratio est définit à partir d’un tableau de contingence
2x2:
Frequencies
Success Failure
ad
Treatment Group a b ES =
Control Group c d bc
11
La différence des moyennes
Score de sévérité moyen; moyenne de la tension
arterielle, ….. etc…..
Différence entre les deux traitements
Différence de moyennes: d
Si l’effet est une réduction du score de sévérité:
Si d < 0 => nouveau traitement est plus efficace
Si d > 0 => nouveau traitement est moins efficace que le
comparateur
Significativité: IC95% doit exclure 0
d : -5,45 95%CI (-7,7 ; -3,2)
Test de la difference de l’effet traitement via des statistiques
de test (t-test)
12
Part I: Meta-analyses des données
issues des essais cliniques
Objectifs, sources de donnée, sélection des études
Estimation de l’effet traitement
Méthodes pour combiner les effets de traitements
Modèle à effets fixes
Modèle à effets aléatoires
Hétérogénéité entre études
Identification et source de biais potentiels
Analyse comparative
Comparaison directe
Comparaison indirecte
Comparaison multi-traitements
13
Modèle à effets fixes
Etude 1
Etude 2
…
Etude n
La méthode de l’inverse
de la variance
Chaque estimateur d’étude à un poids directement
proportionel à sa variance
L’estimateur de l’effet combiné est une moyenne
pondérée de l’effet traitement de toutes les études
Poids: L’inverse de la variance de chaque étude
14
Modèle à effets fixes Estimateur réel de l’effet
traitement pour l’étude i
θˆi = θ + ε i
Modèle θˆi N (θ , ξi 2 )
Estimateur « poolé » de
l’effet traitement
∑ θˆi wi
r
θˆ = i =1r
Estimation ∑w
i =1
i
Erreur type de l’estimateur
« poolé » de l’effet
traitement
1
θˆi N (θ , w i−1 ) se(θˆ) = r
wi = 1 / var(θˆi ) ∑w
i =1
i Intervalle de confiance à
95% de l’estimateur
« poolé » de l’effet
traitement
Poids 95%CI : θˆ ± 1.96
1
r
Inverse de la variance de
chaque étude ∑w
i =1
i
15
Méthodes pour combiner les
effets de traitements
16
Modèle à effets aléatoires
Etude 1
variance entre
études Etude 2
θi ∼ N (µ,τ,)
…
Etude n
∑ θˆ w
r *
θˆ = i =1 i i
Estimation r Erreur type de l’estimateur
∑w *
i
« poolé » de l’effet
θˆi N (θ , ( w *i ) − 1 )
traitement
i =1
1
w*i = ( wi −1 + τˆ 2 ) −1 se(θˆ) = r Intervalle de confiance à
∑w
i =1
*
i
95% de l’estimateur
« poolé » de l’effet
traitement
Poids 1
(100 − α )%CI : θˆ ± zα / 2 r
Inverse de la variance de ∑w *
i
chaque étude i =1
17
Evaluation de l’hétérogénéité
entre études
Le modèle à effet aléatoire estime la variance
entre études caractérisée par Tau²
Forest plot
18
Modèle à effets fixes vs.
Modèles à effets aléatoires
Importance du poids
relatif des études
poids des études larges
réduit
poids des petites études
larges augmenté
Tendance généralement
vraie pour toutes les
méta-analyses
19
Présentation des résultats des
méta-analyses
20
Part I: Meta-analyses des données
issues des essais cliniques
Objectifs, sources de donnée, sélection des études
Estimation de l’effet traitement
Hétérogénéité entre études
Méthodes pour combiner les effets de traitement
Modèle à effets fixes
Modèle à effets aléatoires
Identification et source de biais potentiels
Analyse comparative
Comparaison directe
Comparaison indirecte
Comparaison multi-traitements
21
Visualiser l’hétérogénité
Le “forest plot”
Forest plots for 34 cholestrol lowering trials
-5.5 -5.0 -4.5 -4.0 -3.5 -3.0 -2.5 -2.0 -1.5 -1.0 -0.5 0.0 0.5 1.0 1.5 2.0 2.5 3.0 3.5 4.0 4.5 5.0
Odds ratio - log scale
Evaluation de l’hétérogénéité
entre études
X² ou Q-test
r r
H 0 : θ = θ 1 = θ 2 = ... = θ r Q = ∑ w (θˆ i i − θˆ ) 2 = ∑ w θˆ i i
2
−U
i =1 i =1
H1 :θi ≠ θ j Q χ 2 ( r − 1)
22
Evaluation de l’hétérogénéité
entre études
(Q − d f )
Mesure I2 Ι2 = 100% .
Q
23
Modèles et analyse de
l’hétérogénéité
24
Sources de bias
Biais de sélections
Choix initial définit dans le protocol d’étude
Peut-être contourné à l’aide d’analyse de sensibilité
Bias de publication
Recherches avec des résultats significatifs ont
davantage de chance d’être publiées
Accent souvent mis sur les articles en anglais
Ne prend pas en compte les travaux de recherches
en cours
25
Identification des biais de
publication: Le “funnel plot”
26
Comparaisons directes vs.
indirectes
Comparison directe
Toutes les études comparent le nouveau traitement
A à un même comparateur
Que se passe-t-il si un nouveau traitement B est
testé?
A est comparé à Placebo
B est comparé à Placebo
27
Comparaisons indirectes
28
Comparaisons multi-traitements
La comparaison multi-treatment (Mixed-treatment comparison)
est une généralisation des méta-analyses par paires
Multiple traitement =>3 ou plus
A C D 1 trial Efficacy
B C D 1 trial drug A
13 4
A B 4 trials 2
A C 1 trial Efficacy Efficacy
drug D 2 drug B
A D 12 trials
B C 2 trials 4 3
B D 1 trial Efficacy
drug C
C D 2 trials
Comparaison multi-traitements
Objectifs:
Comparer simultanément plusieurs options de traitements
Faire une seule analyse
Déterminer quel traitement à quelle probabilité d’être le
meilleur
Maintenir la randomisation
Permet des comparaisons indirectes en absence
d’essais cliniques face-face
Eviter l’investissement financier dans des études randomisées
Gain de temps de l’analyse vs. essai clinique
29
Principes généraux
Do the patients in all trials match the target population
for decision / inference
No Yes
Comparaison multi-traitements
Quatre traitements A, B, C, D
Paires disponible: AB, AC, BC, BD, CD
=> 6 log-odds ratio possibles :
A vs. B, A vs. C, A vs. D
B vs. C, B vs. D
C vs. D
Soit A le traitement de référence: les vrais effets traitement
relatifs à A sont:
dAB, dAC, dAD
Les 3 autres paires possibles sont:
dBC = dAB – dAC
dBD = dAB - dAD
dCD = dAC - dAD
30
MTC regression approach (2)
31
Analyse bayesienne – concept
général
Theorème de bayes
P(A|B) = P(A∩B)/P(B)
= P(B|A)(P(A)/P(B))
DATA
BAYES POSTERIOR
THEOREM DIST.
PRIOR
DIST.
P (θ Data ) ∝ P (θ ) P ( Data θ )
Fonction de densité Fonction de densité a
a posteriori priori
Fonction de
Vraisemblance
32
MCMC simulations
MCMC
33
Comparaisons multi-traitements
Modèle de regression
Hypothèses:
Traitement k
Etude j
Résultats: Les effets doivent être additifs
Données binomiales:
Difference des occurrences des événements
Likelihood: rj,k ~ Binomial (pj,k,nj,k) Effet traitement
Effet étude
Modèle:
34
Codes WinBUGS : Modèle à effets fixes
35
Récapitulatifs
La meta-analyse des données d’essais cliniques est un outil statistique qui
permet de combiner les résultats de plusieurs études en un seul estimateur.
Mise en évidence de
l’importance d’une recherche de littérature exhaustive et rigoureuse
l’importance de la prise en compte de l’héterogénéité
l’importance de la prise en compte des risques des biais de publication
Références
Sutton et al. Methods for meta-analysis in medical research. Ed. Wiley
Higgins et al. Measuring inconsistency in meta-analyses. BMJ 2003; 327-557
DerSimonian R, Laird N. Meta-analysis in Clinical Trials. Controlled Clinical Trials
1986;7:177-188.
36
Back-up
1 pooled estimate
37
EFFECT SIZE: THE KEY TO
META-ANALYSIS
The effect size (ES) makes meta-analysis possible.
The ES encodes the selected research findings on a numeric scale.
There are many different types of ES measures, each suited to different
research situations.
Each ES type may also have multiple methods of computation.
The effect size makes meta-analysis possible
it is the “dependent variable”
it standardizes findings across studies such that they can be directly compared
Any standardized index can be an “effect size” (e.g., standardized mean
difference, correlation coefficient, odds-ratio) as long as it meets the
following
is comparable across studies (generally requires standardization)
represents the magnitude and direction of the relationship of interest
is independent of sample size
Different meta-analyses may use different effect size indices
38
Full Bayes approach
(WinBugs)
α, β unknown uncertainty captured in a prior distribution
Joint prior distribution for the entire set of parameters
Apply Bayes theorem to estimate joint posterior distribution of
all unknown quantities
N N
p ( λ , α , β / O , E ) = ∏ p ( λi / α , β ) p (α ) p ( β ) ∏ p (Oi / λi , E i
i =1 i =1
Marginal posterior for each λi is obtained by integrating over the
other parameters, which is easy using MCMC
“Learning from experience” approach
39
Model validation
Chain convergence
Brooks German Rubin (BGR) diagnostic
Two starting points: within vs between chains variance
Autocorrelations
History plots
Model criticism
Predictive approach, using validation data (easy using MCMC) or
deleting one unit at time (time consuming)
Plot residuals vs covariates
Plot model fit
Assess predictive fit to the data: Deviance Information Criterion
(generalisation of AIC)
Deviance distribution
40
Possible assumptions for
clustered data analysis
Identical parameters
Pooling
Independent parameters
Independent analysis
Exchangeable parameters
Assuming the θi are drawn from a common distribution implies
exchangeability between units
There is no systematic reason to distinguish between the different units
Units are similar but not identical
( )
ϕ ~ p(ϕ )
41