Metaanlisis Ferran Torresuab es 1 Definicin El metaanlisis

Meta-análisis Ferran. Torres@uab. es 1

Definición El meta-análisis es una revisión sistemática de un gran número de estudios que utiliza métodos estadísticos para combinar, sintetizar e integrar la información de varios estudios independientes que son considerados por el análista como “combinables” Adaptado de: - Glass GV. Primary and Meta-analysis of research. Educational Researcher 1976; 5: 3 -8. Huque MF. Experiences with meta-analysis in NDA submissions. Proc Biopharmaceutical Section of the American Statistical Association 1988; 28 -33. Cook DJ, Sackett DL, Spitzer WO. Methodologic guidelines for systematic reviews of randomized control trials in health care from the Potsdam consultation meta-analysis. J Clin Epidemiol 1995; 48: 168 -71. D’Agostino RB, Weintraub M. Meta-analysis: a method for sythesizing research. Clin Pharmacol Ther 1995; 58: 605 -616. Ferran. Torres@uab. es 2

OBJETIVOS u Conclusión: – Ganancia en precisión – Comparación crítica de los resultados – Diferencias en magnitud o sentido – Posibilidad de generalizar Ferran. Torres@uab. es 3

EVOLUCIÓN DEL USO DEL MÉTODO META-ANALÍTICO Ferran. Torres@uab. es 4

CARACTERÍSTICAS u Datos: – Tipos de medida de los efectos – Escalas de medida – Extensión de la información u Datos originales u Estadísticos de resumen u Estimación del efecto y errores estándar u Valores de significación Ferran. Torres@uab. es 5

CARACTERÍSTICAS u No independencia de los estudios – Tiempo: momento en que se realiza el estudio – Centro o investigador – Múltiple publicación de los resultados – Mismos sujetos (en distintos estudios) Ferran. Torres@uab. es 6

Ventajas y limitaciones u Ventajas u. Consideración sistemática (evaluación no sesgada) u. Cuantificación de los resultados u. Aumento de precisión de los resultados u. Mayor capacidad de estudiar efectos en subgrupos u. Mayor facilidad para evaluar las discrepancias entre estudios u. Mayor generalización de las conclusiones Ferran. Torres@uab. es 7

Ventajas y limitaciones u Limitaciones: u La calidad está limitada por los estudios individuales u Dificultad para establecer los criterios de inclusión u Sesgo de selección (publicación, lengua, calidad. . . ) Ferran. Torres@uab. es 8

Análisis de la heterogeneidad Respuesta a la siguiente pregunta: ¿SON COMBINABLES LOS ESTUDIOS? Pruebas de homogeneidad de los resultados de los estudios individuales: - Prueba ji-cadrado Q de Cochran - Prueba ji-cuadrado de Breslow-Day Las pruebas de homogeneidad tienen baja potencia para detectar la heterogeneidad Un valor p de la prueba de homogeneidad 0. 10, sugiere heterogeneidad entre estudios y, por tanto, podría no ser válido combinar los estudios Ferran. Torres@uab. es 9

Egger et al. Systematic reviews in health care. London: BMJ books, 2001. Ferran. Torres@uab. es 10

Magnitud del efecto (1) Los métodos estadísticos utilizados para estimar el tamaño del efecto global de diferentes estudios se basan en Modelos de Efectos Fijos y Efectos Aleatorios Los Modelos de Efectos Fijos asumen un efecto constante del tratamiento entre estudios, es decir, los tamaños de los efectos entre estudios son homogéneos o similares. - Los diferentes estudios pertenecen a una misma población - Consideran la variabilidad intra-estudio Ferran. Torres@uab. es 11

Magnitud del efecto (2) Los Modelos de Efectos Aleatorios consideran que existe una variación entre estudios - Los estudios provienen de poblaciones diferentes - Consideran la variabilidad intra e inter-estudio Ferran. Torres@uab. es 12

Magnitud del efecto (3) Ninguno de los dos modelos se puede considerar “correcto”: - Si los estudios son homogéneos La elección entre un modelo de efectos fijos y efectos aleatorios no es importante, ya que los resultados serán idénticos - Si los estudios no son homogéneos Es más apropiado elegir un modelo de efectos aleatorios Los modelos de efectos fijos y efectos aleatorios utilizan diferentes métodos estadísticos para combinarlos resultados Ferran. Torres@uab. es 13

Magnitud del efecto (4) Ferran. Torres@uab. es 14

Unbiased Hedges’ g estimate u Corrections for small sample size will be made. Ferran. Torres@uab. es 15

Effect size interpretation u Since effect sizes are non-dimensional measurements (no units), some conventions have been proposed[1], [2]: – small≈0. 20, – medium≈0. 50 – large≈0. 80 – [1] Cohen, J. (1988). Statistical power analysis for the behavioral sciences (2 nd ed. ). Hillsdale, NJ: Erlbaum. – [2] Cohen, J. (1992). A power primer. Psychological Bulletin, 112, 155 -159. Ferran. Torres@uab. es 16

Análisis se sensibilidad Ferran. Torres@uab. es 17

Análisis de la correlación Ferran. Torres@uab. es 18

Análisis de la robustez Análisis del sesgo de publicación y/o inclusión selectiva de estudios positivos Correlación entre la magnitud del efecto y el tamaño muestral de los estudios. Ferran. Torres@uab. es 19

Análisis del sesgo de publicación y/o inclusión selectiva de estudios positivos (3) u Los métodos utilizados para detectar la introducción del sesgo de publicación en un meta-análisis son: – – u u Funnel plot El análisis de la asimetria del funnel plot Si el número de estudios incluidos en el meta-análisis es pequeño, el funnel plot es poco útil. En este caso, el mejor método es comparar el tamaño del efecto global entre los estudios publicados y no publicados En un meta-análisis basado en todos los estudios originales, no es necesario analizar el sesgo de publicación Ferran. Torres@uab. es 20

Funnel plot Ferran. Torres@uab. es 21

Funnel plot Ferran. Torres@uab. es 22

Presentación gráfica Ferran. Torres@uab. es 23

Conclusiones (1) 1. El meta-análisis es un herramienta valida y poderosa para la síntesis de la investigación siempre y cuando se aplique de forma adecuada (justificación, protocolo, etc. ) 2. La utilización no crítica del meta-análisis puede llevar a conclusiones erróneas. Las principales críticas que se realizan a un meta-análisis son: - Sesgo de publicación y/o inclusión selectiva de estudios positivos - Heterogeneidad entre estudios - Correlación entre el tamaño del efecto y el tamaño de la muestra Ferran. Torres@uab. es 24

Conclusiones (2) 3. Únicamente cuando estos problemas son debidamente considerados y analizados por medio de: - Análisis de la asimetría del funnel plot Pruebas de homogeneidad Análisis de la correlación entre el tamaño del efecto y el tamaño de la muestra de los estudios Es posible aplicar esta técnica estadística para combinar los estudios de forma que los resultados globales sean científicamente validos Ferran. Torres@uab. es 25

Meta-análisis Ejemplo Ferran Torres Ferran. Torres@uab. es 26

u. Effects of plantago ovata husk on lipid metabolism. A meta-analysis Ferran. Torres@uab. es 27

Selection of studies u u Identified 26 studies =>18 were valid according to the predefined criteria Excluded studies. – – Most of them (7 of 8) insufficient information on descriptive statistics to calculate the meta -analysis estimates from those studies; the other one was erroneously pre-selected since only insoluble fiber was used in that trial. Ferran. Torres@uab. es 28

Statistical issues on the results (1) u Poor quality of information u withdrawals and descriptive results: u – SD (or SE to derive the SD): u u u Complete available descriptive data, n, mean and dispersion (SD or SE), for the baseline subtracted effect was found only for one study (Williams 1995). Estimated from baseline and final values by using correlation coefficients from other published data. If baseline or final SD not available: SD for the baseline difference was directly imputed from other published data. cross-over design – Intrasubject correlation for the estimation of the SD of the treatment differences has been ignored for the cross-over design because of (a) it was not available and (b) this is conservative since it leads to less significant results. Ferran. Torres@uab. es 29

Ferran. Torres@uab. es 31

Ferran. Torres@uab. es 32

Statistical issues on the results (3) u Heterogeneity and sensibility analysis – – (a) The biggest studies have the lowest magnitude effect for Total Cholesterol, although the direction of the effect is positive for all of them. (b) There are probably some unpublished small studies with negative results, although the bigger studies are positive. => – Pooled results too heterogeneous u u very cautious with the conclusions fixed effects not valid Ferran. Torres@uab. es 34

Meta-analysis estimations u Significant effect for – Total Cholesterol (p<0. 001) – LDL (p<0. 001) u “Marginally significant“ – Triglycerides (p=0. 213 but p=0. 021 for the fixed effect approach) u No effect: – HDL (p=0. 886 and p=0. 178 for the fixed effect approach) Ferran. Torres@uab. es 35

Ferran. Torres@uab. es 36

Ferran. Torres@uab. es 37

Ferran. Torres@uab. es 38

Ferran. Torres@uab. es 39

Ferran. Torres@uab. es 40

Ferran. Torres@uab. es 41

Ferran. Torres@uab. es 42

Ferran. Torres@uab. es 43

Cholesterol Ferran. Torres@uab. es 45

Meta-análisis Ejemplo Ferran Torres Ferran. Torres@uab. es 47

Example u Fleiss JL The statistical basis of meta-analysis. Statistical Methods in Medical research 1993; 2: 121 -145. Results of seven placebo-controlled randomised studies of the effect of aspirin in preventing death after myocardial infarction Ferran. Torres@uab. es 48

Studies of aspirin in myocardial infarction Ferran. Torres@uab. es 49

Meta-analysis of Aspirin trials Pooled estimate of ln(OR) = OR = 0. 90 (0. 84 0. 96) Ferran. Torres@uab. es 50

Graphical representation Ferran. Torres@uab. es 51

Fixed OR = 0. 90 (0. 84 0. 96) Random OR= 0. 88 95%CI : (0. 77 ; 0. 99) Ferran. Torres@uab. es 52

Ferran. Torres@uab. es 53

Ferran. Torres@uab. es 54

Ferran. Torres@uab. es 55

10. 4%-14. 2% = 3. 8% Ferran. Torres@uab. es 56

Meta-análisis Normativas Ferran Torres Ferran. Torres@uab. es 57

Guias y Normativas u ICH - E 9: Statistical Principles for Clinical Trials Note for Guidance on Statistical Principles for Clinical Trials. CMP/ICH/363/96. September 1998 u CPMP/EWP/2330/99: Validity and Interpretation of Pooled Analyses, and one Pivotal study u The Potsdam International Consultation on Metaanalysis Potsdam, Germany, March 1994 u u Preferred Reporting Items for Systematic Reviews and Meta-Analyses: The PRISMA Statement. http: //www. prisma-statement. org/ QUORUM. Statement. Lancet 1999; 354: 1896 -1900. Ferran. Torres@uab. es 58