1 EL META ANÁLISIS COMO HERRAMIENTA DE SÍNTESIS EN INVESTIGACIÓN José Manuel Pérez Mármol Facultad de Ciencias de la Salud Universidad de Granada

2 Sánchez-Meca, J. (2010). Cómo realizar una revisión sistemática y un meta-análisis. Aula Abierta, 38, 53–63. Sánchez-Meca, J., & Botella, J. (2010). Revisión sistemática y meta- análisis: Herramientas para la práctica profesional. Papeles del psicólogo, 31(1), 7–17.

3 Surge la necesidad de sintetizar la información adquirida en la literatura científica, con los objetivos de:  Conseguir la mayor evidencia posible  Generalizar los resultados obtenidos en los diferentes estudios (Sánchez-Meca & Botella, 2010) UNIVERSIDAD DE GRANADA Facultad de Ciencias de la Salud Justificación

4 El conjunto de datos provenientes de la investigación suelen ser heterogéneos entre estudios y en ocasiones puede aparecer cierta ambigüedad o confusión a la hora de llegar a conclusiones generales que unifiquen los resultados de todos ellos. UNIVERSIDAD DE GRANADA Facultad de Ciencias de la Salud Heterogeneidad. Justificación MA

5 Como una alternativa a las revisiones subjetivas, también denominadas narrativas, surgió el meta-análisis, y las revisiones sistemáticas, como una metodología objetiva y rigurosa para llevar a cabo el proceso de revisión de la investigación en un campo concreto de conocimiento y lograr de esta forma una eficiente acumulación de las evidencias (Hunt, 1997). Esta revolución en el proceso de revisión de la literatura tuvo lugar a principios de la década de 1980 UNIVERSIDAD DE GRANADA Facultad de Ciencias de la Salud Revisión narrativa y metanálisis

6 Una revisión sistemática es un tipo de investigación científica mediante la cual se revisa la literatura científica sobre un tópico: -partiendo de una pregunta formulada de forma clara y objetiva -utilizando métodos sistemáticos y explícitos para localizar, seleccionar y valorar críticamente las investigaciones relevantes a dicha pregunta -aplicando protocolos sistemáticos para la recogida de datos e información de los estudios -Objetivo: de alcanzar conclusiones válidas y objetivas sobre qué es lo que dicen las evidencias sobre dicho tópico. “La aplicación de estrategias que limitan la comisión de sesgos al integrar, analizar críticamente y sintetizar todos los estudios relevantes sobre un tópico” (Last, 2001) UNIVERSIDAD DE GRANADA Facultad de Ciencias de la Salud Revisión sistemática (RS)

7 El MA puede definirse como:  Una revisión sistemática objetiva que se compone de una serie de pasos esenciales y muy parecidos a la de un estudio empírico  Se obtiene un índice cuantitativo de la magnitud del efecto de cada estudio  Se aplican técnicas de análisis estadístico para integrar dichos efectos “El análisis estadístico de una gran colección de resultados de trabajos individuales con el propósito de integrar los hallazgos obtenidos” (Glass, 1976, p. 3) “La síntesis estadística de los datos de estudios diferentes pero similares, es decir, estudios comparables, que proporciona un resumen numérico de los resultados globales” (Chalmers, Hedges y Cooper, 2002, p. 17). UNIVERSIDAD DE GRANADA Facultad de Ciencias de la Salud Definición del Metanálisis (MA)

8 Ahorra a los lectores tener que seleccionar los estudios más relevantes de la literatura Evita habitualmente la existencia de sesgo las interpretaciones y conclusiones de la información Simplifica la tarea de lectura crítica, facilitando al lector el entendimiento del problema en cuestión para su posterior aplicación a la clínica diaria. Visión conjunta sobre toda la información obtenida en la investigación realizada previamente (Sánchez-Meca, 2010; Sánchez-Meca & Botella, 2010). UNIVERSIDAD DE GRANADA Facultad de Ciencias de la Salud Puntos fuertes

9 1.Formulación del problema 2.Búsqueda de los estudios 3.Codificación de los estudios 4.Cálculo del tamaño del efecto 5.Análisis estadístico e interpretación 6.Publicación del meta-análisis (Sánchez-Meca, 2010) UNIVERSIDAD DE GRANADA Facultad de Ciencias de la Salud Fases de un MA:

10 I.Formular de forma clara la pregunta que se pretende responder II.Definir los constructos y conceptos implicados en la misma III.De la formulación de la pregunta surgen (Cooper, 2010) : 1.Los objetivos que se pretenden alcanzar con el meta- análisis 2.Las hipótesis que se quieren contrastar MA comunes: -Eficacia de programas, tratamientos e intervenciones en general para prevenir, resolver o paliar problemas educativos, psicológicos, de salud o sociales. UNIVERSIDAD DE GRANADA Facultad de Ciencias de la Salud Fases de un MA: 1. Formulación del problema

11 (a)Identificar los diseños de los estudios admisibles para el meta-análisis: ¿sólo se aceptarán estudios experimentales con asignación aleatoria o también se admitirán estudios cuasi- experimentales? (b)Definir los tipos de programas, tratamientos o intervenciones que se pretenden investigar. (c)Definir las características de los participantes en los estudios. (d)Determinar los datos estadísticos que deben aportar los estudios para poder calcular los tamaños del efecto: (e.g., medias, desviaciones típicas, proporciones, pruebas t, pruebas F de ANOVA, etc.). (e)Identificar cómo han de venir medidas las variables de resultado: (e.g., escalas psicológicas, pruebas de rendimiento debidamente baremadas, medidas de autoinforme, etc.). (f)Idioma en el que tiene que estar escrito el estudio (g)El rango temporal que se pretende examinar UNIVERSIDAD DE GRANADA Facultad de Ciencias de la Salud Fases de un MA: 2. Búsqueda de los estudios. Criterios de Inclusión.

12  Combinar procedimientos formales e informales de búsqueda de estudios.  Fuentes informales de búsqueda: 1.Contactar con autores de estudios 2.Consultar libros de actas de congresos 3.Tesis doctorales 4. Literatura gris ‘literatura fugitiva’  Al menos dos codificadores de forma independiente y grado de acuerdo (Rothstein y Hopewell, 2009) UNIVERSIDAD DE GRANADA Facultad de Ciencias de la Salud Fases de un MA: 2. Búsqueda de los estudios. Búsqueda.

13  Manual de Codificación: Explícitos los criterios mediante los cuales se van a codificar las características de los estudios. Objetivo: comprobar qué características de los estudios pueden estar moderando o afectando a los resultados. Conseguimos: por qué los estudios sobre un mismo tema alcanzan resultados diferentes, e incluso en ocasiones contradictorios.  Protocolo de Registro de las variables moderadoras de los estudios: Metodológicas Sustantivas Extrínsecas UNIVERSIDAD DE GRANADA Facultad de Ciencias de la Salud Fases de un MA: 3. Codificación de los estudios

14  El tamaño del efecto es: Un índice estadístico que mide el grado en que existe el fenómeno que se está investigando en cada estudio y no se deja afectar por el tamaño muestral, como ocurre con las pruebas de significación estadística (Cohen, 1988). -Calculo de un índice estadístico que sea capaz de reflejar la magnitud del efecto obtenido en cada estudio -Que pueda calcularse de forma homogénea en todos los estudios -La misma métrica los resultados en los estudios pertinentes. UNIVERSIDAD DE GRANADA Facultad de Ciencias de la Salud Fases de un MA: 4. Cálculo del tamaño del efecto

15 Aplicación dependerá del objetivo del estudio, del diseño empleado y de la naturaleza de las variables medidas (Borenstein et al., 2009; Hedges y Olkin, 1985; Sán- chez-Meca, 2008). (a)la familia d, especialmente indicada para estudios que aplican diseños con dos grupos y el resultado se mide de forma continua, y que consiste en calcular la diferencia entre las medias de los dos grupos y, opcionalmente, dividirla por la desviación típica conjunta de ambos grupos (b)la familia r, especialmente indicada para estudios correlacionales, que se basa en la obtención de un coeficiente de correlación (c)la familia de índices de riesgo, que está indicada para estudios con dos grupos en los que la variable de respuesta es dicotómica UNIVERSIDAD DE GRANADA Facultad de Ciencias de la Salud Fases de un MA: 4.1 Tamaño del efecto

16 Debe someterse a un análisis de su fiabilidad, mediante la realización de dichos cálculos por, al menos, dos codificadores de forma independiente, con objeto de comprobar el acuerdo alcanzado entre ellos UNIVERSIDAD DE GRANADA Facultad de Ciencias de la Salud Fases de un MA: 4. Cálculo del tamaño del efecto

17 Las filas: son los estudios Las comunas: son las variables potencialmente moderadoras de los resultados de los estudios y el tamaño del efecto obtenido en cada estudio. El análisis estadístico típico de un meta-análisis pasa por tres fases : (1)cálculo del tamaño del efecto medio con su intervalo de confianza y valoración de su significación estadística. (2)análisis de la heterogeneidad de los tamaños del efecto. (3)si los tamaños del efecto son heterogéneos, búsqueda de variables moderadoras. (Lipsey y Wilson, 2001; Marín-Martínez, Sánchez-Meca y López-López, 2009) UNIVERSIDAD DE GRANADA Facultad de Ciencias de la Salud Fases de un MA: 5. Análisis estadístico e interpretación

18 El meta-analista tiene primero que plantear el modelo estadístico desde el cual va a ponderar los tamaños del efecto. Son dos los modelos estadísticos típicos en meta-análisis:  Modelos de efectos fijos  Modelos de efectos aleatorios (Sánchez-Meca, Marín-Martínez y Huedo, 2006) UNIVERSIDAD DE GRANADA Facultad de Ciencias de la Salud Fases de un MA: 5. Análisis estadístico e interpretación

19  Modelo de efectos fijos: Se asume que todos los estudios están estimando a un mismo tamaño del efecto poblacional, de forma que la única variabilidad entre los tamaños del efecto se deberá al error de muestreo.  Modelo de efectos aleatorios: Se asume que cada estudio estima a su propio tamaño del efecto poblacional, entendiendo que existe una distribución de tamaños del efecto poblacionales y no uno sólo común a todos los estudios. La decisión del modelo estadístico: Qué grado de heterogeneidad espera encontrar el meta-analista entre los tamaños del efecto Tomar la decisión en función del resultado de alguna prueba de heterogeneidad. UNIVERSIDAD DE GRANADA Facultad de Ciencias de la Salud Fases de un MA: 5. Análisis estadístico e interpretación

20 Un tipo de representación gráfica muy útil en meta-análisis es el forest plot:  Presenta para cada estudio individual su tamaño del efecto junto con los límites confidenciales,  Tanto de forma numérica como gráfica  En la parte inferior del mismo figura el tamaño del efecto medio. UNIVERSIDAD DE GRANADA Facultad de Ciencias de la Salud Fases de un MA: 5. Análisis estadístico e interpretación

21

22 Borenstein, Hedges, Higgins y Rothstein, 2009 Botella y Gambara, 2002 Cooper, 2010 Cooper, Hedges y Valentine, 2009 Hedges y Olkin, 1985 Higgins y Gre- en, 2008 Lipsey y Wilson, 2001 Martín, Tobías y Seoane, 2006 Torgerson, 2003). UNIVERSIDAD DE GRANADA Facultad de Ciencias de la Salud Para profundizar

23 -Elder, S. J. (2004). A Meta-analytic Investigation of Occupational Stress and Related Organisational Factors: Is Nursing Really a Uniquely Stressful Profession? Dessertation, 1–189. -Marín Martínez, F., Sánchez Meca, J., & López López, J. A. (2009). El metaanálisis en el ámbito de las Ciencias de la Salud: una metodología imprescindible para la eficiente acumulación del conocimiento. Fisioterapia, 31(3), 107–114. doi:10.1016/j.ft.2009.02.002 -Rosenthal, R., & DiMatteo, M. R. (2001). Meta-analysis: Recent developments in quantitative methods for literature reviews. Annual Review of Psychology, 52, 59-82. -Sánchez-Meca, J. (2010). Cómo realizar una revisión sistemática y un meta-análisis. Aula Abierta, 38, 53–63. Retrieved from http://dialnet.unirioja.es/descarga/articulo/3316651.pdf -Sánchez-Meca, J., & Botella, J. (2010). Revisión sistemática y meta-análisis: Herramientas para la práctica profesional, 31(1), 7–17. UNIVERSIDAD DE GRANADA Facultad de Ciencias de la Salud Bibliografía

24 J. M. Arturo Pérez Mármol [email protected] Despacho 7, 8ª planta