1 Aplicada a Coaliciones de Prevención Brenda Iris Vera Martínez, MSW, Ph D Oficina para la Promoción y el Desarrollo Humano, Inc.

2 Describir los beneficios de una teoría de cambio Definir los tres elementos necesarios para componer una teoría de cambio Plantear cómo la teoría de cambio explica el diseño de un programa

3

4 Una teoría de cambio es como un mapa vial. Nos ayuda a planificar nuestro viaje desde el punto en el que estamos actualmente hasta donde queremos llegar.

5 Nos ayuda a responder a la pregunta: ¿Cuál es el cambio que deseamos alcanzar y qué tiene que pasar para que este cambio se alcance?

6 Una teoría de cambio identifica una relación de causa y efecto Es el corazón del programa Consiste de tres elementos principales: Necesidad o problema Intervención Resultados esperados (apoyados por datos y evidencia)

7 TEORIA DE CAMBIO PlanificaciónEvaluación

8 Necesidad / Problema de la comunidad Intervención específica Resultados

9 Necesidad / Problema de la comunidad Intervención específica Resultados Evidencia Guía la selección de la intervención Apoya la relación causa - efecto Documentación de la necesidad (estadística)

10 Dolor de garganta Tomo antibióticos Me sentiré mejor Evidencia Guía la selección de la intervención Apoya la relación causa – efecto ¿Cúal antibiótico es mejor?

11 Necesidad / Problema de la comunidad Intervención específica Resultados Los niños podrán leer al nivel de 3 er grado (según el examen de lectura correspondiente) Niños de 3er grado leyendo por debajo del nivel esperado Datos estadísticos demuestran la importancia de leer en este nivel académico

12 Necesidad / Problema de la comunidad Intervención específica Resultados Los niños podrán leer al nivel de 3 er grado (según el examen de lectura correspondiente) Niños de 3er grado leyendo por debajo del nivel esperado Datos estadísticos demuestran la importancia de leer en este nivel académico Evidencia Programa de tutorías 3 veces a la semana por 20 min. en destrezas de literacia

13 ¿Cúal es la extensión y severidad de esta necesidad en la comunidad? Necesidad / Problema de la comunidad Es el asunto principal a atender por medio de una intervención específica (actividades de servicio)

14 Necesidad / Problema de la comunidad Los datos que documentan el problema deben contestar las siguientes preguntas: ¿Quién y cuántos están directamente afectados? ¿Cuán severo es el problema? Alcance ¿Cuán obligatorio es atender esta necesidad? ¿Podría empeorar la situación? Que podría ocurrir si no se hace nada al respecto? Significancia ¿Por qué existe esta necesidad o problema? ¿Cómo se está perpetuando? Causa(s)

15 Qué cambios se esperan lograr relacionados a la necesidad o problema identificado Resultados

16 Responde a la pregunta: ¿Cúal es la mejor manera de alcanzar los resultados esperados? La INTERVENCIÓN hace referencia a las actividades en las cuales tanto los facilitadores como los participantes se verán involucrados. Intervención específica

17

18

19 Admisible (justificada) ¿La lógica del modelo luce correcta? Se entiende que si se hacen estas cosas se obtendrán los resultados que se esperan.

20 Factible ¿Son suficientes los recursos para implementar la intervención seleccionada?

21

22

23 Definir lo que es evidencia Describir lo que es una intervención o práctica basada en evidencia (PBE) Identificar fuentes apropiadas de evidencia

24 Información que apoya la selección de una intervención específica y su habilidad para alcanzar sus resultados intencionados o esperados. EVIDENCIA

25 No es suficiente con solo decir “nosotros pensamos que nuestra intervención será exitosa”... Se necesita justificar la selección con evidencia.

26 Accountability = Responsabilidad Requisito Agencias Federales y Estatales Requisito Agencias Federales y Estatales Efectividad en la Población Estudiada Costo Efectiva Acorta el tiempo que toma desarrollar un programa Acorta el tiempo que toma desarrollar un programa

27 Provee una lista de cotejo real que permite corroborar los elementos de la teoría de cambio establecida: Nuevos programas: Cuál es el diseño y la dosis (frecuencia, intensidad y duración) necesaria para alcanzar los resultados esperados.

28 Programas existentes : ¿Contamos con suficiente evidencia para continuar utilizando la misma intervención? Basado en evidencia, ¿existen modificaciones que requiera la intervención a fin de lograr un mayor impacto? ¿Se necesita seleccionar una nueva intervención?

29 Actividades de servicio sustentadas por investigaciones que demuestran alta probabilidad de trabajar con las necesidades identificadas resultando en el alcance de los cambios esperados.

30 La evidencia propuesta (diseño, dosis) lleva a los resultados establecidos (X → Y) (X → Y)

31 Es la integración de las mejores prácticas reconocidas por las investigaciones, el conocimiento de los expertos y la cultura, los valores, opiniones y características de los participantes.

32 Orígenes en la medicina - debate a mediados del siglo XIX, medicina como forma de arte vs. la medicina como ciencia. En el siglo XX se promueve y defiende los conceptos que fundamentan las prácticas basadas en la evidencia. 1990 - se utiliza por primera vez el término “basado en evidencia” por David Eddy. 1992 aparece por primera vez el término “medicina basada en evidencia” en la literatura médica en un artículo por Guyatt y colaboradores.

33 La utilización de PBE comenzó promoviéndose por los sectores profesionales Actualmente las impulsan las agencias federales que dan apoyo económico a los sectores académicos, gubernamentales, comunitarios y privados.

34 Intervenciones basadas en evidencia Intervenciones informadas en evidencia Intervenciones no probadas

35 Preliminar: resultados obtenidos de medidas de ejecución No muestran causalidad Moderada: resulta de estudios o evaluación que utilizan un diseño cuasi experimental (ej. grupos de comparación) Muestran cierta causalidad Robusta: Resulta de estudios experimentales (ej. grupo control) Método más rigoroso de mostrar causalidad

36 Relevante: información de intervenciones comparables con beneficiarios y resultados similares Persuasiva: muestra una clara probabilidad de éxito Actualizada: publicada recientemente o lo más reciente disponible Objetiva: publicada en un “peer reviewed journal” o por una organización reconocida o fidedigna

37 http://store.samhsa.gov/product/Identifying-and-Selecting-Evidence-Based- Interventions-for-Substance-Abuse-Prevention/SMA09-4205 “Conceptual fit” “Practical fit” “Evidence of effectiveness” ¿Es relevante?¿Es apropiada?¿Es efectiva? “Best Fit Prevention Intervention”

38 Cuatro fuentes de evidencia: Datos obtenidos de medidas de ejecución previas Resultados de evaluación del programa Evaluaciones que documentan los resultados de programas similares Estudios científicos que documentan los resultados de programas similares

39 Universidades u organizaciones que se dedican a la investigación Profesionales reconocidos o expertos en el campo (informantes claves) Son aquellas personas que por sus vivencias, capacidad de empatizar y las relaciones que tienen en el campo pueden apadrinar al investigador convirtiéndose en una fuente importante de información a la vez que le va abriendo el acceso a otras personas y a nuevos escenarios.

40 Revisión de literatura Artículos sobre temas específicos Artículos que revisan múltiples estudios (meta análisis)

41 Virtual Health Library Ovid ProQuest Eric PubMed PsychInfo MedicLatina PsychiatryOnline Wison Web Social Science Database

42 Ciencias de la Conducta Homines La Catarsis de Quirón Revista de Ciencias Sociales Psychikós Revista Análisis Revista Salud y Cultura Pedagogía Cuaderno de Investigación en la Educación Revista Puertorriqueña de Psicología Revista Paideja Puertorriqueña

43 Otros recursos Registros federales: SAMHSA National Registry of Evidence-Based Programs and Practices (NREPP) http://www.nrepp.samhsa.gov OJJDP Model Programs Guide http://www.dsgonline.com/mpg2.5/mpg_index.htm Exemplary and Promising Safe, Disciplined and Drug-Free Schools Programs Sponsored by the U.S. Department of Education http://www.ed.gov/admins/lead/safety/exemplary01/exempla ry01.pdf

44 Otros recursos Guide to Clinical Preventive Services Sponsored by the Agency for Healthcare Research and Quality [AHRQ] http://www.ahrq.gov/clinic/cps3dix.htm Guide to Community Preventive Services Sponsored by the Centers for Disease Control and Prevention [CDC] http://www.thecommunityguide.org A list of other registries may be found at SAMHSA’S website: http://www.samhsa.gov/ebpWebguide/appendixB.asp.

45 Otros recursos en línea Cochrane Collaboration Campbell Collaboration Society for Prevention Research The California Evidence Based / Clearinghouse for Child Welfare

46 Preguntas o comentarios

47 Adapted from the University of Wisconsin Extension Enhancing Program Performance with Logic Models http://www.uwex.edu/ces/lmcourse “Si no sabes hacia donde vas, ¿cómo sabrás que ya has llegado?” –Yogi Berra

48 Entender que un modelo lógico es una ilustración gráfica de un programa. Conocer los componentes claves de los modelos lógicos. Conocer la diferencia entre recursos internos, estrategias, resultados e impacto. Conocer los beneficios que se obtienen al utilizar un modelo lógico.

49 “ Un modelo lógico de programa es una imagen de cómo funciona su programa – la teoría y supuestos implícitos del programa. Este modelo ofrece un mapa caminero de su programa, resaltando cómo se espera que funcione, qué actividades deben ir antes que otras, y cómo se obtienen los resultados deseados” (p. 35). Guía de Evaluación de la Fundación W.K. Kellogg (1998) Muchas personas dicen que un modelo lógico es como un mapa

50 Es una imagen simplificada de un programa, una iniciativa o una intervención en respuesta a una situación dada. Muestra la relación lógica entre los recursos que se invierten, las actividades que se llevan a cabo y los beneficios o el cambio que resulta. Es el fundamento de la planificación programática, de la evaluación, del manejo del programa y de las comunicaciones.

51 Planificación Marco de referencia para planificar como debemos llegar desde dónde estas a dónde quieres moverte. Provee una estructura para comprender claramente la situación que guía la necesidad de una iniciativa. Manejo de Programa Muestra la conexión entre los recursos, las actividades y los resultados. Es la base para desarrollar un plan más detallado del manejo del programa. Evaluación Es el primer paso de la evaluación. Ayuda a determinar cuándo y que evaluar, así como cuando los resultados de la evaluación se están usando efectivamente y eficientemente. Comunicación Es la clave para el éxito y la sustentabilidad. Esta imagen clara y sencilla nos ayuda a comunicarnos con otros (personal, fuentes de fondos, gobierno) sobre nuestro programa o iniciativa. “Un modelo lógico es realmente una forma de pensar”

52 Planificación Marco de referencia para planificar como debemos llegar desde dónde estas a dónde quieres moverte. Provee una estructura para comprender claramente la situación que guía la necesidad de una iniciativa. Manejo de Programa Muestra la conexión entre los recursos, las actividades y los resultados. Es la base para desarrollar un plan más detallado del manejo del programa. Evaluación Es el primer paso de la evaluación. Ayuda a determinar cuándo y que evaluar, así como cuando los resultados de la evaluación se están usando efectivamente y eficientemente. Comunicación Es la clave para el éxito y la sustentabilidad. Esta imagen clara y sencilla nos ayuda a comunicarnos con otros (personal, fuentes de fondos, gobierno) sobre nuestro programa o iniciativa. “Un modelo lógico es realmente una forma de pensar”

53 Planificación Marco de referencia para planificar como debemos llegar desde dónde estas a dónde quieres moverte. Provee una estructura para comprender claramente la situación que guía la necesidad de una iniciativa. Manejo de Programa Muestra la conexión entre los recursos, las actividades y los resultados. Es la base para desarrollar un plan más detallado del manejo del programa. Evaluación Es el primer paso de la evaluación. Ayuda a determinar cuándo y que evaluar, así como cuando los resultados de la evaluación se están usando efectivamente y eficientemente. Comunicación Es la clave para el éxito y la sustentabilidad. Esta imagen clara y sencilla nos ayuda a comunicarnos con otros (personal, fuentes de fondos, gobierno) sobre nuestro programa o iniciativa. “Un modelo lógico es realmente una forma de pensar”

54 Planificación Marco de referencia para planificar como debemos llegar desde dónde estas a dónde quieres moverte. Provee una estructura para comprender claramente la situación que guía la necesidad de una iniciativa. Manejo de Programa Muestra la conexión entre los recursos, las actividades y los resultados. Es la base para desarrollar un plan más detallado del manejo del programa. Evaluación Es el primer paso de la evaluación. Ayuda a determinar cuándo y que evaluar, así como cuando los resultados de la evaluación se están usando efectivamente y eficientemente. Comunicación Es la clave para el éxito y la sustentabilidad. Esta imagen clara y sencilla nos ayuda a comunicarnos con otros (personal, fuentes de fondos, gobierno) sobre nuestro programa o iniciativa. “Un modelo lógico es realmente una forma de pensar”

55 Planificación Marco de referencia para planificar como debemos llegar desde dónde estas a dónde quieres moverte. Provee una estructura para comprender claramente la situación que guía la necesidad de una iniciativa. Manejo de Programa Muestra la conexión entre los recursos, las actividades y los resultados. Es la base para desarrollar un plan más detallado del manejo del programa. Evaluación Es el primer paso de la evaluación. Ayuda a determinar cuándo y que evaluar, así como cuando los resultados de la evaluación se están usando efectivamente y eficientemente. Comunicación Es la clave para el éxito y la sustentabilidad. Esta imagen clara y sencilla nos ayuda a comunicarnos con otros (personal, fuentes de fondos, gobierno) sobre nuestro programa o iniciativa. “Un modelo lógico es realmente una forma de pensar”

56 Llevan un mensaje en forma de flujograma, utilizando cajas y flechas. No tienen que ser lineales. Deben representarse en una sola imagen pero de una manera que sea fácil de entender para los posibles usuarios.

57 En su forma más simple, un modelo lógico luce cómo este: Esta representación gráfica muestra la relación lógica entre: Los recursos que tiene un programa. Las estrategias que el programa lleva a cabo. Los cambios o beneficios que resultan. Recursos ¿Qué se invierte? Estrategias ¿Qué se hace? Resultados-Impacto ¿Qué resultados se obtienen?

58 Nosotros solemos utilizar modelos lógicos en la vida diaria. Miremos tres ejemplos: Dolor de cabeza Hambre Irse de vacaciones Nosotros solemos utilizar modelos lógicos en la vida diaria. Miremos tres ejemplos: Dolor de cabeza Hambre Irse de vacaciones

59 “Está sufriendo de un dolor de cabeza bien fuerte. Su experiencia le dice que algunas pastillas pueden ayudarle.” Obtener las pastillas Tomar las pastillas Sentirse mejor

60 Vamos a pensar qué hacemos cuando tenemos hambre y vamos a plasmarlo en nuestro modelo lógico. Encontrar comida Comer la comida Sentirse mejor

61 Vamos a pensar qué hacemos cuando nos queremos ir de vacaciones. Desarrollemos un modelo lógico simple de los pasos a seguir para completarlo.

62 Insumos - recursos que invertimos que nos permitirán llevar a cabo nuestras actividades u obtener los productos que deseamos. Estrategias– son las actividades (intervención) que se llevan a cabo o los productos creados para alcanzar la población/participantes deseada. Resultados - son los cambios o los beneficios que se esperan obtener en los individuos, familias, grupos, negocios, organizaciones y/o comunidades.Resultados Actividades o Productos Recursos o Insumos

63 Recursos Estrategias Resultados-Impacto

64 Recursos Estrategias Resultados-Impacto Inversiones del Programa ¿Qué se invierte?

65 Recursos Estrategias Resultados-Impacto Inversiones del Programa Activi- dades Partici- pación (productos) Partici- pación (productos) ¿Qué se invierte? ¿Qué hacemos? ¿A quienes alcanzamos?

66 Recursos Estrategias Resultados- Impacto Inversiones del Programa Actividades Participación ¿Qué se invierte? ¿Qué hacemos? ¿A quienes alcanzamos? ¿Qué resulta? Corto Plazo Mediano Plazo Largo Plazo

67 Recursos ¿Qué invertimos? Personal Voluntarios Tiempo Dinero Investigación Base Materiales Equipo Tecnología Socios Estrategias Resultados-Impacto Actividades Participación Corto Plazo Mediano Plazo Largo Plazo Situación Prioridades ¿Qué hacemos? Llevar a cabo: talleres reuniones Proveer servicios Desarrollo de: currículos productos recursos Adiestramientos Proveer consejería Asesorar Facilitar Asociarse Trabajar con los medios ¿A quién alcanzamos? Participantes Clientes Agencias A quienes toman las decisiones Clientes Los resultados a corto plazo son: Conocimiento Concienciació n Aprendizaje Actitudes Destrezas Opiniones Aspiraciones Motivaciones Los resultados a mediano plazo son: Acciones Comportamient o Práctica Toma de decisiones Políticas Acción Social Los resultados a largo plazo son: Condiciones Sociales Ecónomicas Civiles Ambientales SupuestosFactores Externos

68 Es la base del desarrollo del modelo lógico. Para trabajarla es importante considerar que cada problemática o necesidad se da en un lugar específico y está rodeada por un ambiente social, político y económico complejo. Situación

69 Tome en cuenta las siguientes preguntas: ¿Cuál es el problema o asunto? ¿Por qué esto es un problema? ¿Qué causa el problema? ¿A quién afecta? ¿A quién le interesa resolver la situación o no? ¿Qué sabemos sobre la situación? (Investigación, experiencia, etc) Situación

70 Son los recursos y las contribuciones que se ofrecen para llevar a cabo el esfuerzo. Incluye: Tiempo Personal (empleados, voluntarios) Dinero Materiales Asociaciones Equipo Investigación base Tecnología Entre otras cosas Recursos ¿Qué invertimos? Personal Voluntarios Tiempo Dinero Investigación Base Materiales Equipo Tecnología Socios

71 impactan Son las actividades, servicios, eventos y productos que impactan a las personas (individuos, grupos, agencias) que participan o son la población a impactar. Es lo “que hacemos”o “lo que ofrecemos” Estrategias Actividades Participación ¿Qué hacemos? Llevar a cabo: talleres reuniones Proveer servicios Desarrollo de: currículos productos recursos Adiestramientos Proveer consejería Asesorar Facilitar Asociarse Trabajar con los medios ¿A quién alcanzamos? Participantes Clientes Agencias A quienes toman las decisiones Clientes

72 Incluyen: Talleres Servicios Conferencias Encuestas de comunidad Facilitaciones Consejería Otras… Se espera que estas estrategias produzcan resultados específicos. Estrategias Actividades Participación ¿Qué hacemos? Llevar a cabo: talleres reuniones Proveer servicios Desarrollo de: currículos productos recursos Adiestramientos Proveer consejería Asesorar Facilitar Asociarse Trabajar con los medios ¿A quién alcanzamos? Participantes Clientes Agencias A quienes toman las decisiones Clientes

73 Resultados Son los resultados directos o los beneficios obtenidos por los individuos, familias, grupos, comunidades, organizaciones o sistemas.Impacto – Se refiere a los efectos del programa a largo plazo en las condiciones sociales, económicas, cívicas o ambientales.

74 Resultados Pueden establecerse a: Corto Plazo Mediano Plazo Largo Plazo Impacto Ejemplos: – aumento en la seguridad económica, – reducción del embarazo en adolescentes, – mejora de la calidad del aire.

75 Situación: Altas tasas de maltrato infantil y negligencia Situación: Altas tasas de maltrato infantil y negligencia Recursos Personal Dinero Socios Estrategias Resultados- Impacto Actividades Participación Corto Plazo Mediano Plazo Largo Plazo Diseñar currículo educativo para padres Proveer 6 sesiones de adiestramiento s con materiales Padres atendidos Padres aumentan su conocimiento en el desarrollo del niño Padres aprenden nuevas formas de disciplina Padres utilizan las destrezas de crianza aprendidas Se reducen las tasas de maltrato infantil y negligencia entre los paricipantes

76 Es lo que creemos de cómo el programa va a trabajar. Son validadas por la investigación y la experiencia. Influyen y guían las decisiones a tomar. Son los principios, creencias e ideas que tenemos sobre: o el problema o la situación o los recursos y el ambiente laboral o la base del conocimiento o los factores externos

77 Los supuestos en este ejemplo son los siguientes: Vamos a obtener o a encontrar las pastillas que necesito Las pastillas se tomaron tal y como son recomendadas El resultado será similar a otras experiencias anteriores No habrá efectos secundarios negativos Obtener las pastillas Tomar las pastillas Sentirse mejor

78 Entre otras cosas, asumimos que: Los recursos son adecuados y están disponibles Que se podrá desarrollar un currículo apropiado culturalmente y que se podrá implementar efectivamente. Que los padres a impactar están disponibles y dispuestos a participar Que el cambio en conocimiento va a provocar un cambo en el comportamiento. Situación: Altas tasas de maltrato infantil y negligencia Situación: Altas tasas de maltrato infantil y negligencia Recursos Personal Dinero Socios Estrategias Resultados-Impacto Actividades Participación Corto Plazo Mediano Plazo Largo Plazo Diseñar currículo educativo para padres Proveer 6 sesiones de adiestramientos con materiales Padres atendidos Padres aumentan su conocimiento en el desarrollo del niño Padres aprenden nuevas formas de disciplina Padres utilizan las destrezas de crianza aprendidas Se reducen las tasas de maltrato infantil y negligencia entre los paricipantes

79 Cuando desarrollamos modelos lógicos, queremos asegurarnos de que todos los supuestos implícitos y explícitos se tomen en cuenta. Debemos explorarlos y discutir los mismos.

80 Piense en cómo trabajar y calificar sus supuestos en el modelo lógico y a través de la implementación del mismo. Para esto revise lo siguiente: Estrategias y/o programas que han sido efectivos en otras comunidades similares Revise la literatura Revise informes de evaluación.

81 Pueden influenciar el éxito del programa. Incluyen: Cultura Clima Economía Patrones demográficos Ambiente político Experiencias de los participantes Influencias de los medios Cambios en política publica Pueden afectar el programa de muchas maneras: – Implementación – Participantes y recipientes – La velocidad y el grado del cambio – Recursos disponibles

82 Análisis de contexto: FODA Utilizado para conocer la situación presente de una organización o programa. En este modelo servirá para mirar, identificar y analizar el contexto en el cual se desarrollará el proyecto. Debe realizarse a través de un análisis estratégico de fortalezas, oportunidades, debilidades o retos y amenazas.

83 FODA: ejercicio FortalezasDebilidadesOportunidadesAmenazas

84 Desarrollando un modelo lógico básico Aclaración importante: “Planifique hacia atrás, implemente hacia adelante” (Beverly Anderson, WKKF)

85 Desarrollando un modelo lógico básico Recursos (Input) Estrategias (outputs) Actividades/Participación Resultados a corto y mediano plazo Largo plazo Para realizar nuestro conjunto de actividades necesitaremos lo siguiente: Para abordar nuestro problema realizaremos las siguientes actividades: Esperamos que una vez terminadas o en ejecución estas actividades producirán la siguiente evidencia de prestación de servicios: Esperamos que una vez terminadas o en ejecución estas actividades llevarán a los siguientes cambios dentro de …. Esperamos que una vez terminadas, estas actividades llevarán a los siguientes cambios dentro de … Una vez identificada la necesidad entonces…. Fortalezas / Oportunidades / Debilidades / Amenazas

86 Un ejercicio…

87