1 + Monitoreo, Aprendizaje & Evaluación ¿Preguntas o problemas durante el seminario virtual? email: [email protected]@gloabalfundforchildren.org O llamar a: +1(202) 222-0813
2 + Objetivos de Aprendizaje Aprender sobre los beneficios y el valor del monitoreo y evaluación de programas. Entender los fundamentos del monitoreo y evaluación, incluyendo: Marcos lógicos Términos claves y sus definiciones Entender cómo usamos el monitoreo y evaluación Familiarizarse con los procesos de monitoreo y evaluación del Fondo Mundial para la Infancia para mejorar sus propuestas e informes Aprender y usar los métodos de recolectar data
3 + ¿Qué es Monitoreo y Evaluación? MonitoreoEvaluación Un proceso continuo de recolectar y revisar data. O sea…¿Cuáles son aspectos de su programa que se pueden medir? Por ejemplo: ¿Cuántos niños asistieron a una capacitación sobre estilos de vida saludables durante el mes pasado? Una medición del cambio que ha ocurrido debido a su programa. La evaluación determina si su programa logró sus objetivos. O sea… ¿Las actividades de su programa realmente ayudaron a los niños que pretendían ayudar? ¿Lograron el cambio deseado? Por ejemplo: ¿Los niños que asistieron a la capacitación sobre estilos de vida saludables ahora están más sanos o no?
4 + Monitoreo ∙ Aprendizaje ∙ Evaluación Monitoreo Ocurre de manera continua a través de su proyecto para ver su progreso Evaluación Para ver si han avanzado y alcanzado sus metas Aprendizaje Planificación Colectar Recursos (Entradas) Actividades del Programa + Monitoreo Evaluación + Aprendizaje
5 + Apunten tres maneras en que su organización se puede beneficiar de un sistema de Monitoreo y Evaluación. ¿Por qué Monitoreo & Evaluación? ¡Ahora Ustedes! M&E le ayuda a responder a estas preguntas: ¿El programa fue ejecutado como se había planificado? ¿Se benefició la población meta de su programa y a qué costo? ¿Cuáles actividades de su programa fueron las más efectivas y cuáles las menos efectivas? Usar bien sus recursos. Tomar buenas decisiones sobre su proyecto [2 minutos]
6 + Palabras Claves Entrada Recursos tales como fondos, asistencia técnica, y otros recursos necesarios para ejecutar un proyecto. Rendimiento Este es el efecto mas inmediato y medible de su trabajo. Resultado Los efectos a medio plazo, de comportamiento o conducta, que resultan directamente del rendimiento de su proyecto. Impacto Cambios en las personas quienes se beneficiaron de su trabajo, los cuales reflejan la meta de su proyecto. Indicador: Mide el cambio en unidades que se pueden comparar a las unidades en el futuro o pasado. Se enfoca en un solo aspecto del programa. Las partes interesadas: Individuos u organizaciones asociados al o afectados por el proyecto. Cualitativo: Algo que no se describe de forma numérica. La data cualitativa normalmente usa palabras para describir el conocimiento, actitudes, o comportamiento de las personas. Cuantitativo: Algo medido o medible por una cantidad y expresado con números. Data cuantitativa describe lo que se puede contar de forma numérica.
7 + El Marco Lógico
8 + ENTRADAS (Recursos) Tiempo Dinero Donantes Equipo Instalaciones ACTIVIDAD/ PROGRAMA (Intervenciones) Servicios Capacitaciones Visitas domiciliarias Cursos Consejería RENDIMIENTO (Resultado inmediato de intervenciones) ¿A quiénes alcanzamos? (# de beneficiarios) ¿Qué hicimos? (acción, frecuencia, duración) RESULTADO (Cambio en participantes) Comportamiento Conciencia Conocimiento Habilidades Practica Actitudes IMPACTO (Cambio en sociedad) Ambiente Condiciones sociales, políticas y económicas, Políticas publicas El Marco Lógico Antes Actividad Cambio= Resultado Después
9 + Ejemplo del Marco Lógico Aumento de inscripciones universitarias 90% de los estudiantes en el programa de tutoría aprueban sus exámenes Se proporcionan 20 horas de tutorías de matemáticas a los estudiantes Se ofrecen tutorías Se contratan a tutores y se consigue un local para hacer las tutorías Muchos estudiantes no pueden asistir a la universidad porque no están preparados para el examen de ingreso ACTIVIDAD/PROGRAMA RENDIMIENTO RESULTADO IMPACTO ENTRADA PROMBLEMA
10 + Ahora ustedes: El Marco Lógico A. 95 de 100 niñas terminan su educación secundaria B. Más estudiantes mujeres continúan su educación al nivel universitario C. $800 recaudados para becas D. Becas para niñas para asistir a la escuela secundaria E. 100 niñas reciben becas escolares ¡Les toca! 1. 2. 3. 4. 5. [5 minutos] PROBLEMA La tasa de graduación de la escuela secundaria es baja para niñas estudiantes ACTIVIDAD/ PROGRAMA RENDIMIENTO RESULTADO IMPACTO ENTRADA
11 + Aprendamos mas sobre el Marco Lógico Pros Organiza su proceso Identifica qué cosa se debería de medir Comunica claramente sus objetivos Contras No muestra la complejidad y los matices No es un modelo único para todos
12 + M&E de GFC: Descripción de Resultado e Informes
13 + Mediciones SMART Resultado del programa: Meta del programa El resultado del programa deber de ser S = eSpecífico M = Medible A = Apropiado R = Realista T = basado en el Tiempo
14 + ¿Les parece SMART esta descripción de resultado? “Niños traficados regresarán a la escuela.” E: Específico – Si. Niños traficados. No. ¿Cuántos niños? ¿Qué tipo de escuela? M: Medible – No. ¿Cuántos niños es la meta? A: Apropiado – ¿Quizás? ¿Hay niños en la comunidad que han sido traficados y necesitan escolarización formal? R: Realista – ¿Quizás? ¿La organización puede llegar a estos niños e inscribirlos en la escuela? T: Basado en el Tiempo – No. ¿Dentro de cuanto tiempo regresarán estos niños a la escuela? “El año pasado, 46 niños traficados fueron reintegrados al sistema escolar formal, según los registros de las escuelas.” ¡Ahora les toca a ustedes! [5 minutos]
15 + Descripciones de Resultado para GFC 1. Para el programa que maneja, ¿ qu é resultado (cambio) mide la organización? 2. ¿ Cómo recolecta su organización la data para medir este resultado? 3. ¿ Quién es afectado (beneficiado) de este resultado? 4. ¿Con cuántos se logró el cambio el año pasado? Qué Cómo Quién Cuándo Cuántos Quien? (pregunta 5) # o % (pregunta 6) Que? (pregunta 3) Como? (pregunta 4) 66% de los participantes del programa fueron inscritos en escuelas según las estadísticas de las escuelas locales.
16 + Identificando una buena descripción de resultado ¡Ahora ustedes! Lean las descripciones de resultado abajo y decidan si son ejemplos buenos o malos de una descripción de resultado. Trabajaremos con niños discapacitados hasta que se mejoren. Niños del barrio de Santiago recibirán tres horas de formación en liderazgo tres veces a la semana. En el año pasado, el porcentaje de padres quienes reportaron que sus niños leyeron mas como resultado de haber tenido mas sesiones de lectura por su padres. Malo: Solo sabemos con quienes está trabajando esta organización, y ese es el único aspecto SMART de este resultado. Bueno y malo: El ejemplo es medio específico, medible, y de un tiempo limitado, pero solo describe el rendimiento y no el resultado. No es muy medible porque no sabemos cuántos niños y no es basado en el tiempo porque no sabemos cuánto dura el proyecto. No podemos decir si este resultado es apropiado ni realista porque no conocemos el contexto organizacional. El resultado no habla del impacto ni de la meta de la organización. Bueno: Es específico (los niños leen mas como resultado del programa), medible (los cuidadores reportan), y limitado en el tiempo (el año pasado). [3 minutos]
17 + Práctica: Escriban una descripción de resultado para GFC Refiéranse a las preguntas de abajo para determinar cual resultado de su programa le gustaría reportar a GFC ¡Ahora ustedes! En el año pasado _(4)__ de (3) fueron (1) basado en (2) [6 minutos]
18 + Recolectando Datos ¿Por Qué? Hace posible monitoreo y evaluación ¿De dónde se puede conseguir datos? Sus propios registros Organizaciones locales o gobierno Herramientas: Preguntas para contemplar ¿Quién recolecta los datos, cómo, y cuándo? ¿Dónde se almacenan los datos y cómo se organizan? Otros recursos: Mi M&E--Sitio web sobre la colección de data: http://www.mymande.org/howto- recomm-page?q=node/94 Seguir los recursos, el número de participantes, y qué ocurrió durante su programa de una manera consistente y repetible.
19 + Recolectando Datos Fuentes Hoja de asistencia (Actividad extra escolar) Llamadas telefónicas (Proyecto de Reunificación) Método de Colección Cada día a las 4pm los niños hacen lista con sus nombres, apellidos, y edades. Al final de la actividad, el coordinador del proyecto ingresa la información en una hoja de cálculos de Excel. El coordinador del programa llama para averiguar si un niño ha sido reunificado con su familia. Los resultados se registran en una hoja de cálculos. La hoja de cálculos se actualiza después de cada llamada. ¿Por qué? Recolectar datos para: Informes Ayudarles a tomar decisiones sobre su programa Lograr los mejores programas posibles Saber si están logrando sus objetivos Recursos: http://www.academia.edu/1636820/ Monitoreo_y_Evaluacion_de_Proyect oshttp://www.academia.edu/1636820/ Monitoreo_y_Evaluacion_de_Proyect os (Capítulo 5)
20 + Análisis de Datos Cuantitativo Conteos de los números, porcentajes, frecuencias, y promedios para responder a las preguntas tales como ‘¿cuánto?’ y ‘¿cuántos?’ Cualitativo Un análisis descriptivo para responder a las preguntas ‘¿por qué?’ y ‘¿cómo?’ Esto significa que se identifican los temas, ambos comunes y perificos, de los comentarios y las narrativas de los beneficiarios y las otras partes interesadas que fueron consultados Clases de Análisis Herramientas + Recursos La mayoría de organizaciones usan recursos básicos como Excel para su análisis de datos. Existen también programas mas avanzados de análisis de datos, como por ejemplo STATA, SPSS y SenseMaker
21 + Identificando las herramientas que se pueden usar para recolectar datos Hojas de asistencia Encuestas Diálogos Entrevistas Grupos Focales Informes escolares Censos y Estadísticas Nacionales Estadísticas de su Centro de Salud Hallazgos de Investigaciones Diarios Registros Legales Comunicados de los Medios Artículos Publicados Fotografías Videos Información de las Organizaciones Sindicales Registros del Gobierno Local Observación de los Cambios de Comportamiento Plan de Recolectar Datos ¿Quien de su equipo se hará cargo de recolectar y utilizar data para mejorar sus programas? La persona que recolectará estos datos es ________________. Los recolectará cada________. (Día, semana, mes, etc.) Podemos usar estos datos para saber __________ y nos ayudaran a mejorar ___________. Una vez recolectados los datos, se almacenarán en _________ (dónde) y se organizarán por ________ (quién). ¡Ahora ustedes! [7 minutos]
22 + Recursos Adicionales Curso de Evaluacion MEASURE https://training.measureevaluation.org/certificate- courses/m-e-fundamentals-es My M&E (traduzca a español usando el botón Google en la parte de arriba de la pagina) http://www.mymande.org/elearning/ Global Health Learning Center Cursos en Español http://www.globalhealthlearning.org/translated- courses Foundation Center http://grantspace.org/Tools/Knowledge- Base/Preguntas-y-respuestas-en- espanol/Propuestas-de-proyectos/Evaluacion-de- programas-Program-evaluation ONU Mujeres http://www.endvawnow.org/es/articles/340-tipos- de-evaluacion-monitoreo-resultado-e-impacto.html Children & Evaluación (traduzca a español usando el botón Google en la parte de arriba de la pagina) http://betterevaluation.org/themes/evaluation_and _children
23 + Favor de apuntar tres cambios que pueden hacer para mejorar su sistema de M&E. ¿Qué aprendieron? ¿Cuáles cambios se pueden hacer en su trabajo hoy? ¡Ahora ustedes! [5 minutos]
24 + ¡Muchas gracias por su participación! ¿Preguntas? Contacten a: Sandra Macías del Villar, [email protected] [email protected] Eva Miller, [email protected]@globalfundforchildren.org Hagan clic en el enlace que parece en el cuadro de chatear para llenar la encuesta