1 Departamento Nacional de Planeación

2 Contenido ¿Qué hace la DSEPP? Seguimiento y evaluaciónTipos de evaluaciones Bases de datos de evaluaciones disponibles Protocolo de entrega de las bases de datos

3 A la fecha, 108 evaluaciones y una síntesis de evaluación. El SEGUIMIENTO y la EVALUACIÓN de políticas públicas permiten al Gobierno nacional y a la ciudadanía: Verificar el progreso de las políticas y programas para la consecución de los objetivos y metas priorizadas por PND Seguimiento: Cuenta con tableros de control (herramientas gerenciales) que incluyen información cuantitativa y cualitativa. Presentan información estratégica sobre el avance de las metas del PND, para generar alertas tempranas y acciones que ayuden a alcanzar los objetivos de gobierno. Tablero del Presidente, 24 tableros sectoriales y 8 tableros intersectoriales. Evaluación: A la fecha, 108 evaluaciones y una síntesis de evaluación. Entre 2010 y 2014, finalizado 69 evaluaciones, en 16 sectores. Aproximadamente evaluaciones por año. Fortalecimiento de cooperación y acompañamiento de academia, multilaterales, 3ie. Seguimiento: Determina el avance de las metas gubernamentales en términos de productos y resultados, generando información continua y confiable acerca del cumplimiento de los compromisos establecidos en el PND. Evaluación: Hace investigación sistemática y objetiva en alguno de los eslabones de la cadena de valor de la intervención pública, cuyo propósito es mejorar el diseño, la implementación, la ejecución y/o los efectos de la misma. Innovación: Articula la información del seguimiento y la evaluación, además de desarrollar instrumentos complementarios (por ejemplo, Encuesta de Percepción) para la toma de decisiones.

4 3.2 Evaluación de políticas públicasPortafolio de evaluaciones para determinar pertinencia, eficacia, eficiencia, impacto y sostenibilidad de la Política Pública. Síntesis de evaluaciones

5 ¿Qué motiva a Sinergia a difundir sus bases de datos?Estrategia de Datos Abiertos1: “Apoyar la generación de progreso económico y social en el país por medio del acceso y uso de la información pública por parte de ciudadanos y empresas, para que sea utilizada o transformada para la generación de servicios de gobierno que generen valor a la sociedad en general y fomentar la transparencia del Estado por medio de la información y los datos puestos al alcance del ciudadano y las empresas. “ 1 Gobierno en Línea

6 Contenido ¿Qué hace la DSEPP? Seguimiento y evaluaciónTipos de evaluaciones Bases de datos de evaluaciones disponibles Protocolo de entrega de las bases de datos

7 Bases de datos evaluacionesEvaluación de la Estrategia de prevención de embarazo en la adolescencia (2014) Salud Evaluación de los Modelos Educativos Flexibles (2014) Educación Evaluación del Proceso de Evaluación y Certificación de Competencias Laborales (2012) Trabajo Evaluación de la Estrategia de Articulación de la Educación Media con la Educación Superior y la Formación para el Trabajo (2012) Trabajo Evaluación de operaciones de la Política de Atención Humanitaria (2014) Inclusión social Políticas Activas del Mercado Laboral (2013) Inclusión social Evaluación Programa de Alimentación Escolar (2012) Inclusión social Línea de base de la oferta institucional “De Cero a Siempre” (2011) Sociales Evaluación del Programa de Desarrollo Rural Integral con Enfoque Territorial (2012) Evaluación del Programa de Familias Guardabosques y Grupo Móvil de Erradicación Manual de Cultivos Ilícitos (2012) Rurales

8 Bases de datos evaluacionesEvaluación institucional del Programa de Vivienda de Interés Social Rural (2013) Línea de base para evaluación de impacto del programa Vivienda de Interés Social Urbano (VISU) en sus componentes de Mejoramiento Integral de Barrios y Titulación de Predios Fiscales. Evaluación del Programa de Consolidación de la Política de Vivienda de Interés Social y Desarrollo Territorial (2013) Evaluación de los programas de subsidio familiar de vivienda y subsidio familiar de vivienda en especie (2014) Vivienda Evaluación de operaciones y de avance de productos del Proyecto de Fortalecimiento de Servicios a la Justicia (2010) Justicia Proyecto Batuta: Déjate tocar por la música  (2010) Cultura Sistema Integrado de Transporte Masivo  Barranquilla (2012) Transporte Varios

9 Bases de datos evaluacionesSociales

10 1. Evaluación de procesos y LB de la Estrategia para la prevención del embarazo en la adolescencia y la promoción de proyectos de vida para los niños, niñas, adolescentes y jóvenes (NNAJ) Conpes 147/2012 Población objetivo: NNAJ entre los 10 y 19 años (hombres y mujeres) ubicados en los 192 municipios en donde se ha llevado a cabo el pilotaje de la Estrategia. Tamaño de la muestra: Encuesta virtual a 11 municipios. Encuesta a Padres, Madres y Cuidadores 3,649; Total rural: 19%; total urbano: 81%. Cobertura de encuesta a NNAJ: 5,266 distribuido en 53 municipios. Módulo de preguntas de historias y experiencias vividas de menores de 14 años: 2,190 (41.5%). Representatividad: La muestra es representativa a ocho regiones (Amazonía, Orinoquía, Bogotá, Caribe, Centro - Santanderes, Eje Cafetero - Antioquia, Pacífico, Sur y Valle). Periodo de recolección: abril – junio de 2014 Variables de interés: Conocimiento estrategia, socioeconómicas, participación comunitaria, responsabilidad y supervisión parental, convivencia en el hogar, expectativas de vida de los NNAJ, participación sexual y embarazo, percepciones, actitudes y conocimientos sobre la sexualidad, acceso a servicios de salud. Generalidades de la política: Es una estrategia de atención a la población de niños y adolescentes, que se formaliza en el conpes 147 de 2012 La atención se enfoca en brindarles a la población un proyecto de vida que permita a la población no sentirse La población de interés son los niños, niñas y adolescentes NNA entre los 10 y 19 años, ubicados en los 192 municipios en donde se ha llevado a cabo el pilotaje de la estrategia (Conpes 147). Descripción de la evaluación: Evaluación de proceso de implementación del diseño operativo de la estrategia Levantamiento de la línea base de niños y adolescentes Resultados Principales resultados: Se encontró mayor riesgo de embarazo en las mujeres de las zonas rurales. La totalidad de los NNA piensa que lo que pasa con su futuro está fuera de su control, aun cuando reconocen que si se quiere lograr algo se plantea con metas, que las cosas que haga en su juventud definirán su vida adulta y que ante una decisión piensan sobre las consecuencias La estructura del hogar, se evidencia que la jefatura femenina es un fenómeno primordialmente urbano entre más tarde se inicien la relaciones se reduce la probabilidad de embarazo en la adolescencia La información se recolectó mediante encuestas en 53 municipios de los 192 del piloto de la Estrategia Levantamiento de línea de base Cobertura de encuesta a PMC: (91.22%); Total rural: 19%; total urbano: 81% Cobertura de encuesta a NNAJ: (99.6%); Total rural: 19%; total urbano: 81%. Grupos focales de PCM, Agentes Educadores y Líderes: 23 Evaluación de operaciones Taller – coordinadores regionales: 1; Taller Delphos – entidades nivel nacional: 1; Grupos focales: 12; Entrevistas: 30

11 2. Evaluación institucional y de resultados de la estrategia Modelos Educativos Flexibles (MEF)1.8M de matriculados MEF de 8.3M de matricula oficial Representatividad: 708 IE visitadas. Es una muestra representativa del universo de las IE con 2 o más MEF. Tamaño de la muestra: 62 Secretarías de Educación Certificadas: 27 departamentales, 35 municipales Formulario virtual para la Secretaría y presencial para el Secretario y el Encargado MEF 708 IE -Encuesta presencial a: 668 Rector; 1,349 docentes: 1,065 MEF, 284 tradicional rurales 4,352 estudiantes de MEF evaluados: 2,146 Primaria: (Escuela Nueva, Aceleración del Aprendizaje, Circulo de Aprendizajes); 2,206 Bachillerato: (grupos Juveniles Creativos, Modalidad Virtual Asistida, Postprimaria, Académica Rural, Pacicultor, Telesecundaria) 1,104 Canasta educativa (oferta educativa) Periodo de recolección : marzo - mayo de Único levantamiento Variables de interés: Deserción, reprobación, cobertura, modelo pedagógico, percepción del modelo de MEF. Generalidades de la política: Los MEF surgen como una respuesta del Ministerio de Educación Nacional (MEN) a la baja cobertura y precariedad de la educación para ciertas poblaciones particularmente vulnerables (población rural dispersa, en precariedad económica o menores en la fuerza de trabajo), con el objetivo de facilitarles el acceso al sistema educativo. Los MEF incluyen materiales y una canasta educativa. Adicionalmente, proveen formación a docentes y directivos para incrementar la capacidad institucional y posibilitar la continuación de los MEF. En 2013, la totalidad los MEF ayudaron con la matrícula oficial a estudiantes. Los 10 MEF que comprenden la evaluación abarcan (correspondientes al 11.35% de los estudiantes que conforman la matrícula oficial total). Descripción de la evaluación: La evaluación de los MEF corresponden al periodo , pero los MEF se remontan a 1961 (Escuela Nueva). La evaluación fue institucional y de resultados. Se buscó evaluar la capacidad institucional de las entidades encargadas de desarrollar la estrategia MEF. Se usó una metodología de “deber ser”, donde se establecieron los parámetros óptimos de las distintas entidades. Se crean tres Índices de Capacidad Institucional que se comparan con el óptimo para evaluar el desempeño de las entidades. Principales resultados: Se evidencian carencias a nivel institucional. Los actores reportan falta de acompañamiento entre los involucrados: de las SEC a las IE y del MEN a las SEC. Analizando la cantidad de matrículas, se evidencia que estas han crecido. Sin embargo, se anota que dicho crecimiento proviene de unos pocos MEF que han logrado consolidarse a través del tiempo (Escuela Nueva, Aceleración del Aprendizaje, Telesecundaria y Postprimaria) mientras que el efecto de los otros MEF es bastante marginal respecto a la matrícula total.

12 3. Evaluación para evidenciar, analizar y documentar la importancia y pertinencia del Proceso de Evaluación y Certificación de las Competencias Laborales. Decreto 933 de 2003 Representatividad: Personas que fueron certificadas por primera vez entre 2009 y 2012 y empresas que tuvieron alianzas con el SENA para realizar el Proceso de Evaluación y Certificación de Competencias Laborales - PECCL de sus empleados. Tamaño de la muestra: 1,395 personas certificadas (con diferencia en intensidad de tratamiento) en 17 municipios. 429 empresas Periodo de recolección: julio - agosto único levantamiento. Información retrospectiva permite análisis de intensidad. Variables de interés: empleabilidad, productividad, formación laboral, movilidad laboral, motivación y reconocimiento.  Generalidades de la política: Los PECCL buscan certificar competencias que han sido normalizadas por el SENA. Están disponibles para todas las personas que consideran que tienen una competencia y desean certificarla (independientes y desempleados, y empleados a través de sus empresas). Son liderados por el SENA, que realiza el 99% de las certificaciones, en conjunto con cuatro certificadores acreditados, que realizan el 1% restante. Mediante Decreto 933 de 2003 se estableció que el SENA diseñará, regulará, normalizará y certificará las competencias laborales. Descripción de la evaluación: La evaluación se ejecutó de noviembre de 2011 a diciembre de 2012. Es una evaluación de resultados y de impacto. Se hicieron encuestas a 1395 personas certificadas y 429 empresas con convenios de certificación con el SENA, cuyos datos permiten evaluar el impacto de los PECCL sobre: Empleabilidad Productividad Continuación de la formación laboral Movilidad laboral Motivación y reconocimiento La evaluación de impacto se realizó entre individuos que obtuvieron su certificación en distintos momentos del tiempo, estimando efectos marginales de tener un mes más de certificación, esto pues no se tiene un contrafactual idóneo. Principales resultados: Hay pertinencia y legitimidad de los PECCL. También hay un impacto positivo tanto para las personas como para las empresas, particularmente en empleabilidad y productividad. Los PECCL son demorados. Además, enfrentan una demanda creciente que debe ser atendida por el SENA y se debería incentivar la participación de más certificadores privados.

13 4. Evaluación de la Estrategia de Articulación de la Educación Media con la Educación Superior y la Formación para el Trabajo CONPES Social 81 de 2004 Representatividad: 338,000 egresados de la educación media de instituciones articuladas. Tamaño de la muestra: 2,600 egresados de la educación media en 162 instituciones educativas de 50 municipios del país. Levantamiento: septiembre-octubre de El levantamiento incluye control (egresados de IE no articuladas) y tratamiento (egresados de IE articuladas). Variables de interés: Empleabilidad, estudios posteriores, búsqueda de empleo, duración del desempleo, desempeño en pruebas estandarizadas, habilidades específicas. UFM: Unidad Final de Muestreo, USM: Unidad Secundaria de Muestra, UPM. Unidad Primaria de Muestra, SIMAT: Sistema de Matrícula Estudiantil de Educación Básica y Media. Generalidades de la política: El CONPES Social 81 de 2004 estructura una política clara de articulación de la educación. El objetivo general de la política es favorecer el tránsito de los estudiantes hacia la educación secundaria y la educación para el trabajo. La Estrategia hace énfasis en el desarrollo de competencias laborales generales y específicas, y a su vez facilita la vinculación al mundo productivo a través de la coordinación con entidades como el SENA. Entre el 2009 y el 2011 la Estrategia ha estado presente 3,197 instituciones de educación media con participación de 563,010 estudiantes. Descripción de la evaluación: Evaluación de impacto e institucional que busca generar recomendaciones que permitan una implementación más efectiva de la Estrategia. Se realizaron 2600 encuestas a egresados de educación media, algunos de instituciones articuladas y otras no. La evaluación de impacto se hizo a través de un Propensity Score Matching. Se determinó el efecto de ser egresado de una institución articulada sobre múltiples variables: empleabilidad, duración del desempleo, empleo asalariado, etc. Principales resultados: Los esfuerzos por articular la educación media con la superior y el mercado laboral tienen grandes potencialidades, especialmente en zonas rurales y ciudades pequeñas. Se encuentran varios efectos nulos o negativos en las zonas urbanas, posiblemente por problemas de gestión en la estrategia. Otra posible explicación es que al incentivar la rápida inserción al trabajo, la estrategia desincentiva la mayor formación de capital humano.

14 Levantamiento: noviembre-diciembre de 2014 - único levantamiento. 5. Evaluación de operaciones de la Política de Atención Humanitaria a población en situación de desplazamiento Ley 1448 de 2011 Representatividad: nivel nacional de hogares desplazados que han solicitado atención humanitaria entre el Tamaño de la muestra: 1,854 hogares que solicitaron atención humanitaria. Levantamiento: noviembre-diciembre de único levantamiento. Variables de interés: Desplazamiento, victimización, vulnerabilidad, atención prestada (albergue temporal, asistencia alimentaria, recursos mínimos de subsistencia), características socioeconómicas del hogar.  Plus: Es posible estimar IPM Generalidades de la política: Parte y se regula por Ley 1448 de 2011. Contempla tres tipos de atención: atención humanitaria inmediata, de emergencia y de transición. En 2012 y 2013, se han registrado 1.035,435 hogares solicitando atención humanitaria, de los cuales 435,327 se encuentran en los municipios considerados en la evaluación. Los recursos destinados son insuficientes para satisfacer la demanda. Hubo un desfase del 33% en 2012 y del 11% en 2013. Descripción de la evaluación: Evaluación de operaciones que busca analizar la pertinencia del diseño del nuevo modelo de atención de la política. Como metodología la evaluación: Caracterizó el flujo de actividades del proceso Analizó el flujo de información Identificó factores críticos de éxito. Se realizaron 1,854 entrevistas estructuradas a hogares en situación de desplazamiento que solicitaron AH. Principales resultados: Si bien el modelo mide adecuadamente la vulnerabilidad del hogar a través de sus carencias, no definió las condiciones de salida. Existe gran incertidumbre sobre los recursos de la política y si estos serán suficientes para pagar las solicitudes y las tutelas de carácter inmediato. Hay que hallar medidas para solventar el riesgo financiero, como un sistema de alertas tempranas por municipio y la posibilidad de un crédito contingente con la banca multilateral.

15 6. Línea de base para la evaluación de impacto y costo beneficio de las Políticas Activas de Empleo (los programas TU, RIE, ICE e IS) Representatividad: La muestra es representativa para cada uno de los programas Trabajemos Unidos (TU), Ruta de Ingresos y Empresarismo (RIE), Incentivo a la Capacitación para el Empleo (ICE) e Ingreso Social (IS). Tamaño de la muestra: Se realizaron 5,492 encuestas en total, de las cuales 2,996 son tratamiento y 2,946 son control. Del total, 1,486 corresponden a RIE, 1,108 a ICE, 1,731 a TU y 1,617 a IS. Levantamiento: junio - septiembre de Levantamiento línea de base para evaluación de impacto. Variables de interés: Tasa de ocupación, tasa de desempleo, variables socioeconómicas, pobreza, gastos del hogar, habilidades para la vida. Generalidades de la política: Las políticas Trabajemos Unidos (TU), Ruta de Ingresos y Empresarismo (RIE), Incentivo a la Capacitación para el Empleo (ICE) e Ingreso Social (IS) se agrupan bajo el nombre e Políticas Activas del Mercado Laboral. En el caso de TU los beneficiarios son 220mil familias de la Red Unidos, para RIE son 11,700 personas en extrema pobreza y 8,665 desplazados y para IS 5mil personas. En total, las políticas movilizan recursos por más de 268mil millones. Los recursos destinados son insuficientes para satisfacer la demanda. Hubo un desfase del 33% en 2012 y del 11% en 2013. Descripción de la evaluación: Evaluación de impacto e institucional que busca generar recomendaciones que permitan una implementación más efectiva de la Estrategia. Se realizaron 2600 encuestas a egresados de educación media, algunos de instituciones articuladas y otras no. El diseño muestral propuesto para la encuesta fue probabilístico, estratificado y bietápico: Primero se seleccionaron municipios con Probabilidad Proporcional al Tamaño (PPT) y posteriormente personas con un Muestreo Aleatorio Simple (MAS). Se espera analizar el impacto de los programas sobre la capacidad de generar ingresos, la inserción laboral, la empleabilidad, el desarrollo de emprendimientos, calidad de los empleos y pobreza de los participantes. Principales resultados: Hay diferencias significativas en los grupos de tratamiento y control tanto en las variables de caracterización sociodemográfica como en los indicadores de impacto. Sobre la muestra llama la atención que presentan una tasa de desempleo menor que el promedio nacional, pero su tasa de informalidad es del 80%. Hay muchos factores potencialmente inobservables que afectan tanto la probabilidad de ser tratamiento como los efectos de las intervenciones. Por lo tanto, los impactos que se encuentren tendrán que ser muy grandes para que no haya duda de su existencia.

16 7. Evaluación de Operaciones y Resultados para Determinar el Grado de Efectividad del Programa de Alimentación Escolar (PAE) Ley 1176 de 2007 Representatividad: 4 millones de niños beneficiarios del PAE (56% de la población de colegios oficiales de 5-17 años) Tamaño de la muestra: 3,173 estudiantes de 97 sedes educativas distribuidas en 31 municipios. 97 maestros y 31 operadores. Periodo de recolección: mayo-junio 2012 (bajo implementación ICBF) Plus: Comparación con ENSIN 2010 y pregunta PAE – ELCA. Variables de interés: Estudiantes y padres: Percepción sobre el PAE y sus efectos sobre los estudios, hábitos de higiene y alimentación, permanencia y desempeño escolar. Operadores: Contratación y costos, promoción de hábitos saludables. Maestros: Percepción sobre la operación, promoción de hábitos saludables, operación del PAE. Generalidades de la política: En ley 1176 de 2007 se estable la asignación presupuestal especial para alimentación escolar, que administra por el ICBF. Y se brinda por medio de operadores logísticos. Aporte a dos de los Objetivos del Desarrollo del Milenio, en particular reducir la pobreza extrema y hambre, al aportar al 30% de las recomendaciones diarias de nutrientes de los niños, niñas y adolescentes. Y segundo, lograr la enseñanza primaria universal mediante el apoyo a la reducción de la deserción escolar. La focalización de las IE se elige de manera discrecional por el gobierno local, y debe suplir en primer lugar las necesidades de los prescolar y primaria, y paulatinamente se debe cubrir la toda la población. Descripción de la evaluación: Se realizó una evaluación de operaciones (entrevistas y el trabajo con los operadores) Análisis costo beneficio Resultados. Dentro de la evaluación de resultados se contrastaron (matching de vecino más cercano) con los que presenta la Encuesta Nacional de Situación Nutricional del Lo que permitió ver un avance en la realización del mismo. La evaluación de resultados sobre las probabilidades auto-reportadas de desertar, de las madres y los beneficiarios del Programa; sobre la inasistencia escolar, y sobre los mecanismos a través de los cuales participar en el PAE genera sus efectos sobre estos objetivos Principales resultados: El PAE beneficia a los más pobres. El programa genera impactos deseables en deserción y asistencia escolar, especialmente en adolescentes y zona rural. Cuando PAE y Familias en Acción concurren, se agregan efectos del PAE en seguridad alimentaria. Los beneficios del PAE exceden sus costos, incluso 3.5 veces para el caso de adolescentes rurales. La organización contractual y financiera del PAE dificulta la sostenibilidad y el seguimiento a la operación.

17 11. Línea de base de la oferta institucional “De Cero a Siempre”PND “Prosperidad para todos” Representatividad: 13,783 IPS’s del país, tanto públicas como privadas, y para cinco tamaños distintos de municipios clasificados por habitantes: 0-20,000; 20,000-50,000; 50, ,000; 100,000 y más, y capitales de departamento. Tamaño de la muestra: 376 IPS. La submuestra de IPS’s para revisión de historias clínicas comprendió 90 IPS’s de las cuales se obtuvieron 1377 historias clínicas. Levantamiento: Línea de base. Julio-Noviembre 2011. Variables de interés: Información de historia clínica, tanto de las gestantes como de los niños en etapa de crecimiento y desarrollo, motivos de consulta, información institucional de las IPS y los Centros de Desarrollo Infantil. Generalidades de la política: -En el PND “Prosperidad para todos” está “diseñar e implementar la estrategia de atención a la primera infancia, denominada De Cero a Siempre”. -La estrategia se entiende como “un conjunto de acciones planificadas para garantizar el de desarrollo integral de niños y niñas de 0 a 6 años. -Tiene componentes de atención integral, que comprende realizaciones, ruta de atención y registro niño a niño; otro de calidad, que incluye la formulación de lineamientos técnicos, estándares y asistencia técnica, y un último componente de ajuste institucional. Descripción de la evaluación: -Línea de base que permite caracterizar la calidad de los servicios de atención en salud y en los centros de desarrollo infantil, al igual que evaluar la capacidad institucional con la que se cuenta. -Evalúa los servicios de preparación para el embarazo, de cuidado a la gestante, de los controles a recién nacido y de los controles de crecimiento y desarrollo. -Un elemento importante es la identificación de rezagos en la calidad de la prestación de los servicios de atención a primera infancia. Principales resultados: -Uno de los principales problemas para la efectiva implementación de la estrategia es el de la coordinación intersectorial e interinstitucional. -La revisión de historias clínica permite ver un déficit en la calidad de las mismas de acuerdo con los estándares establecidos. -Hay limitaciones importantes en cuanto a la disponibilidad de recursos humanos, físicos, materiales, tecnológicos y financieros para la planeación, la implementación y el seguimiento y la evaluación de la política de Primera Infancia.

18 Bases de datos evaluacionesRurales

19 Tamaño de la población: 1. LB para evaluación de impacto del Programa de Desarrollo Rural Integral con Enfoque Territorial-PDRIET Tamaño de la población: Encuesta presencial a 4,660 hogares: 46% sur de Tolima y 54% norte del Cauca Encuesta presencial a los 4,660 hogares sobre la Unidad Productiva Agropecuaria UPA: Jefe de hogar, cónyuge o una persona mayor de 18 años miembro del hogar que trabaje en el cultivo. Encuesta presencial a 20,017 personas Información georeferenciada. Periodo de recolección: octubre –noviembre de 2013 Variables de interés: IPM, pobreza por ingresos rural, titularización de la tierra, ingresos derivados de actividades agropecuarias, trabajo remunerado (no agropecuario), asistencia a cursos específicos para su actividad. Generalidades de la política: Los objetivos son articular la oferta pública y privada en el espacio rural con las necesidades de los hogares, con el fin de superar la pobreza de los pobladores rurales. Hasta ahora la ejecución se trabaja en el sur del Tolima y el norte del Cauca (piloto). Dos niveles: familia y territorio. El programa incluye: seguridad alimentaria, proyecto productivo con asistencia técnica, formalización de la propiedad, vivienda rural, construcción de un sistema de saneamiento básico y uso eficiente del suelo. Tres ejes: ordenamiento social de la propiedad y productivo del territorio; Acceso a bienes públicos sociales y sectoriales; Desarrollo de capacidades para el acceso a activos y generación de ingresos suficientes y sostenibles. Focalización: “Trabajo conjunto con las alcaldías locales en la definición de criterios de focalización y selección de veredas y beneficiarios con base en criterios técnicos que fortalecen la capacidad institucional local” Descripción de la evaluación: Levantamiento de línea base que permita caracterizar a la población objetivo. Se plantean diferentes opciones para estimar el impacto: Regresión discontinua, Roll-out randomization y optimalmatching. Principales resultados: El programa ayuda a las familias más necesitadas pero se debería validar el SISBEN como instrumento de focalización. Los beneficiarios son vulnerables políticamente hablando por los intereses políticos de los alcaldes. Existe un problema de comunicación, ya que el programa se entiende como un programa de vivienda. Es difícil hacer una evaluación de impacto salvo que existiesen programas de intervención detalladamente elaborados.

20 2. Evaluación del Programa Familias Guardabosques - PFGB (voluntario) y Grupo Móvil de Erradicación (forzoso) Representatividad: La población se compone de 106,919 hogares, ubicados en 122 municipios, de 21 departamentos del país. Inicia en 2003, transforma 2005. Tamaño de la muestra: 3,710 (grupo de tratamiento fase VII, control vecino y control distante) línea de base 2,500 (fases I a V) encuesta de resultados Periodo de recolección: mayo – julio de único levantamiento Plus: Es posible identificar efectos de diferentes políticas. Variables de interés: socioeconómicas, participación del hogar en otros programas, capital social, calamidades sufridas por el hogar, relación y apoyos por parte del PFGB, sostenibilidad ambiental, caracterización de la unidad productiva o negocio, relación productiva con otras organizaciones estatales o privadas diferentes a PFGB, prácticas empresariales, ahorro y acceso al crédito. Generalidades de la política: Empiezan en el 2003. EL PFGB (Programa de Familias GuardaBosques) y el GME (Grupo Móvil de Erradicación) son los programas que conforman el PCI – Programa contra los cultivos ilícitos. Mientras la primera es un programa voluntario de erradicación manual, el segundo es uno forzoso. El primero se da una estrategia de pago por cultivo, el segundo busca disminuir el cultivo en área de parques nacionales. El programa se transforma en el programa actual en el 2005 tras la creación de acción social. El PCI ha intervenido en 492 municipios que equivale al 44% del país en 32 departamentos. El programa piloto fue en la sierra de la Macarena. En el marco de la erradicación voluntaria se busca que las condiciones de vida de las comunidades afectadas por la presencia de cultivos ilícitos (también se trabaja con la prevención). El programa de desarrollo alternativo (PDA) programa que contiene los programas de PCI tiene como objetivos: Consolidar el proceso de erradicación de cultivos ilícitos y evitar su expansión. Brindar alternativas viables de ingreso, empleo y valorización. Promover procesos de desarrollo institucional y legitimación del Estado. Apoyar el fortalecimiento de capital social. Descripción de la evaluación: Evaluación de resultados, Evaluación institucional, Levantamiento línea base fase VII. Usando fuentes secundarias y levantamiento de información cualitativa y cuantitativa. Problemas con la base: no aleatorio por lo que se hizo una evaluación cuasi-experimental. Principales resultados: La arquitectura institucional es pertinente, sin embargo, no están articuladas con otras. La superficie total de cultivos ilícitos erradicada manual y voluntariamente, en las primeras cinco fases del PFGB, fue de hectáreas (9.036 en las Fases I a III; y en las Fases IV y V), con un porcentaje de resiembra del 5%. El Índice de Calidad de Vida (ICV) aumentó significativamente en 2 puntos para las familias beneficiadas. Los costos de erradicación han aumentado así como la pérdida de los grupos ilegales.

21 Bases de datos evaluacionesVivienda

22 Periodo de recolección: junio – agosto de 2013- único levantamiento. 1. Evaluación institucional y de resultados del programa de Vivienda de Interés Social Rural – VISR (inicia 2000) Programa: reducción de déficit habitacional, vivienda ubicada en terreno <1 UAF. Subsidio familiar (dinero o especie) Representatividad: beneficiarios de VISR residentes, no residentes y residentes pero no beneficiarios. 131,000 familias beneficiarias. Tamaño de la muestra: 2,948 beneficiarios (reside la VISR, no reside en la VISR y reside pero no fue beneficiario)en 125 municipios Periodo de recolección: junio – agosto de único levantamiento. Variables de interés: caracterización de los hogares, déficit cualitativo y cuantitativo, condiciones de vida, ingresos, gastos y financiación de la vivienda, identificación de beneficiarios y no beneficiarios de la Red Unidos, tipo de mejoramiento que recibió en la vivienda, acceso a servicios públicos, satisfacción con la VISR Generalidades de la política: 2000-actualidad Reducción de los índices de hacinamiento crítico y el déficit habitacional en zonas rurales. Subsidio familiar de vivienda de interés social rural. Dinero o especie (una sola vez). Tipos de soluciones posibles: mejoramiento, construcción o adquisición de vivienda nueva. Puede ser crédito o recursos directos Valor total 813mil millones de pesos: 131mil familias. Focalización: “vivienda ubicada en un terreno de uso agropecuario, forestal o pesquero de tamaño menor o igual a una Unidad Agrícola Familiar (UAF), definida según la Ley 505 de 1999”. Descripción de la evaluación: Evaluación de resultados cuantitativos y cualitativos y evaluación institucional. En la evaluación de resultados se concentró en los productos (se estima en qué medida el programa les proveyó de vivienda digna) y los efectos (Cambio en el IPM en el componente de vivienda). Principales resultados: Diseño institucional inestable y altos costos de coordinación. (Muchos cambios que debilitan la coordinación) En la evaluación se concluye que si bien el programa ha corregido algunas fallas del mercado y ha tenido un impacto positivo sobre los beneficiarios, existen algunos problemas asociados al mismo, por ejemplo gasto inferior al programado (15% contra 20%, de la VIS), vulnerabilidad de los beneficiarios, entre otros. UAF: un fundo de explotación agrícola, pecuaria, forestal o acuícola que depende directa y principalmente de vinculación de trabajo familiar, sin perjuicio del empleo ocasional de mano de obra contratada. La extensión debe ser suficiente para suministrar cada año a la familia que la explote, en condiciones de eficiencia productiva promedio, ingresos equivalentes a salarios mínimos legales diarios.

23 Crédito BID 1951 OC-CO para consolidar la política de vivienda. 2. Línea de base para evaluación de impacto del programa Vivienda de Interés Social Urbano (VISU) en sus componentes de Mejoramiento Integral de Barrios y Titulación de Predios Fiscales Crédito BID 1951 OC-CO para consolidar la política de vivienda. Representatividad: Muestras representativas del total de hogares beneficiarios del programa de Titulación de Predios Fiscales (TPF) y Mejoramiento Integral de Barrios (MIB). Tamaño de la muestra: En el componente de MIB se hicieron encuestas a 603 predios y 2,862 personas, y en TPF se encuestaron 1,607 predios y 7,079 personas. Levantamiento: octubre –noviembre de Línea base. Variables de interés: socioeconómicas y demográficas, características sobre ocupación de predios y viviendas, titulación, costos de tenencia, bancarización, información sobre propietarios, precios e inversiones en las viviendas. Plus: Tiene seguimiento para evaluación de impacto. Generalidades de la política: El crédito para esta política se firmó en 2008, año en el cual comenzó a operar. El objetivo del Programa es contribuir a mejorar la calidad de vida de las familias de menores recursos a través del acceso a mejores condiciones habitacionales y de entorno. Consolidar y perfeccionar el sistema de subsidios Vivienda de Interés Social (VIS) Impulsar programas masivos de titulación de predios fiscales ocupados ilegalmente con VIS; Generar instrumentos y bases para el desarrollo y aplicación de una política nacional de Mejoramiento Integral de Barrios (MIB); Fortalecer el marco institucional del sector y consolidar el sistema de información del sector. Descripción de la evaluación: Evaluación de operaciones de los programas de: Mejoramiento Integral de Barrios (MIB) y Titulación de Predios Fiscales (TPF) ocupados ilegalmente con Vivienda de Interés Social. Evaluación de impacto de TPF para identificar avances en metas y resultados esperados. Principales resultados: Los grupos de tratamiento y control arrojan similitudes significativas a nivel de las características de las viviendas y el hogar, y su composición y características socioeconómicas. Bajos índices de legalidad y titulación de los predios. La minoría de los hogares aseguran tener una calidad de vida buena, sin embargo, la mayoría reconoce que ésta ha mejorado en los últimos 5 años.

24 3. Evaluación Programa de Consolidación de la Política de Vivienda de Interés Social y Desarrollo Territorial - VISU (Seguimiento) Crédito BID 1951 OC-CO para consolidar la política de vivienda. Representatividad: Muestras representativas del total de hogares beneficiarios del programa de Titulación de Predios Fiscales (TPF) del total de beneficiarios de los componentes de Subsidio Familiar de Vivienda (SFV) y Mejoramiento Integral de Barrios (MIB). Tamaño de la muestra: 197 encuestas presenciales a beneficiarios de las cinco bolsas de SFV. 201 encuestas presenciales a beneficiarios del programa de MIB. 1,601 encuestas presenciales a beneficiarios del programa de TPF. Periodo de recolección: octubre – noviembre de primer seguimiento. Variables de interés: socioeconómicas, demográficas, características sobre ocupación de predios y viviendas, titulación, costos de tenencia, bancarización, información sobre propietarios, precios e inversiones en las viviendas, variables asociadas al municipio. Plus: Tiene línea de base para evaluación de impacto. Generalidades de la política: El objetivo del Programa es contribuir a mejorar la calidad de vida de las familias de menores recursos a través del acceso a mejores condiciones habitacionales y de entorno. consolidar y perfeccionar el sistema de subsidios Vivienda de Interés Social (VIS); impulsar programas masivos de titulación de predios fiscales ocupados ilegalmente con VIS; generar instrumentos y bases para el desarrollo y aplicación de una política nacional de Mejoramiento Integral de Barrios (MIB); fortalecer el marco institucional del sector y consolidar el sistema de información del sector. Descripción de la evaluación: Evaluación de operaciones de los programas de: Mejoramiento Integral de Barrios (MIB) y Titulación de Predios Fiscales (TPF) ocupados ilegalmente con Vivienda de Interés Social. Evaluación de impacto de TPF para identificar avances en metas y resultados esperados. Principales resultados: Entre las comunidades existe una alta valoración del programa de TPF. Los beneficiarios valoran el acceso al título de propiedad y ven más ventajas que desventajas. No obstante, el incumplimiento o la falta de información en algunos municipios sobre el avance del proceso han creado desconfianza sobre el resultado final del proceso en varias de las comunidades visitadas. Bajos índices de legalidad y titulación de los predios. Se recomienda realizar un acompañamiento más cercano a los beneficiarios.

25 4. Evaluación de operaciones y línea de base de los programas de Subsidio Familiar de Vivienda (SFV) y Subsidio Familiar de Vivienda en Especie (SFVE) Conpes 3740 de 2013 Representatividad: Para el SFVE, se eligió la muestra con base en un estimado de 35,514 Tamaño de la muestra: 8,335 encuestas presenciales a hogares beneficiarios (5,041 tratamiento y 3,294 control) 70 entrevistas virtuales estructuradas a municipios. Información georreferenciada. En SVF: Hogares subsidio asignado legalizado vs. asignado no legalizado En SFVE: Hogares subsidio asignado legalizado vs. asignado no legalizado En SFVE: Ganadores y perdedores de sorteo Periodo de recolección: abril - julio de único levantamiento. Variables de interés: socioeconómicas, criterios de elegibilidad a los programas, composición del gasto, indicadores de pobreza, mercado crediticio, generación de ingresos y empleo, capital social y participación en otros programas gubernamentales. Generalidades de la política: El programa busca reducir el déficit habitacional existente, garantizando una vivienda digna. El SFVE consiste en el otorgamiento de subsidios en especie (100% de una Vivienda de Interés Prioritario) y de todos los bienes complementarios de la vivienda. Está destinado a familias en extrema pobreza, desplazados y afectados por desastres naturales. Se basa en recomendaciones del CONPES 3740 de 2013. El SFV permite el cierre financiero a familias con ingresos de 1-2 SMMLV que cuenten con un ahorro de al menos 5% del valor de la vivienda para construir en sitio propio o mejorar una Vivienda de Interés Social. Se basa en recomendaciones del CONPES 3746 de 2013. Descripción de la evaluación: Es una valuación de operaciones comparativa entre el SFV y el SFVE, y línea de base para evaluación de hogares, de los cuáles fueron tratamiento y controles. Se realizaron encuestas estadísticamente representativas a hogares, de los cuales fueron tratamiento y controles. La evaluación se divide en tres partes: 1) Para el SFV, entre hogares con subsidio asignado y legalizados vs. Hogares con subsidio asignado y no legalizado. 2) Para el SFVE entre hogares que obtuvieron el subsidio de manera directa y está asignado y legalizado vs. hogares que recibieron el SFV y lo tienen asignado pero no legalizado. 3) Para el SFVE, aquellos que ganaron el sorteo vs. aquellos que lo perdieron. Principales resultados: Hay una alta tasa de no elegibilidad de los proyectos de adquisición de vivienda. Operativamente el programa tiene carencias. Esto se evidencia en las altas tasas de rechazo de los proyectos y las bajas tasas de asignación de viviendas. Sólo el 0.45% de los hogares no cuentan con ninguno de los tres criterios de elegibilidad establecidos para SFVE. No beneficia a la población pobre. A partir del IPM, en SFV y SFVE sólo el 26% y el 40% son pobres, respectivamente.

26 Bases de datos evaluacionesVARIOS Justicia Cultura Transporte

27 CONPES 3559 de 2008. Con préstamo con Banco Mundial realizado en 2009. 1. Evaluación de operaciones y de avance de productos del Proyecto de Fortalecimiento de Servicios a la Justicia CONPES 3559 de Con préstamo con Banco Mundial realizado en 2009. Representatividad: Tiene representatividad a nivel de los despachos judiciales intervenidos por el proyecto, el cual tuvo lugar en Bogotá, Barranquilla, Cali, Medellín, Cartagena y Bucaramanga. Tamaño de la muestra: 87% de los despachos judiciales beneficiados por el proyecto. Estos son 150 de 173 jueces que fueron priorizados por el Consejo Superior de la Judicatura. Levantamiento: marzo 6 a junio Único levantamiento. Variables de interés: Gestión de los jueces, secretarios y sustanciadores, características sociales, procesos terminados y en curso, congestión de los despachos. Generalidades de la política: El proyecto busca el fortalecimiento de la rama judicial, con objetivo de aumentar la productividad y reducir la congestión. Cuenta con un presupuesto de US$20 millones a ejecutarse en cuatro años. El proyecto involucra un nuevo modelo de gestión en los despachos judiciales. Descripción de la evaluación: Se realizaron encuestas a 150 (87%) de los jueces afectados por el proyecto. Se empleó la metodología de escrutinios de eficiencia, integrada por el análisis del marco normativo del proyecto, el mapa de actores involucrados en el mismo, la cadena de valor del proyecto evaluado a nivel de detalle, el mapa de riesgos, y el cumplimiento de los productos frente a los objetivos del proyecto y sus metas. Principales resultados: Existe consistencia tanto en normas como en políticas en cuanto a la administración de justicia en temas de descongestión, oralidad y acceso. Debe mantenerse en curso el proyecto hacia los objetivos planteados en el diseño.

28 Convenio Acción Social – Batuta (2007) 2. Evaluación del proceso de formación musical y el impacto sobre el desempeño académico del proyecto pre-orquesta de BATUTA. Convenio Acción Social – Batuta (2007) Representatividad: 12,102 niños y jóvenes de 6 a 17 años estudiantes en la etapa preorquestal del programa BATUTA en niveles 1, 4 y 5. Tamaño de la muestra: 600 estudiantes en total; 400 de tratamiento y 200 de control. Levantamiento: julio a diciembre Único levantamiento. Variables de interés: Características sociodemográficas, características psicosociales y motrices, desempeño musical, rendimiento escolar, desplazamiento, otros programas del gobierno. Generalidades de la política: Su objetivo es ofrecer educación musical en la etapa inicial de formación preorquestal y en el programa básico de formación orquestal sinfónica a niños, niñas y jóvenes vulnerables con prioridad en población en situación de desplazamiento causado por la violencia. Ofrece tres etapas de formación musical: (i) Estimulación artística-Batubebés, (ii) Sensiblización musical- transición a la preorquesta y (iii) Programa de preorquesta El programa se centra en la etapa preorquestal, la cual está dividida por cinco niveles. Está financiado por Acción Social. Descripción de la evaluación: Evaluación de impactos y resultados del programa BATUTA. La muestra está compuesta por 600 estudiantes; 400 de tratamiento y 200 de control. El grupo de tratamiento está compuesto por estudiantes en cuarto y quinto nivel mientras que los de control son los de primer nivel. Realizan estimaciones por MCO, con y sin variables de control, por propensity score matching y por variables instrumentales. Principales resultados: El estrato predominante en el programa es el uno. Encuentran una relación positiva y estadísticamente significativa entre la participación en el programa y el rendimiento escolar, la resiliencia y el liderazgo. Además, hay un mejor desempeño de los participantes en habilidades metalingüísticas y espaciales. Los estudiantes nivel 4 y 5 dedican más tiempo al programa BATUTA, lo cual se interpreta como un factor de protección ante riesgos sociales.

29 Representatividad: Usuarios del SITM Barranquilla. 3. Valoración y cuantificación de los resultados alcanzados por la implementación del SITM Transmetro CONPES 3539 Representatividad: Usuarios del SITM Barranquilla. Tamaño de la muestra: 613 usuarios del SITM y 615 residentes de Barranquilla y Soledad para caracterización de no usuarios y predios. Levantamiento: diciembre 2011 a julio Único levantamiento Variables de interés: Características sociodemográficas, caracterización de predios, uso del SITM y métodos de transporte alternativos, satisfacción con el sistema, tiempos de desplazamiento, gasto en transporte. Generalidades de la política: El proyecto 84 buses articulados y 210 alimentadores, con 15 estaciones de parada sencilla, una intermedia y un portal. Los articulados se movilizarán a través de 13.4 km de corredores troncales. A precios de 2007 el proyecto se estimó en $667,762 millones, de los cuales 59.7% son inversión pública y 40.3% privada. Su principal objetivo es la disminución de costos de viaje. Si bien la implementación del SITM tiene efectos positivos y negativos para distintos grupos de la población, se espera que tenga efectos positivos para grupos con menores ingresos, además de valiosos efectos indirectos (externalidades). Descripción de la evaluación: Valoración y cuantificación de beneficios y análisis costo beneficio. Las metodologías usadas incluyen valor subjetivo del tiempo, valor de tiempo de viaje promedio, valor estadístico de la vida, precios hedónicos, costos evitados y propensity score matching. La muestra está compuesta por 613 usuarios del SITM y 615 residentes de Barranquilla y Soledad para caracterización de predios. Principales resultados: El sistema cuenta con una infraestructura acorde a los modelos genéricos de SITM. El usuario promedio tiene entre años, estrato 2, empleado y con ingresos de entre 2 y 3 SMMLV. El usuario promedio considera el SITM como su principal medio de transporte, y el 60% de los usuarios se encuentra satisfecho. El SITM ha disminuido los tiempos de viaje en 13 minutos por trayecto para los usuarios, y en 10 minutos para personas que se desplazan en vías mixtas en medios distintos al SITM. Ha reducido también los índices de accidentalidad y las emisiones contaminantes.

30 Contenido ¿Qué es Sinergia? Evaluación, Seguimiento e InnovaciónFases de las evaluaciones Tipos de evaluaciones Bases de datos de evaluaciones disponibles Protocolo de entrega de las bases de datos

31 Protocolo de entrega de la informaciónSolicitud de las bases de datos requeridas por parte de la universidad o estudiantes Correo dirigido a: Sasha Magyaroff Dirección de Seguimiento y Evaluación de Políticas Públicas. Correo electrónico: La universidad deberá informar qué investigaciones serán desarrolladas a partir de las bases de datos solicitadas, a través del formato que se dará junto con la información. Por ahora las bases de datos serán entregadas en CD. Para mayor información sobre las evaluaciones, se recomienda consultar las fichas y los informes en el portal de Sinergia: https://sinergia.dnp.gov.co/PortalDNP/default.aspx

32 Consulta de las fichas de evaluacionesPaso 3 Ingrese a EVALUACIONES: Finalizadas DNP Paso 1 Ingrese a: https://sinergia.dnp.gov.co/PortalDNP/default.aspx Paso 2 Ingrese a SINERGIA EVALUACIÓN Consulte las fichas de las evaluaciones de su interés Paso 4

33 Descripción de la investigación Evaluación (base de datos utilizada)Dirección de seguimiento y evaluación de las políticas públicas-DSEPP Uso bases de datos de las evaluaciones Nombres Apellidos Tipo de usurario (RTA: Estudiante pregrado; Estudiante maestría; Estudiante doctorado; Profesor). Uso (RTA: Trabajo de clase:nombre de la clase Memoría de grado; Tesis maestría/Doctorado; Investigación) Descripción de la investigación Evaluación (base de datos utilizada) Correo

34 www.dnp.gov.co Datos de Contacto Tel. (+57 1) 3815000 -3600Calle Piso 36 Bogotá - Colombia