1 Robert Woodbridge Presidente, Consulting Base Limited
2 Eficacia Impacto 1.Necesidad de establecer y monitorear los indicadores del impacto. 2.Dificultades de atribución. Probablemente haya habido cierta contribución. Resultados Ya se midieron algunos resultados buenos y en los casos en que es prematuro tener seguridad la “dirección de viaje” parece bien encaminada. Necesidad de indicadores de resultados e hitos verificables y definidos con más precisión. PRODUCTOS 1.Informes de AT y presentaciones de talleres de calidad generalmente elevada. 2.Asesoramiento implementable y relevante. GLOBALMENTE, BUENAS CALIFICACIONES DE EVALUACIÓN A NIVEL DEL CAPTAC-RD, ESPECIALMENTE EN CUANTO A RELEVANCIA Y PRODUCTOS.….. 2 Relevancia 1.Existe gran coherencia con la estrategia y los documentos programáticos. 2.Existe una coherencia generalmente grande con las prioridades y las estrategias de organizaciones regionales. 3.El proceso de selección de la AT es conducente a una fuerte identificación de los países. 4.El secuenciamiento de la AT es generalmente bueno. 5.Buena coordinación con los donantes, aunque algunos creen necesario mejorarla. 6.Ofrece en general muchas de las ventajas del modelo de los CRAT.
3 Sostenibilidad 1.Los estudios de caso y los exámenes documentales sugieren que los proyectos de AT a largo plazo especialmente están generando sostenibilidad. 2.Necesidad de brindar más capacitación directa a los beneficiarios con más limitaciones de capacidad. 3.Requiere atención el fortalecimiento de la gestión de RR.HH. 4.Es necesario un seguimiento más sistemático de los talleres. 5.Se necesitan procedimientos de traspaso más eficaces para los AR. 6.Se necesita una estrategia explícita para la sostenibilidad financiera a nivel del CAPTAC-RD. ……NECESIDAD DE PRECISAR LAS PRÁCTICAS PARA OBTENER RESULTADOS MÁS EFICIENTES Y SOSTENIBLES 3 Eficiencia 1.La dependencia exclusiva de misiones a corto plazo es un obstáculo a la eficiencia. 2.Necesidad de calcular costos a nivel de proyecto para evaluar la eficacia de los resultados según el costo. Dificultad para evaluar la eficacia según el costo en base a la información disponible. 3.El respaldo desde la sede parece funcionar bien, pero es necesario mejorar la presupuestación y el registro. 4.Es necesario afianzar el monitoreo y la presentación de informes. Necesidad de formalizarlos e integrarlos más estrechamente a la GBR. 5.La implementación de la GBR a nivel del FMI debe profundizarse, para que sea más una herramienta de gestión que de información.
4 Enfoque de evaluación Evaluación detallada de nueve proyectos de AT (que ofrezcan buena cobertura de temas por sector y país), incluidos cuatro estudios de caso amplios que impliquen misiones a tres países y utilicen el enfoque de la cadena de resultados. Estudios documentales de ocho talleres. Entrevistas con el personal de la sede del FMI. Examen de informes al CD y otros informes. Visita al CAPTAC-RD de Guatemala: Entrevistas con AR y Coordinadores del Centro. Encuestas en línea de beneficiarios de determinados proyectos de AT; participantes en talleres seleccionados; y miembros del CD. NUESTRO ENFOQUE PROPORCIONÓ UNA EVALUACIÓN PROFUNDA DE LA ESTRATEGIA, LAS OPERACIONES Y LAS ACTIVIDADES DE AT DEL CAPTAC-RD 4 Objetivos de evaluación Evaluar en qué medida: El CAPTAC-RD está logrando sus objetivos, de manera eficiente y eficaz. La AT y la capacitación que brinda el Centro son sostenibles..
5 NUESTRAS RECOMENDACIONES GIRAN EN TORNO A PREGUNTAS DE EVALUACIÓN CRÍTICAS 5 Implementación de nuestras recomendaciones Hemos propuesto 68 recomendaciones en el proyecto de informe (a las que se incorporarán precisiones). Resumimos aquí algunas de las más importantes, no necesariamente las más fáciles de implementar. Debe considerarse la posibilidad de implementarlas todas, con calendarios de implementación. Considerar la posibilidad de establecer un subcomité de implementación para monitorear y guiar la implementación. RELEVANCIA Congruencia con los documentos programáticos y las prioridades de los gobiernos. Congruencia con las aptitudes y las prioridades fundamentales de la sede del FMI. Coordinación con los socios para el desarrollo. EFICACIA Logro de Impacto. Resultados: A corto, mediano y largo plazo. Productos de calidad, puntuales e implementables. EFICIENCIA Eficiencia del proceso y la implementación. Uso (humano y financiero) de recursos humanos. Monitoreo y presentación de informes. Eficacia en función de los costos. SOSTENIBILIDAD Resultados duraderos. Establecimiento de memoria institucional. Modelo de financiación. Fortalecimiento de la capacidad regional. CRITERIOS DEL CAD DE LA OCDE
6 AFIANZAMIENTO DE LA RELEVANCIA Coordinación entre donantes y proveedores de AT 1.Es poco probable que las intervenciones del CAPTAC-RD produzcan resultados importantes por sí solas. Es necesario evaluar con claridad las dependencias relevantes y los riesgos asociados y documentarlos, así como analizar su impacto potencial en el logro de los resultados e incorporarlo a la planificación del proyecto usando herramientas como las cadenas de resultados. 2.Respaldar a AR y CC con recursos humanos adicionales para que puedan dedicar más tiempo a la coordinación con los donantes y el contacto sistemático con otros donantes. 3.Establecer alianzas estratégicas con otros proveedores de AT y potenciar así los recursos del CAPTAC-RD. 4.Evaluar la viabilidad de que las autoridades nacionales utilicen sistemas de gestión de la ayuda creados por Development Gateway. Estrategia Elaborar estrategias fiscales y macroeconómicas a nivel de los países a las que pueda contribuir el CAPTAC- RD/FMI. 6
7 AFIANZAMIENTO DE LA EFICACIA Elaboración de la estrategia para la fase siguiente El CAPTAC-RD ya ha elaborado su documento programático para la fase II. 1.Si bien es importante que la estrategia del CAPTAC-RD esté estrechamente integrada con las estrategias regionales y nacionales de WHD, también debe ser independiente, y su implementación debe poder monitorearse e informarse de manera autónoma. 2.Debe haber una estrategia coherente a mediano plazo (5 años) que esté basada en las estrategias nacionales (en la medida en que lo acuerden las autoridades) y en las alianzas estratégicas de AT planificadas y que pueda integrarse al proceso presupuestario para facilitar el monitoreo de los resultados financieros y de la AT. Dentro de este marco, se deben diseñar y planificar proyectos con hitos adecuados sobre una base plurianual. 3.Parte de los recursos (p. ej., alrededor de 15-25%) del presupuesto de un sector podría reservarse para intervenciones ad hoc. 4.Potenciar más los grupos de homólogos en la región, como por ejemplo STA en Costa Rica y El Salvador. 5.Mantener la concentración en ámbitos difíciles como tributación y aduanas, y monitorear más de cerca y enfrentar/mitigar los riesgos. 7
8 AFIANZAMIENTO DE LA EFICIENCIA 1.Examinar a fondo la estructura directiva de los CRAT: líneas jerárquicas, responsabilidades, personal auxiliar. ¿Cómo se deslindan las responsabilidades? 2.Enfoque aplicado a las misiones: misiones más largas de ser necesario aprovechando los servicios de expertos a corto plazo. 3.Mejorar la declaración de información financiera: reforzar la presupuestación; mejorar la declaración de desviaciones; presupuestar y monitorear a nivel de proyecto; mejorar la transparencia de la asignación de costos; elaborar informes financieros con criterio empresarial. 4.El Comité de Dirección debe elaborar procesos para su función de evaluación de estrategias y monitoreo de resultados. 5.Ampliar el mandato del subcomité de evaluación para monitorear la implementación de las recomendaciones de esta evaluación; considerar el uso de subcomités para otros fines ocasionales en el futuro. 6.Reforzar el marco de monitoreo y evaluación: dar a la GBR un uso práctico para la gestión y el monitoreo, en lugar de una simple herramienta informativa. Definir con más precisión los indicadores de resultados e invitar a los beneficiarios de la AT a participar en su fijación. Marcos lógicos a nivel de proyecto; establecer hitos claros con los beneficiarios de la AT. Considerar la posibilidad de contratar un especialista en marcos lógicos para el CAPTAC-RD o los diversos CRAT para servir de mentor en la implementación de la GBR cotidiana. 8
9 Impactos: crecimiento económico acelerado, reducción de la pobreza Resultados de alto nivel: los ingresos crecen más rápido que las importaciones, se monitorean debidamente los flujos de mercancías y se facilita el comercio mediante mejores servicios aduaneros Diagnóstico: Necesidad de misiones de evaluación del ejercicio 2010, misiones de FAD, metodologías de autoevaluación Estrategia / plan de acción Matriz de acción de CCS de 53 puntos. Plan de trabajo para administración impositiva y aduanera regional Legislación / regulaciones Revisar legislación aplicable (nacional y regional) Manual aduanero revisado Inspecciones basadas en el riesgo (incl. piloto en Santa María) Procedimientos operacionales (protocolos y fortalecimiento de la capacidad) Monitoreo del desempeño (incl. índice de desempeño clave) y varios Resultados Otros proveedores de AT / mecanismos para el sector financiero: 1.Banco Interamericano de Desarrollo 2.Organización Mundial de Aduanas 3.Unión Europea 4.Convenio Multilateral Sobre Cooperación y Asistencia Mutua entre las Direcciones Nacionales de Aduanas de América Latina, España y Portugal (COMALEP) 5.Secretaría de Integración Económica Centroamericana (SIECA) Cadena de resultados ilustrativa para la administración aduanera en Costa Rica Objetivos Otros ámbitos de reforma y para resultados/impactos de alto nivel 1.Estabilidad política 2.Ausencia de shocks 3.Sólida capacidad de CCS 4.Economía diversificada 5.Sistema jurídico eficaz 6.Suficientes recursos disponibles en CCS 7.Compromiso político 8.Integración regional ALCANCE DE LA AT DEL CAPTAC SOBRE ADMINISTRACIÓN ADUANERA Iniciativas de reforma de autoridades nacionales 1.Descentralización de sistemas informáticos del gobierno 2.Negociaciones sobre la agenda de integración regional 3.Política de control del comercio ilegal (incluidos los narcóticos) Corto plazo: Indicadores adoptados, plan de acción basado en el riesgo (+piloto) en marcha, manual revisado aprobado. Mediano plazo:aumento de i) cumplimiento voluntario, ii) valor de declaraciones, iii) detección de anomalías y iv) desempeño global. Servicio más eficiente. Informática conforme a procedimiento. Sistemas de información, adaptación de sistema TICA ALCANCE DEL ESTUDIO DE CASO (CAPTAC-RD)
10 VARIEDAD DE PRODUCTOS DE AT E HITOS/RESULTADOS ALCANZADOS 10 PRODUCTOS 1.Estrategias de auditoría ex-post informadas basadas en la gestión del riesgo 2.Control reforzado del flujo de carga aérea y oceánica en la fase anterior a la aduana de destino. 3.Indicadores de desempeño para monitorear el desempeño de los controles aduaneros primarios y ex- post. 4.Identificación de oportunidades de mejora (en base a la conclusión del proceso de autoevaluación). 5.Plan de acción para mejoras a corto, mediano y largo plazo de la gestión del riesgo y los sisemas de control y auditoría en todas las etapas del proceso aduanero. 6.Mecanismos para eliminar pagos dobles de derechos aduaneros. 7.Plan de mejoras a corto, mediano y largo plazo para auditorías y gestión de riesgos. Resultados Corto plazo (hasta 1 año) Mediano plazo (2-3 años) Largo plazo (4-10 años) Aprobación y adopción de indicadores aduaneros en CCS. Mejor desempeño de CCS medido con el índice de desempeño de selectividad. El ingreso aduanero y por impuestos especiales crece más rápido que la importación. Adopción de plan de mejoras para gestión de riesgos, control y auditorías. Mayor cumplimiento voluntario (valores declarados más altos). El ingreso aduanero supera 7% del PIB. Mejor desempeño en proyecto piloto de Santa María. Tasas más altas de detección de anomalías (en número y volumen). Se facilitan las transacciones comerciales. Aprobación del Manual de Procedimientos Aduaneros revisado en la gerencia. Manual plenamente implementado. Servicio considerado eficiente y de fácil uso. Disminuye la actividad ilegal (p. ej., subdeclaración y contrabando). Plan preliminar para adaptar las especificaciones del sistema informático al Manual de Procedimientos Aduaneros. El sistema TICA es más útil adaptado. PRODUCTOS (cont.) 8.Metodología para la gestión global del proceso de control en un piloto en el punto aduanero de Santa Maria (parámetros de calidad de selectividad, menor número de inspecciones y mejora de la calidad técnica de las inspecciones). 9.Propuestas preliminares para adaptar normas y especificaciones funcionales para el sistema informático de aduanas en conformidad con el Manual de Procedimientos Aduaneros (versión preliminar). 10.Manual de Procedimientos Aduaneros (revisado).
11 AFIANZAMIENTO DE LA SOSTENIBILIDAD 1.Se necesita análisis y evaluación de la capacidad de absorción de un beneficiario potencial de AT en la etapa de diseño del proyecto y se deciden los recursos en base a esa evaluación. 2.Es necesario considerar la posibilidad de brindar respaldo en gestión de recursos (humanos y sistemas) al beneficiario de la AT, ya sea como parte del diseño de la AT del CAPTAC-RD o mediante una alianza con un proveedor de AT 3.Asistir en el desarrollo de capacidad propia sostenible mediante todas las vías posibles; p. ej., formación de formadores, vínculos con organismos regionales de capacitación, respaldo entre homólogos, afianzamiento de la capacidad de prestación de AT de organizaciones regionales; p. ej., CIAT, CCSBSO, CMCA. 4.Posiblemente sea necesario pensar en implicaciones para los recursos y cambios del modus operandi para implementar actividades centradas en la sostenibilidad. 5.Se necesita una estrategia para el financiamiento de programas, entre otras cosas para hacer frente a déficits. 11