1 Chaime Marcuello Servós. Metodología: investigación, análisis y evaluación de las políticas públicas. MSPPS-Universidad de Zaragoza Metodología: investigación, análisis y evaluación de las políticas públicas Chaime Marcuello Servós UNIVERSIDAD de ZARAGOZA

2 Chaime Marcuello Servós. Metodología: investigación, análisis y evaluación de las políticas públicas. MSPPS-Universidad de Zaragoza 1.Una contextualizaci ó n de las pol í ticas y estrategias de evaluaci ó n de pol í ticas p ú blicas y sociales

3 Chaime Marcuello Servós. Metodología: investigación, análisis y evaluación de las políticas públicas. MSPPS-Universidad de Zaragoza ¿Qué entendemos por “políticas públicas”?  Diversidad y heterogeneidad de posiciones  Polisemia y borrosidad  “Ciertos consensos” y amplia literatura PÚBLICASPOLÍTICAS Public Policy Politics ≠ Polity

4 Chaime Marcuello Servós. Metodología: investigación, análisis y evaluación de las políticas públicas. MSPPS-Universidad de Zaragoza ¿Qué se entiende por “políticas públicas”? Public Policy Politics ≠ Polity Oxford Dictionary

5 Chaime Marcuello Servós. Metodología: investigación, análisis y evaluación de las políticas públicas. MSPPS-Universidad de Zaragoza Acción de un “gobierno” o poder público en la sociedad en la que se inserta “Public policy is an attempt by the government to address a public issue. The government, whether it is city, state, or federal, develops public policy in terms of laws, regulations, decisions, and actions. There are three parts to public policy-making: problems, players, and the policy”. http://www.wisegeek.com/what-is-public-policy.htm ¿Qué se entiende por “políticas públicas”?

6 Chaime Marcuello Servós. Metodología: investigación, análisis y evaluación de las políticas públicas. MSPPS-Universidad de Zaragoza Acción de un “gobierno” o poder público en la sociedad en la que se inserta « il existe deux manières de faire les politiques publiques dans les sociétés occidentales. D’une part, la manière classique où les autorités publiques agissent, selon une "finalité choisie", à partir d’objectifs et des moyens définis a priori qui s’adressent à des "cibles” réceptives (modèle synoptique). D’autre part, la manière renouvelée où les autorités publiques ne possèdent plus le monopole de fabrication des politiques publiques mais doivent, au contraire, "faire avec" une multiplicité d’acteurs qui projettent leurs "finalités vécues" dans le processus de fabrication des politiques publiques (le modèle des ajustements mutuels ou action publique)» MASSARDIER G., (2003) Politiques et action publiques », Ed. Dalloz, Paris. ¿Qué se entiende por “políticas públicas”?

7 Chaime Marcuello Servós. Metodología: investigación, análisis y evaluación de las políticas públicas. MSPPS-Universidad de Zaragoza ¿qué “políticas públicas”? ¿cuándo? ¿cómo? ¿quién(es)? ¿para qué? ¿qué asuntos públicos? Harold Lasswell (1935): Politics: Who Gets What, When, How 1902-1978

8 Chaime Marcuello Servós. Metodología: investigación, análisis y evaluación de las políticas públicas. MSPPS-Universidad de Zaragoza EstadoMercado Sociedad Civil formal informal Elaboración propia a partir de Abrahamson1995 privado público lucrativo no lucrativo ESPACIO PÚBLICO

9 Chaime Marcuello Servós. Metodología: investigación, análisis y evaluación de las políticas públicas. MSPPS-Universidad de Zaragoza lo público, la cosa pública no puede ser monopolio del Estado, ni patrimonio de nadie. Es una responsabilidad de todos, individual e intransferible, una responsabilidad común que si se nos expropia nos expulsa como ciudadanos en un sentido efectivo

10 Chaime Marcuello Servós. Metodología: investigación, análisis y evaluación de las políticas públicas. MSPPS-Universidad de Zaragoza ¿qué queremos hacer? con lo público y de de lo público ¿cómo entendemos la noción de “lo público”? ¿cómo se percibe habitualmente? ¿qué queremos hacer? con lo público y de de lo público ¿cómo entendemos la noción de “lo público”? ¿cómo se percibe habitualmente? ¡Es una construcción social! Sabiduría Convencional Universos Simbólicos

11 Chaime Marcuello Servós. Metodología: investigación, análisis y evaluación de las políticas públicas. MSPPS-Universidad de Zaragoza DISTINCIÓN: LO PRIVADO LO PÚBLICO De la puerta de casa para dentroLa plaza, el ágora… ¿y lo común y compartido?

12 Chaime Marcuello Servós. Metodología: investigación, análisis y evaluación de las políticas públicas. MSPPS-Universidad de Zaragoza público, ca. (Del lat. publĭcus). 1. adj. Notorio, patente, manifiesto, visto o sabido por todos. 2. adj. Vulgar, común y notado de todos. Ladrón público 3. adj. Se dice de la potestad, jurisdicción y autoridad para hacer algo, como contrapuesto a privado. 4. adj. Perteneciente o relativo a todo el pueblo. 5. m. Común del pueblo o ciudad. 6. m. Conjunto de las personas que participan de unas mismas aficiones o con preferencia concurren a determinado lugar. Cada escritor, cada teatro tiene su público 7. m. Conjunto de las personas reunidas en determinado lugar para asistir a un espectáculo o con otro fin semejante. 8. f. En algunas universidades, acto público, compuesto de una lección de hora y defensa de una conclusión, que se tenía antes del ejercicio secreto para recibir el grado mayor. Diccionario RAE

13 Chaime Marcuello Servós. Metodología: investigación, análisis y evaluación de las políticas públicas. MSPPS-Universidad de Zaragoza Public Adjective 1 of or concerning the people as a whole : public concern | public affairs. open to or shared by all the people of an area or country : a public library. of or provided by the government rather than an independent, commercial company : public spending. of or involved in the affairs of the community, esp. in government : his public career was destroyed by tenacious reporters. known to many people; famous : a public figure. 2 done, perceived, or existing in open view : he wanted a public apology in the Wall Street Journal | we should talk somewhere less public. 3 Brit. of, for, or acting for a university : public examination results. noun ( the public) [treated as sing. or pl. ]ordinary people in general; the community : the library is open to the public | the public has made an informed choice. [with adj. ] a section of the community having a particular interest or connection : the reading public. ( one's public) the people who watch or are interested in an artist, writer, or performer : some famous last words to give my public..ORIGIN late Middle English : from Old French, from Latin publicus, blend of poplicus ‘of the people ’ (from populus ‘people’ ) and pubes ‘adult.’ Webster

14 Chaime Marcuello Servós. Metodología: investigación, análisis y evaluación de las políticas públicas. MSPPS-Universidad de Zaragoza Sector privadoSector público ≠ bien público no hay rivalidad —mi consumo no disminuye el tuyo—, no se puede excluir a los otros de su disfrute —alumbrado— Más allá de la cuestión del lucro Samuelson

15 Chaime Marcuello Servós. Metodología: investigación, análisis y evaluación de las políticas públicas. MSPPS-Universidad de Zaragoza donde la “construcción del espacio público” se convierte en controversia, social, política y legal. Agora >>> POLIS >>> conflicto y apuesta re-construir el espacio público… yendo más allá de las visiones reduccionistas que lo equiparan sólo con el Estado. un espacio monocromático >>> policromía, pluralidad de la idea de “cortijo” (y sus caciques)

16 Chaime Marcuello Servós. Metodología: investigación, análisis y evaluación de las políticas públicas. MSPPS-Universidad de Zaragoza No se trata de renegar del Estado o anatematizar sus funciones para hacerlo desaparecer. Más bien todo lo contrario. Se trata de reclamar mejor Estado, mejor gestión de la administración estatal, más transparencia y más claridad. Y más responsabilidad individual… Junto con una defensa radical de la “función pública” Contraejemplo: contar caso de clase con alumnos de Guatemala, Honduras… 2007-2009

17 Chaime Marcuello Servós. Metodología: investigación, análisis y evaluación de las políticas públicas. MSPPS-Universidad de Zaragoza la cosa pública no puede ser monopolio del Estado y menos de su tramoya burocrática o de la clase política profesional. Si se identifica “lo público” con el Estado se nos expropia nuestra responsabilidad con las cosas comunes. Se nos deja fuera de la cosa pública, de la res pública.

18 Chaime Marcuello Servós. Metodología: investigación, análisis y evaluación de las políticas públicas. MSPPS-Universidad de Zaragoza Si nos quedamos fuera… se provocan “perversiones” como las que pasan delante de nuestros ojos en los últimos años… corrupción desafección política pérdida de sentido de la polis deslegitimación de este sistema democrático indignación

19 Chaime Marcuello Servós. Metodología: investigación, análisis y evaluación de las políticas públicas. MSPPS-Universidad de Zaragoza lo público, la cosa pública no puede ser monopolio del Estado, ni patrimonio de nadie. Es una responsabilidad de todos, individual e intransferible, una responsabilidad común que si se nos expropia nos expulsa como ciudadanos en un sentido efectivo

20 Chaime Marcuello Servós. Metodología: investigación, análisis y evaluación de las políticas públicas. MSPPS-Universidad de Zaragoza Como sujetos estamos “obligados” a ser responsables de las cosas comunes No podemos permitir que se nos deje fuera ni de forma paternalista, ni de forma totalitaria, ni con demagogias “narcodemocráticoides”.

21 Chaime Marcuello Servós. Metodología: investigación, análisis y evaluación de las políticas públicas. MSPPS-Universidad de Zaragoza Pero esta obligación no puede ser impuesta de manera heterónoma y reactiva. La seducción activa del bien común y de la libertad individual son fuentes fundamentales de ese compromiso que se impone de suyo al abrir los ojos y sentir el mundo ¿obligación?

22 Chaime Marcuello Servós. Metodología: investigación, análisis y evaluación de las políticas públicas. MSPPS-Universidad de Zaragoza ¿Lo público? GENEALOGÍA raíces procesos expectativas público ESTADO Administraciones Públicas ?

23 Chaime Marcuello Servós. Metodología: investigación, análisis y evaluación de las políticas públicas. MSPPS-Universidad de Zaragoza ¿Lo público? GENEALOGÍA raíces procesos expectativas público ESTADO Administraciones Públicas Sociedad autoritaria “despotismo neo-ilustrado” infantilizantes …en ESPAÑA…

24 Chaime Marcuello Servós. Metodología: investigación, análisis y evaluación de las políticas públicas. MSPPS-Universidad de Zaragoza ¿qué “políticas públicas”? Tomado de Subirats et.al. (2008)

25 Chaime Marcuello Servós. Metodología: investigación, análisis y evaluación de las políticas públicas. MSPPS-Universidad de Zaragoza ¿qué “políticas públicas”? Modificado a partir de Subirats et.al. (2008) interésidentificación formulación ejecución evaluación Ciclo de Proyectos diagnóstico

26 Chaime Marcuello Servós. Metodología: investigación, análisis y evaluación de las políticas públicas. MSPPS-Universidad de Zaragoza DEBATE(s) ¿Cuánto “Estado”?¿Cuánto “Mercado”? ESTADO vs. MERCADO ¿QUIÉN GESTIONA MEJOR? ¿Más “Estado”?¿Más “Mercado”? ¿una cuestión sólo ideológica? gobierna ¿cuánta Administración Pública necesitamos? ¿cuántas personas? ¿qué servicios? EVALUACIÓN DE POLÍTICAS PÚBLICAS

27 Chaime Marcuello Servós. Metodología: investigación, análisis y evaluación de las políticas públicas. MSPPS-Universidad de Zaragoza 1997-2007 Best Value (BV) Public-Private-Partnership (PPP)Private Finance Initiative (PFI) ¿Cómo, por qué y quién presta el servicio? ¿Se está realizando bien junto a las autoridades? ¿Cómo se sienten los usuarios del servicio? ¿Se consigue lo mejor? Cuestionar Comparar Consultar Competir Cuestionar Comparar Consultar Competir PREGUNTAS: Local Government Act 1999

28 Chaime Marcuello Servós. Metodología: investigación, análisis y evaluación de las políticas públicas. MSPPS-Universidad de Zaragoza ¿cuánta Administración Pública necesitamos? ¿cuántas personas? ¿qué servicios? ¡con tal de que no me joda es suficiente! Facundo Cabral

29 Chaime Marcuello Servós. Metodología: investigación, análisis y evaluación de las políticas públicas. MSPPS-Universidad de Zaragoza ¿se puede resolver el debate? SÍ… pero NO — doxa vs. logos — la EVALUACIÓN como aportación —¿solución?— (descripción, análisis, medida, valoración…) Bloqueos ideológicos

30 Chaime Marcuello Servós. Metodología: investigación, análisis y evaluación de las políticas públicas. MSPPS-Universidad de Zaragoza ¿cuánta Administración Pública necesitamos? ¿cuántas personas? ¿qué servicios? FUNCIONAN SIRVEN ¿crisis de legitimación? ¿crisis de financiación? GASTO >< INVERSIÓN

31 Chaime Marcuello Servós. Metodología: investigación, análisis y evaluación de las políticas públicas. MSPPS-Universidad de Zaragoza EVALÚESE efectos resultados impacto Saber, conocer, decidir, controlar… “medicina defensiva”

32 Chaime Marcuello Servós. Metodología: investigación, análisis y evaluación de las políticas públicas. MSPPS-Universidad de Zaragoza actuación problema diagnóstico decisión efectos resultados impacto CAMBIO ANTES DESPUÉS ANTES política programa

33 Chaime Marcuello Servós. Metodología: investigación, análisis y evaluación de las políticas públicas. MSPPS-Universidad de Zaragoza actuación problema diagnóstico decisión efectos resultados impacto CAMBIO ANTES DESPUÉS ANTES Política Intereses particulares Ideologías Creencias Valores Interés general Convicciones Técnica Ciencia Poderes fácticos Grupos de presión Neutralidad objetividad Eficiencia política programa

34 Chaime Marcuello Servós. Metodología: investigación, análisis y evaluación de las políticas públicas. MSPPS-Universidad de Zaragoza actuación problema diagnóstico decisión efectos resultados impacto CAMBIO ANTES DESPUÉS ANTES política programa

35 Chaime Marcuello Servós. Metodología: investigación, análisis y evaluación de las políticas públicas. MSPPS-Universidad de Zaragoza TRANSPARENCIA propiedad de los materiales que permiten ver a través de ellos y POR ANALOGÍA se aplica a aquello que resulta claro y evidente. en las FORMAS DE GESTIÓN de las organizaciones e instituciones de todos los sectores. por oposición a la CORRUPCIÓN y falta de claridad en la gestión de muchas entidades que han dado lugar a escándalos de todo tipo en los últimos años. (sector lucrativo, Emron, Parmalat y fraudes como Madoff) (administraciones públicas o de las entidades no lucrativas)

36 Chaime Marcuello Servós. Metodología: investigación, análisis y evaluación de las políticas públicas. MSPPS-Universidad de Zaragoza TRANSPARENCIA es una manera de proceder que, a su vez, en el ámbito de las organizaciones está ligada a la rendición de cuentas y al ejercicio de la responsabilidad social corporativa. …se ha convertido en una referencia dentro de los postulados de redes sociales tanto locales como globales. …redunda en pro de la confianza y de la credibilidad de las entidades y de sus gestores. Transparencia Internacional [http://www.transparency.org/].

37 Chaime Marcuello Servós. Metodología: investigación, análisis y evaluación de las políticas públicas. MSPPS-Universidad de Zaragoza Contraejemplo: Estudio sobre las lenguas de Aragón, F. Llera Solicitado el 16 de enero de 2000 Direcci ó n General de Patrimonio Cultural

38 Chaime Marcuello Servós. Metodología: investigación, análisis y evaluación de las políticas públicas. MSPPS-Universidad de Zaragoza http://www.leydetransparencia.gob.es/

39 Chaime Marcuello Servós. Metodología: investigación, análisis y evaluación de las políticas públicas. MSPPS-Universidad de Zaragoza ACCOUNTABILITY . Este anglicismo se usa cada vez m á s como sin ó nimo de responsabilidad en la rendici ó n de cuentas de las organizaciones. . Se utiliza especialmente en el contexto de las auditor í as y de la contabilidad medioambiental y social, yendo m á s all á de lo meramente financiero o contable. . Su uso se ha incrementado de manera paralela a la extensi ó n de las ideas de responsabilidad social corporativa y de sostenibilidad. . Algunas entidades han tomado el t é rmino como se ñ a de identidad corporativa en un sentido de transparencia y de eficiencia en la gesti ó n.

40 Chaime Marcuello Servós. Metodología: investigación, análisis y evaluación de las políticas públicas. MSPPS-Universidad de Zaragoza RENDICI Ó N DE CUENTAS  … rendir cuentas es el resultado de un proceso donde una persona o entidad despu é s de desarrollar una determinada actividad transmiten la informaci ó n precisa y necesaria para dar raz ó n de lo que han ejecutado.  … obligaciones de informaci ó n ligadas a los modelos y protocolos de gesti ó n de entidades, tanto lucrativas como sin á nimo de lucro.  … En unos casos est á n regulados por ley, como en el caso de las entidades financieras u otras empresas, en otros forman parte del buen hacer en la gesti ó n de asociaciones donde la junta directiva expone en la asamblea anual, o en aquellos momentos donde su masa social lo solicite, la informaci ó n precisa sobre el asunto en cuesti ó n.

41 Chaime Marcuello Servós. Metodología: investigación, análisis y evaluación de las políticas públicas. MSPPS-Universidad de Zaragoza RENDICI Ó N DE CUENTAS  … En un sentido restrictivo la rendici ó n de cuentas se limita a lo que viene marcado por la ley.  … En sentido amplio supone dar informaci ó n de todo aquello que afecta a la buena marcha de la entidad, no s ó lo a sus integrantes sino tambi é n al resto de part í cipes e incluso a la sociedad en su conjunto.  … En este sentido se liga a la idea de transparencia en la gesti ó n y al concepto anglosaj ó n de accountability.

42 Chaime Marcuello Servós. Metodología: investigación, análisis y evaluación de las políticas públicas. MSPPS-Universidad de Zaragoza RENDICI Ó N DE CUENTAS  … forma parte de una estrategia de gesti ó n de las organizaciones que son cada vez m á s conscientes del impacto que tiene su prestigio en la construcci ó n de su imagen corporativa y en la credibilidad que consiguen mediante este tipo de procesos.  … es una consecuencia de la madurez de la ciudadan í a que tambi é n es consciente de la importancia que tiene la informaci ó n de calidad para apoyar las buenas pr á cticas o denostar las contrarias.

43 Chaime Marcuello Servós. Metodología: investigación, análisis y evaluación de las políticas públicas. MSPPS-Universidad de Zaragoza RENDICI Ó N DE CUENTAS  … coadyuva a la consolidaci ó n de pr á cticas institucionales y al impulso a una gobernanza de calidad en las instituciones tanto dependientes de las administraciones p ú blicas como del sector privado, sea lucrativo o no.  … obliga a una mejor gesti ó n de las organizaciones y consigue mayores cotas de credibilidad y de confianza, sea para conseguir una posici ó n en los mercados o en los distintos á mbitos de la sociedad.  … va m á s all á de la mera informaci ó n gerencial de car á cter econ ó mico incluyendo todos los aspectos necesarios para entender la vida de la entidad, por ejemplo, utilizando los est á ndares del Global Reporting Innitiative y sus modelos de memorias de sostenibilidad. Cassidy, Richard L. (2006): Accountability...A Noun or a Verb? BookSourge. Finkelstein, N. (2000) Transparency in Public Policy: Great Britain and the United States. Nueva York: Macmillan.

44 Chaime Marcuello Servós. Metodología: investigación, análisis y evaluación de las políticas públicas. MSPPS-Universidad de Zaragoza IMPACTO SOCIAL … SOCIAL IMPACT ASSESSMENT

45 Chaime Marcuello Servós. Metodología: investigación, análisis y evaluación de las políticas públicas. MSPPS-Universidad de Zaragoza IMPACTO SOCIAL … SOCIAL IMPACT ASSESSMENT Becker,H.A. & Vanclay, F. (2003) The International handbook of social impact assessment: conceptual and methodological advances. Edward Elgar Publishing

46 Chaime Marcuello Servós. Metodología: investigación, análisis y evaluación de las políticas públicas. MSPPS-Universidad de Zaragoza

47 ¿se puede hacer mejor lo que estamos haciendo? ¿cómo hacer mejor lo que estamos haciendo? ¿qué estamos haciendo? ¿para qué se evalúa?

48 Chaime Marcuello Servós. Metodología: investigación, análisis y evaluación de las políticas públicas. MSPPS-Universidad de Zaragoza Relaciones de causalidad Cambio (social) causaefecto Fenómenos complejos Fenómenos complicados OBSERVACIÓN COMPROMISO y DISTANCIA

49 Chaime Marcuello Servós. Metodología: investigación, análisis y evaluación de las políticas públicas. MSPPS-Universidad de Zaragoza actuación problema diagnóstico decisión efectos resultados impacto CAMBIO ANTES DESPUÉS ANTES política programa OBSERVACIÓN

50 Chaime Marcuello Servós. Metodología: investigación, análisis y evaluación de las políticas públicas. MSPPS-Universidad de Zaragoza Observación de Primer Orden Observación de Segundo Orden Cibernética Socio- Cibernética feed-back feed-forward

51 Chaime Marcuello Servós. Metodología: investigación, análisis y evaluación de las políticas públicas. MSPPS-Universidad de Zaragoza

52

53

54 ESTABLECER CRITERIOS CONSTRUIR PATRONES MEDIR & COMPARAR DESCRIBIR SINTETIZAR Y JUZGAR

55 Chaime Marcuello Servós. Metodología: investigación, análisis y evaluación de las políticas públicas. MSPPS-Universidad de Zaragoza http://www.realworldevaluation.org/RealWorld_Evaluation_resour.html

56 Chaime Marcuello Servós. Metodología: investigación, análisis y evaluación de las políticas públicas. MSPPS-Universidad de Zaragoza

57

58 DiseñoInsumos Proceso de ejecución ProductosResultados Impactos Sosteni- bilidad Contexto Económico en el cual opera el proyecto Contexto Político en el cual opera el proyecto Contexto institucional y operativo Características socio-económicas y culturales de la población afectada Una forma de Modelo Teórico (lógico) de un Programa

59 Chaime Marcuello Servós. Metodología: investigación, análisis y evaluación de las políticas públicas. MSPPS-Universidad de Zaragoza INTEGRACIÓN de TÉCNICAS OBJETO MÉTODO ¿Qué preguntamos? Lo cualitativoLo cuantitativo ¿Qué se evalúa? pertinencia ¿para qué se evalúa?

60 Chaime Marcuello Servós. Metodología: investigación, análisis y evaluación de las políticas públicas. MSPPS-Universidad de Zaragoza ¿se puede hacer mejor lo que estamos haciendo? ¿cómo hacer mejor lo que estamos haciendo? ¿qué estamos haciendo? ¿para qué se evalúa?