1 Evaluación de la Calidad en Educación Superior José Gutiérrez Dpto. Métodos de Investigación y Diagnóstico en Educación

2 CONTEXTO DE REFERENCIA: Formación Universitaria En todos sus ámbitos, niveles, agentes y estructuras Ambitos: Titulaciones y Programas Formativos Niveles: Diplomaturas y Licenciaturas, Doctorados, Master, Títulos Propios Agentes: Profesores, Estudiantes, Gestores, PAS Estructuras y Recursos: Facultades/Centros, Servicios y Unidades de Administración y Gestión

3 UNIVERSIDADES ProfesoresAlumnos EEES PRO CESO DE ADAP TACIÓN AL EEES Servicios Unidades/ Administrativas Personal de Administración y Servicios El Sistema Universitario y su Contexto Histórico

4 UNIVERSIDADES ProfesoresAlumnos EEES PRO CESO DE ADAP TACIÓN AL EEES Servicios Retos de Calidad Universitaria en el Contexto del Espacio Europeo de Educación Superior Cambios Sociales, Económicos, Políticos

5 EXTERNAINTERNA PRO CESO DE ADAP TACI ÓN Instituciones Dinámicas UNIVERSIDADES

6 Profesores Alumnos Nuevas relaciones Usuarios Nuevas colaboraciones R. Humanos R. Información Activos R. Espaciales Nuevos proyectos Nuevos productos Nuevos servicios R. TIC INTERNO EXTERNO

7 R. Humanos R. Información Activos R. Espaciales R. TICs Nuevos perfiles Gestión más dinámica y flexible Modelos de Bibliotecas Virtuales Desarrollo de las TIC Proceso INTERNO de adaptación 8

8 Integración de los recursos y servicios de información existentes en los sistemas de gestión de e-learning Integración de los recursos/objetos de aprendizaje en sistemas de información digital (directorios, depósitos, bibliotecas digitales…) Gestión de contenidos de los recursos/objetos de aprendizaje Gestión autónoma de la formación por parte de los estudiantes. R. Humanos R. Información Activos R. Espaciales R. TICs Nuevos perfiles profesores/rol alumnos Gestión integrada de la información Modernización de los Espacios Desarrollo de las TICs en Bibliotecas Proceso INTERNO de adaptación

9 Contexto histórico y Situación actual I Plan Nacional de la Calidad de las Universidades-95 II Plan Nacional de Calidad de las Universidades-2001-1006 Primer PACU-Plan Andaluz de Calidad de las Universidades  sistema educativos  Los cambios acontecidos en España en el contexto económico-social en los últimos años, han provocado la adaptación de los sistema educativos a nueva coyuntura.  educación superior  Declaración de Bolonia de 1999: la educación superior conforma uno de los principales focos de atención dentro de la creación de una Europa común. Iniciativas para dar respuesta a estos retos

10 Contexto de Andalucía   Constitución de Vicerrectorados Gabinetes y Unidades de Calidad.   Planificación de Evaluaciones de Titulaciones, Servicios y Departamentos Universitarios.   Ley Andaluza de Universidades, LAU.   Unidad de Calidad Universidades Andaluzas. Planes de Calidad   Agencia Andaluza de Evaluación y Acreditación   Planes Estratégicos en las Universidades

11 EvaluaciónEvaluación Obtener información objetiva (cuantitativa y cualitativa) de forma sistemática para orientar decisiones. Conocimiento, reflexión. LOU, LOMLOU autorregulación, rendición de cuentas LOU, LOMLOU autorregulación, rendición de cuentas Criterios de financiación universidades andaluzas Criterios de financiación universidades andaluzas Controlar el gasto público (aumento de costes, restricc económ). Controlar el gasto público (aumento de costes, restricc económ). Ajustar la eficiencia y la calidad. Ajustar la eficiencia y la calidad. Contrarrestar la desigualdad e injusticia. Contrarrestar la desigualdad e injusticia. Aumentar la aportación al desarrollo nacional. Aumentar la aportación al desarrollo nacional. Mejorar la formación de los titulados como objetivo económico, social y cultural. Mejorar la formación de los titulados como objetivo económico, social y cultural. Mejorar los servicios ofertados por la Universidad. Mejorar los servicios ofertados por la Universidad. Derecho de los clientes/usuarios a conocer Derecho de los clientes/usuarios a conocer Proporcionar evidencia, de su calidad a la sociedad, como servicio público. Proporcionar evidencia, información relevante y objetiva, de su calidad a la sociedad, como servicio público. Proporcionar información objetiva para la adopción de Proporcionar información objetiva para la adopción de decisiones justificadas (PF, PD, PM). decisiones justificadas (PF, PD, PM). Garantizar el buen funcionamiento de una institución compleja. Garantizar el buen funcionamiento de una institución compleja. Obtener información objetiva (cuantitativa y cualitativa) de forma sistemática para orientar decisiones. Conocimiento, reflexión. LOU, LOMLOU autorregulación, rendición de cuentas LOU, LOMLOU autorregulación, rendición de cuentas Criterios de financiación universidades andaluzas Criterios de financiación universidades andaluzas Controlar el gasto público (aumento de costes, restricc económ). Controlar el gasto público (aumento de costes, restricc económ). Ajustar la eficiencia y la calidad. Ajustar la eficiencia y la calidad. Contrarrestar la desigualdad e injusticia. Contrarrestar la desigualdad e injusticia. Aumentar la aportación al desarrollo nacional. Aumentar la aportación al desarrollo nacional. Mejorar la formación de los titulados como objetivo económico, social y cultural. Mejorar la formación de los titulados como objetivo económico, social y cultural. Mejorar los servicios ofertados por la Universidad. Mejorar los servicios ofertados por la Universidad. Derecho de los clientes/usuarios a conocer Derecho de los clientes/usuarios a conocer Proporcionar evidencia, de su calidad a la sociedad, como servicio público. Proporcionar evidencia, información relevante y objetiva, de su calidad a la sociedad, como servicio público. Proporcionar información objetiva para la adopción de Proporcionar información objetiva para la adopción de decisiones justificadas (PF, PD, PM). decisiones justificadas (PF, PD, PM). Garantizar el buen funcionamiento de una institución compleja. Garantizar el buen funcionamiento de una institución compleja. Por qué y para qué Evaluar en la Universidad:

12 Promoción y garantía de la calidad Promoción y garantía de la calidad. Artículo 31 de la LOU  Medición del rendimiento del servicio público de la educación superior universitaria y la rendición de cuentas a la sociedad.  La transparencia, la comparación, la cooperación y la competitividad de las universidades en el ámbito nacional e internacional. En un momento de expansión de iniciativas privadas.  La mejora de la actividad docente e investigadora y de la gestión de las universidades.  La información a las administraciones públicas para la toma de decisiones en el ámbito de sus competencias.  La información a la sociedad para fomentar la excelencia y movilidad de estudiantes y profesores. En un momento de internacionalización de la formación y flexibilización de estructuras.  La concepción global de la formación universitaria, como paquete integral de ofertas que compiten en el mercado.  Constitución de Agencia Nacional y estructuras autonómicas. Ley Orgánica de Universidades

13 Un cambio en los sistemas de gestión de los centros públicos de enseñanza superior fundamentado en una mayor demanda social de: Eficacia: Reducción de la complejidad organizacional para mejorar la prestación de servicios, la adaptación a cambios del entorno y la adopción de un compromiso ético de la institución con la mejora continua. Calidad: Sustitución de la cantidad como criterio de excelencia en las instituciones educativas. Estrategia para perseguir la mejora continua mediante el uso de herramientas adecuadas (información, planificación y evaluación de procesos). Responsabilidad social: Rendición de cuentas y transparencia como ejercicio de información sobre cómo se utilizan los recursos, cómo se definen los procesos y qué impacto se está logrando en la sociedad.

14 ¿Cómo asegurar la calidad? EVALUACIÓN ACREDITACIÓN CERTIFICACIÓN FORMACIÓN APOYO A LA INNOVACIÓN FOMENTO DE LA MEJORA CALIDAD INTERCAMBIO EXPERIENCIAS RENDICIÓN DE CUENTAS GARANTÍA DE CALIDAD

15 AGENCIAS DE LAS COMUNIDADES AUTÓNOMAS Agència de Qualitat Universitària de les Illes Balears (AQUIB) Agencia Canaria de Evaluación de la Calidad y Acreditación Universitaria (ACECAU) Agència per a la Qualitat del Sistema Universitari de Catalunya (AQU Catalunya) Agencia para la Calidad del Sistema Universitario de Castilla y León La Axencia para a Calidade do Sistema Universitario de Galicia (ACSUG), Comisión Valenciana de Acreditación y Evaluación de la Calidad en el Sistema Universitario Valenciano. Agencia de Calidad, Acreditación y Prospectiva de las Universidades de Madrid Unidad para la Calidad de las Universidades Andaluzas

16 Agencias, Consorcios, Fundaciones Públicas

17 RIACES Redes de Agencias Internacionales de Evaluación de la Calidad en Educación Superior ComplexusComplexusComplexusComplexus EQAEQAEQAEQA

18 Instituciones de reconocimiento Privados

19 Sistemas de reconocimiento Privados Reconocimiento a través del Club de Gestión de Calidad Calidad Europea: 200-400 puntos del modelo EFQM Excelencia Europea: (nivel de consolidación) 401-500 puntos del modelo EFQM Excelencia Europea: (nivel de excelencia >500 puntos del modelo EFQM Posibilidad de migración de los sellos de reconocimiento al sistema EFQM Levels of Excellence

20 AGENCIA NACIONAL DE EVALUACIÓN Y ACREDITACIÓN Fundación Estatal

21 Unidad para la Calidad de las Universidades Andaluzas Consorcio Público de las 8 Universidades Andaluzas

22 Las Relaciones de la Agencia OTRAS AGENCIAS CONSEJERÍA E y CUNIVERSIDADES AGENCIA Sistema Universitario Andaluz CAU Evaluación/certificación de programas/unidades Informes para contratos PDI Informes para complementos retributivos Informes acreditación titulac. E. Complementos retributivos Colab. Contratos programa Evaluación para PAI Información Programas de formación Apoyo Planes de Mejora Información

23 Unidades de Calidad y Vicerrectorados de Calidad Vicerrectorado de Calidad y Planificación Estratégica Universidad de Córdoba Universidad de Almería Universidad de Jaén Vicerrectorado de Planificación, Calidad y Evaluación Vicerrectorado de Calidad y Nuevas Tecnologías

24 Papel de las Agencias Nacionales, Autonómicas e Internacionales de Evaluación y Acreditación ante los nuevos retos Principales funciones: promover garantizar para promover y garantizar la calidad de las universidades Españolas, en el ámbito nacional e internacional Evaluación, Certificación, Acreditación y Acreditación Las Agencias tienen como competencia la evaluación del desarrollo efectivo de estos procesos en titulaciones, servicios y profesores.

25 - Evaluación: Dentro de la mejora continua en docencia, investigación y gestión, consiste en un examen sistemático para determinar si las acciones que conducen a la calidad se desarrollan según la planificación y si los productos o servicios se ofrecen de forma eficaz. Y, de esta forma, diagnosticar el momento presente para alcanzar los objetivos de calidad mediante la toma de decisiones. - Acreditación: Es un proceso de evaluación que exige la superación de criterios y estándares de calidad, previamente establecidos, en las enseñanzas conducentes a la obtención de títulos universitarios de carácter oficial y validez en todo el territorio nacional y en los centros que imparten enseñanzas de acuerdo con sistemas educativos extranjeros. - Certificación: La certificación es un proceso de evaluación externa, solicitado de forma voluntaria por la unidad a evaluar, por el que se comprueba el cumplimiento de un conjunto de especificaciones previamente establecidas. Este proceso tiene como objetivo fundamental comprobar la calidad de la unidad evaluada, así como implantar una metodología para promover la mejora continua de los programas y servicios de la Universidad.

26 Papel instrumental de las Agencias de Evaluación y Acreditación Evaluación Institucional Acreditación Profesorado y Títulos Certificación Convergencia Europea Retos de Hogeneizar procesos de formación e instrumentos de evaluación Certificado de Calidad de los Servicios de Biblioteca Mención de calidad de los programas de doctorado Titulaciones Departamentos Servicios

27 ¿Qué ámbitos y unidades se evalúan? TitulaciónDepartamentoServicio Enseñanza 1º y 2º ciclos 3er ciclo Investigación+ Gestión+++

28 Programas de Evaluación Institucional Programas de Evaluación Institucional Objetivo: proseguir la expansión de la cultura de la calidad en las instituciones, potenciando la evaluación para la mejora. Resultado: Las titulaciones evaluadas obtienen un conjunto de recomendaciones para las mejoras correspondientes. Las titulaciones deben acreditarse cada 6 años. Los servicios deben someterse a estos procesos. Los profesores deben evaluarse, habilitarse y acreditarse. Las universidades deben suscribir contratos programa para rendir cuentas de su actividad. Su financiación está condicionada por el logro de objetivos relacionados con la calidad: títulos evaluados, implantación tecnológica, proyectos de innovación, impacto de la investigación, movilidad estudiantil, potencial de inserción, tasas de fracaso…

29 Ámbito: programas no oficiales y servicios ofrecidos por las universidades. Objetivo: garantizar que los servicios y programas universitarios cumplen unos requisitos de calidad previamente establecidos. Resultado: obtención, o no, de un certificado de calidad. Mención de Calidad en los programas de Doctorado de las Universidades públicas y privadas. Certificado de Calidad de los Servicios de Biblioteca de las Universidades. Certificado de Calidad de Servicios. (O.R.I., O.T.R.I., …) Programas de Certificación

30 Programas de Acreditación Ámbito: de títulos oficiales y de profesores Objetivos: Garantizar que las titulaciones ofrecen formación útil, actualizada y de calidad. Garantizar que los profesores están cualificados para desarrollar tareas de investigación, docencia y gestión Implantar sistemas de incentivos personales (complementos autonómicos) e institucionales (contratos programa dotados de financiación)

31 Aspectos relevantes del Modelo Institucional Voluntariedad Transitoria Debe ser formativa Modelo de autorregulación: componente interna y externa Información cuantitativa y cualitativa. Análisis Participación de todos los agentes implicados Metodología homogénea (criterios comunes) y orientadora (Guías) Encuestas y otros instrumentos comparables Entrevistas y Audiencias Adaptable a cada Unidad de Evaluación Transparencia del proceso. Consenso.

32 Presupuestos del Modelo General de Evaluación de Calidad 1. 1.Considerar al cliente como un punto de referencia. 2. 2.Promover la mejora continua de todos los procesos y actividades. Evaluación Diagnóstica orientada a la mejora: p. fuertes, p.débiles y mejoras. 3. 3.Fomentar el desarrollo e implicación del PDI i el PAS como activos mas importantes de la organización. 4. 4.Considerar la completa implicación de todos los servicios, centros y departamentos en la mejora de la calidad. 5. 5.Documentar las valoraciones con evidencias usando diferentes fuentes de información.

33 ¿Qué modelo de evaluación se utiliza? –Modelo de autorregulación Autoevaluación y evaluación externa Autoevaluación y evaluación externa –Previo a Acreditación Acreditación Certificación Certificación –Juicios de personal de la unidad y de expertos externos –Análisis cualitativos e indicadores y valoraciones cuantitativas –Orientación a la mejora continua (formativa) con componentes sumativas (transparencia informativa) –Preorientación Sumativa o de decisión (acreditaciones y certificaciones) –Modelo participativo

34 El proceso de autorreflexión realizado por un Comité de propia unidad que, siguiendo las pautas marcadas por la guía de autoevaluación, y apoyado por la opinión de expertos externos, realiza un análisis crítico de la misma El proceso de autorreflexión realizado por un Comité de propia unidad que, siguiendo las pautas marcadas por la guía de autoevaluación, y apoyado por la opinión de expertos externos, realiza un análisis crítico de la misma Filosofía del Modelo¿Qué es la autorregulación? VENTAJAS: Mejor conocimiento del funcionamiento de la unidad Mejor aceptación por la unidad, por lo que asegura Obtención de datos más válidos Confianza en el uso efectivo de los resultados Fortalecimiento del compromiso de la unidad DESVENTAJAS: Mayor tendencia a la autocomplacencia (autosatisfacción) Más condicionados (equipos de gobierno, compañeros…) AUTOEVALUACIÓNMETAEVALUACIÓN EXTERNA

35 ¿Qué fases?: (responsables) ¿Qué fases?: (responsables) –Evaluación interna (CIE) –Evaluación externa (CEE)  Informe Final de Evaluación de la Unidad (CIE)  Informe de la Calidad de la Universidad (C. Calidad Universidad)  Informe de la Calidad de las Universidades Andaluzas (UCUA) ¿Qué modelo de evaluación se utiliza (II)?

36 Comité Interno Comité externo Autoinforme Informe externo VisitaEntrevistas Informe Final Unidad Las fases de la autorregulación Análisis MejoraSeguimiento Acreditación Aseguramiento calidad

37 Fases Fases del proceso de evaluación Planificación. Planificación. Autoevaluación. Autoevaluación. Evaluación externa. Evaluación externa. Informe final y plan de mejoras. Informe final y plan de mejoras. Cada fase tiene sus etapas con sus respectivos responsables asociados

38 LA UCUA Y EL PACU. marzo 2002. M. Barbancho Recogida de información Valoración de la información Redacción del Autoinforme Redacción del Informe de Evaluación Externa Recogida de información Proporcionada, demandada y percibida FASE FINAL: Informe Final: PLAN DE MEJORA FASE INTERNA: Autoevaluación FASE EXTERNA: Evaluación por pares ? Valoración de la información Modelo de autorregulación

39 Comité de Autoevaluación COMPOSICIÓN DEL COMITÉ COMPOSICIÓN DEL COMITÉ MOTIVACIÓN PLANTEAMIENTO DE OBJETIVOS DE LA EVALUACIÓN PLANTEAMIENTO DE OBJETIVOS DE LA EVALUACIÓN - ¿CUÁNTOS LO FORMAN? - ¿QUIÉNES LO FORMAN? EQUILIBRIO. - ¿ELEGIDOS, DESIGNADOS, CONSENSUADOS? - ¿QUIÉN HA DECIDIDO LA EVALUACIÓN? - - ¿EXISTE UNA “CULTURA DE EVALUACIÓN” EN EL CENTRO, SERVICIO, INSITUCIÓN? - - PERCEPCIÓN POR EL COMITÉ DEL SIGNIFICADO Y ALCANCE DE LA EVALUACIÓN - FORMACIÓN METODOLÓGICA - GENERACIÓN DE PROPUESTAS DE MEJORA - CONTROL DE CALIDAD Y RENDIMIENTO DE CUENTAS

40 Composición del Comité de Autoevaluación  Presidente (responsable del Servicio).  Representante con responsabilidad directiva.  Representante del personal sin responsabilidad directiva.  Representantes de los usuarios.

41 Tareas previas de los miembros del CA Conocer la finalidad y la metodología para evaluar la calidad de la Titulación. Estar informado de la función y las tareas a realizar como miembro del Comité. Estudiar y analizar la Guía de autoevaluación. Promover la participación y el consenso.

42 Funciones del Comité de Autoevaluación  Diagnóstico de la Unidad siguiendo una guía.  Cumplimentación de los perfiles de calidad.  Elaboración del Informe de Autoevaluación. Informe de AutoevaluaciónInforme de Autoevaluación  Actuación de interlocutor con el Comité de Evaluación Externa.  Elaboración del Informe Final de Evaluación del Servicio. Informe Final de Evaluación del ServicioInforme Final de Evaluación del Servicio

43 Aplicación del Modelo a un Servicio Universitario: Biblioteca Universitaria Problemas: - Concepto de Unidad de Evaluación - Concepto de Usuarios del Servicio - Agentes involucrados - Magnitud y volumen de la Autoevaluación - Influencias externas derivadas el Contexto de Cambio EEES

44 LiderazgoProcesos Resultados clave Personas Política y estrategia Alianzas y estrategias Resultados en clientes en clientes Resultados en personas en personas Resultados en sociedad Resultados Innovación y aprendizaje Agentes facilitadores Modelo EFQM

45 CRITERIOS AGENTES FACILITADORES RESULTADOS 1. LiderazgoLiderazgo 2. Política y estrategiaPolítica y estrategia 3. PersonasPersonas 4. Alianzas y recursosAlianzas y recursos 5. ProcesosProcesos 6. Resultados en los clientesResultados en los clientes 7. Resultados en las personasResultados en las personas 8. Resultados en la sociedadResultados en la sociedad 9. Resultados claveResultados clave 0. Evolución y contexto actualEvolución y contexto actual

46 Cómo la evolución y contexto actual del Servicio ayudan a explicar la trayectoria histórica y situación actual del mismo. Cómo la evolución y contexto actual del Servicio ayudan a explicar la trayectoria histórica y situación actual del mismo. SUBCRITERIOS: SUBCRITERIOS: - Acontecimientos y cambios importantes. - Política y situación actual. 0. Evolución y contexto actual

47 1. Liderazgo Hace referencia al grado de compromiso visible de los dirigentes y responsables de distinto nivel en la creación y uso de valores y estrategias de gestión integral de la calidad. Hace referencia al grado de compromiso visible de los dirigentes y responsables de distinto nivel en la creación y uso de valores y estrategias de gestión integral de la calidad. SUBCRITERIOS: SUBCRITERIOS: - Definición de la estrategia del Servicio. - Actividades de mejora de la calidad. - Reconocimiento de los esfuerzos del personal para la mejora. - Comunicación con diversos grupos de interés.

48 Cómo implanta el Servicio su misión y visión mediante una estrategia claramente centrada en todos los grupos de interés y apoyada por políticas, planes, objetivos, metas y procesos relevantes. Cómo implanta el Servicio su misión y visión mediante una estrategia claramente centrada en todos los grupos de interés y apoyada por políticas, planes, objetivos, metas y procesos relevantes. SUBCRITERIOS: SUBCRITERIOS: - Recogida de información relevante. - Planificación de objetivos de mejora. - Aseguramiento o garantía del logro de los objetivos de calidad. - Recursos disponibles. - Coordinación entre el Servicio y la estrategia general de la Universidad. 2. Política y estrategia

49 3. Personas Evalúa cómo se fortalece y desarrolla la posición del personal, y cómo se promueve su participación en la consecución de mejoras mediante la comunicación y la responsabilidad compartida. Evalúa cómo se fortalece y desarrolla la posición del personal, y cómo se promueve su participación en la consecución de mejoras mediante la comunicación y la responsabilidad compartida. SUBCRITERIOS: SUBCRITERIOS: - Planificación de la gestión del personal. - Implicación y asignación de responsabilidades. - Comunicación entre el equipo directivo y el personal.

50 Cómo planifica y gestiona el Servicio sus alianzas externas y sus recursos internos en apoyo de su política y estrategia, y del eficaz funcionamiento de sus procesos. Cómo planifica y gestiona el Servicio sus alianzas externas y sus recursos internos en apoyo de su política y estrategia, y del eficaz funcionamiento de sus procesos. SUBCRITERIOS: SUBCRITERIOS: - Información disponible para la toma de decisiones. - Alianzas estratégicas. - Asignación, control y optimización de recursos. - Nuevas tecnologías. - Gestión del conocimiento. 4. Alianzas y recursos

51 5. Procesos Cómo diseña, gestiona y mejora el Servicio sus procesos para apoyar su política y estrategia y para satisfacer plenamente, generando cada vez mayor valor, a sus clientes y otros grupos de interés. Cómo diseña, gestiona y mejora el Servicio sus procesos para apoyar su política y estrategia y para satisfacer plenamente, generando cada vez mayor valor, a sus clientes y otros grupos de interés. SUBCRITERIOS: SUBCRITERIOS: - Identificación de procesos clave. - Seguimiento y control de los procesos. - Desarrollo de nuevos servicios. - Auditorías y evaluación de los sistemas de gestión.

52 Qué logros está alcanzando el Servicio en relación con sus clientes y usuarios. Qué logros está alcanzando el Servicio en relación con sus clientes y usuarios. SUBCRITERIOS: SUBCRITERIOS: - Mediciones sistemáticas de la satisfacción. - Difusión y uso de los resultados. - Revisión y mejora de los procedimientos. 6. Resultados en los clientes

53 7. Resultados en las personas Qué logros está alcanzando el Servicio en relación con las personas que lo integran. Qué logros está alcanzando el Servicio en relación con las personas que lo integran. SUBCRITERIOS: SUBCRITERIOS: - Mediciones sistemáticas de la satisfacción del personal. - Difusión y uso de los resultados. - Revisión y mejora de los procedimientos.

54 Qué logros está alcanzando el Servicio en la sociedad, a nivel local, nacional e internacional (según resulte pertinente). Qué logros está alcanzando el Servicio en la sociedad, a nivel local, nacional e internacional (según resulte pertinente). SUBCRITERIOS: SUBCRITERIOS: - Análisis de la demanda social. - Actividades de impacto. - Análisis del impacto. - Revisión y mejora de los procedimientos. 8. Resultados en la sociedad

55 9. Resultados clave Qué logros está alcanzando el Servicio con relación al rendimiento planificado. Qué logros está alcanzando el Servicio con relación al rendimiento planificado. SUBCRITERIOS: SUBCRITERIOS: - Resultados de los principales servicios prestados. - Resultados de los procesos de soporte. - Difusión y uso de los resultados. - Revisión y mejora de los procedimientos.

56 Guía de evaluación Ayuda para la elaboración del Informe de Autoevaluación por parte del Comité de Autoevaluación. Ayuda para la elaboración del Informe de Autoevaluación por parte del Comité de Autoevaluación.Comité de AutoevaluaciónComité de Autoevaluación Para cada uno de los 9+1 criterios: Para cada uno de los 9+1 criterios: - Explicación general y definición. - Subcriterios. Preguntas y cuestiones de interés. - Valoración crítica: puntos fuertes, débiles y sugerencias de mejora. - Documentación de referencia.

57 Tabla de administración 1

58 Tabla de administración 2

59 Tabla de administración 3

60 Tabla de administración 3b

61 Tabla de administración 4

62 Tabla de administración 5

63 Tabla de administración 6

64 Informe de Autoevaluación (I) Contiene la valoración de la calidad de la gestión y el rendimiento del Servicio. Contiene la valoración de la calidad de la gestión y el rendimiento del Servicio. Basado en evidencias, participación, consenso y publicidad. Basado en evidencias, participación, consenso y publicidad. Estructura Estructura - Índice. - Presentación del Servicio y del CA. - Epígrafe para cada criterio (PF, PD y PM). - Anexos (tablas, encuestas, otros documentos). - Tabla resumen con PF, PD y PM.

65 Tablas de administración. Tablas de administración. Tablas EFQM (según criterios y subcriterios) Tablas EFQM (según criterios y subcriterios) Tablas resumen EFQM. Tablas resumen EFQM. Tablas sobre la madurez del Servicio. Tablas sobre la madurez del Servicio. Modelos de encuesta. Modelos de encuesta. - Satisfacción del usuario. - Satisfacción del personal. Informe de Autoevaluación (II)

66 Informe Final de Evaluación Síntesis del Informe de Autoevaluación y del Informe de Evaluación Externa. Síntesis del Informe de Autoevaluación y del Informe de Evaluación Externa. Estructura: Estructura: - Introducción: descripción general del proceso de evaluación y descripción breve de los resultados de cada criterio. - Valoración del proceso de evaluación. - Puntos fuertes y débiles. - Acciones estratégicas de mejora.

67 Explicitar y Definir el Sistema de Gestión PROCESOS ESTRATÉGICOS PROCESOS CLAVE PROCESOS DE SOPORTE MEDICIÓN, ANÁLISIS Y MEJORA SISTEMA GESTION CALIDAD EVALUACIÓN PROVEEDORES MANTENIMIENTO PROCESO TÉCNICO CONSULTA EN SALA O RED PRESTAMO TELEPRESTAMO ADQUISICIONES - INGRESOS FORMACION PERSONAL GESTIÓN ECONÓMICA

68 ¿EN QUÉ MEDIDA ESTÁN IMPLICADAS LAS BIBLIOTECAS UNIVERSITARIAS EN LA CONSTRUCCIÓN DEL NUEVO EEES? Los nuevos métodos de enseñanza y aprendizaje impuestos por la Declaración de Bolonia repercutirán directamente en un mayor uso de la Biblioteca por parte de profesores y alumnos y en la demanda de nuevos servicios de Biblioteca. Bolonia y las Bibliotecas. Adecuación de los servicios a los cambios externos del Contexto

69 Estudios contemporáneos de uso, comportamiento y asesoramiento Cuando se hacen búsquedas en Revistas con fines de investigación: Fuente. Digital Library Federation and Council on Library and Information Resources. (2002). Dimensions and Use of the Scholarly Information Environment. Only 13.9% ask a librarian for assistance Only 13.9% ask a librarian for assistance Only 3.2% consider consulting a librarian a preferred way of identifying information Only 3.2% consider consulting a librarian a preferred way of identifying information

70 Facilities Usage: University of Texas Entrance Statistics - UT Austin Libraries 1991-2003

71 Printed Book Circulation: Fuente. M. Kyrillidou and M. Young. (2002). ARL Statistics 2000-01. Washington, D.C.: ARL, p.7.

72 Disminución de Catalogaciones Fuente. M. Kyrillidou and M. Young. (2002). ARL Statistics 2000-01. Washington, D.C.: ARL, p.7.

73 Searches for Online Journals: University of Texas UT Austin Libraries 2002-2004 Monthly

74 Web Usage: University of Texas Total File Requests - UT Austin Libraries 2000-2003

75 Aplicar Sistemas de Garantía y Aseguramiento de la Calidad ISO EFQM GUÍA PARA LA MENCIÓN DE CALIDAD DE LA ANECA GUÍA DE EVALUACIÓN DE BIBLIOTECAS MEC/ANECA AGENCIAS REGIONALES DE CALIDAD UNIVERSIDADES BIBLIOTECAS UNIVERSITARIAS GUÍA DE EVALUACIÓN DE BIBLIOTECAS DE LA ACUA BIBLIOTECA en el Contexto de Cambio de la Sociedad del Conocimiento

76 Por qué el modelo EFQM?? MODELO EFQM:Examen global, sistemático y regular de las actividades y resultados de una organización, comparándolos con un Modelo de Referencia (EFQM Excellence Model)  Diagnóstico de la excelencia en la gestión  Identificación de Puntos Fuertes y Áreas de Mejora  Soporte a la definición de Planes de Acción  Base objetiva de comparación con otras organizaciones externas a la Universidad o internas  Medida de la progresión en el tiempo  Formación e Implicación del personal de la Biblioteca  Opción a presentación a un Reconocimiento externo (Sellos CGC, EFQM Levels of Excellence, etc.)

77 Por qué algunas bibliotecas se han apoyado en Herramientas Externas y Empresas Externas El caso del Proyecto PERFIL?  Programa automatizado de gestión de evaluaciones de servicios universitarios  Avalado por el Club de Gestión de Calidad  Posibilita recopilar los datos de la evaluación conforme al modelo EFQM en modo de base de datos sin necesidad de elaborar un informe de manera conjunta  Posibilita la participación –si se desea- de todo el personal de la biblioteca  Permite asignar puntuaciones a cada uno de los subcriterios y criterios conforme al modelo EFQM  Gestiona el consenso entre los participantes de la evaluación  Homologado por el CGC como herramienta de evaluación conducente al reconocimiento de sello de excelencia europeo

78 ¿Cómo funciona el Programa PERFIL?  Correlación Preguntas - Criterios y Subcriterios Cada Subcriterio se subdivide a su vez en una o varias preguntas Cada pregunta está específicamente dirigida a averiguar el grado de aplicación en la organización de alguna de las recomendaciones del Modelo en dicho Subcriterio específico  Criterios de Ponderación Adicionalmente a los propios criterios de ponderación establecidos en el Modelo para cada uno de los Criterios (1,0 para Liderazgo, 0,8 para Política y Estrategia, etc.), cada pregunta puede tener una ponderación específica dentro del Subcriterio en que se encuentra  Sugerencias La aplicación aporta sugerencias ilustrando las preguntas del Cuestionario, facilitan la contestación del mismo, y permiten incorporar términos sectoriales sin mermar la objetividad ni la universalidad de las preguntas Evaluación basada en un cuestionario y en puntuaciones: Respuesta a una relación de preguntas (50 o 120) clasificadas según los Criterios del Modelo EFQM de Excelencia, de acuerdo a unos baremos preestablecidos

79

80

81

82

83

84

85

86

87

88 123

89 123456789

90 1 ∞

91 Quality Measure Quantity Measure + + – – Quality Measure Quantity Measure + + – – Modelos Híbridos Cuanti-Cualitativos

92 Desarrollo del Proyecto Fases de implantación del Sistema de Gestión de la Calidad de la Biblioteca Fase I. Liderazgo de la dirección y diagnóstico previo Fase II. Formación Fase III. Desarrollo del Sistema de Gestión de la Calidad Fase IV. Certificación Fase V. Mantenimiento de la Certificación.

93 Fase I. Liderazgo de la dirección y diagnóstico previo. Definición Grupo liderazgo y Grupo base Diagnóstico situación actual y plan de actividades Definición de la matriz de responsabilidades y cronogramas Desarrollo del Proyecto

94 Fase III. Desarrollo del Sistema de Gestión de la Calidad Preparación de la documentación: Manual, procedimientos generales, fichas de proceso y documentos propios. Implantación de la actividad operativa. Auditoria interna. Revisión del Sistema.

95 Fase IV. Certificación Petición de Certificación y envío de la documentación Visita previa y ajustes del Sistema de Gestión de la Calidad Auditoria y ajustes del Sistema de Gestión de la Calidad Obtención del certificado (Marzo de 2005) Desarrollo del Proyecto

96 Fase V. Mantenimiento de la Certificación. Plan de mejora 2005-06 Programación de actividades mediante calendario con instrumentos de seguimiento sistemático Desarrollo del Proyecto

97 ¿Por qué hemos optar por la norma ISO 9001:2000? Involucra al personal, la dirección y los proveedores en la definición de un sistema de gestión. Garantiza que los procesos son medidos, analizados y mejorados. Evalúa sistemáticamente los proveedores y la satisfacción de clientes. Certifica con una norma internacional un sistema de gestión. Se crea un sistema de información estable en el que se documentan todos los procesos. Conclusiones

98 Proyectos de Mejora-Contratos Programa. ¿Qué son? Son instrumentos de participación constante de la calidad Son instrumentos de participación constante de la calidad Su actuación se sustenta en el reconocimiento de que la calidad es competencia de todos Su actuación se sustenta en el reconocimiento de que la calidad es competencia de todos Quienes mejor conocen los procesos de trabajo son quienes los realizan Quienes mejor conocen los procesos de trabajo son quienes los realizan

99 GRUPOS DE MEJORA Reglas de funcionamiento GRUPOS DE MEJORA Reglas de funcionamiento CONSENSO CONSENSO ESCUCHAR ACTIVAMENTE ESCUCHAR ACTIVAMENTE PREPARAR LAS REUNIONES PREPARAR LAS REUNIONES PUNTUALIDAD INICIAL Y FINAL PUNTUALIDAD INICIAL Y FINAL TODOS PARTICIPAN TODOS PARTICIPAN CREATIVIDAD E INNOVACIÓN CREATIVIDAD E INNOVACIÓN ABIERTOS A NUEVAS IDEAS ABIERTOS A NUEVAS IDEAS TODO SE REFELEJA EN ACTAS TODO SE REFELEJA EN ACTAS DEBE HABER UN LIDERAZGO DEBE HABER UN LIDERAZGO

100 GRUPOS DE MEJORA. Método de trabajo Responsabilidad del GRUPO Responsabilidad del GRUPO Definición clara del objetivo Definición clara del objetivo Entrevistas a usuarios y recogida de datos Entrevistas a usuarios y recogida de datos Dibujo detallado del proceso-mapas Dibujo detallado del proceso-mapas Análisis de las causas y desarrollo de soluciones Análisis de las causas y desarrollo de soluciones Comparación con líderes Comparación con líderes Presentación de conclusiones a Equipo de Gestión del Centro y Comunidad Presentación de conclusiones a Equipo de Gestión del Centro y Comunidad Informe final y plan de acción Informe final y plan de acción Responsabilidad de la UNIDAD Responsabilidad de la UNIDAD Implementación de las soluciones Implementación de las soluciones Evaluación y ajustes Evaluación y ajustes

101 GRUPOS DE MEJORA. GRUPOS DE MEJORA. Programa de calidad institucional Programa de calidad institucional Grupos de mejora tras Autoevaluación Grupos de mejora tras Autoevaluación 2 ó 3 por año 2 ó 3 por año Coordinados por la Unidad de Calidad Coordinados por la Unidad de Calidad Formación a cargo de la Institución Formación a cargo de la Institución Reconocimiento institucional a participantes Reconocimiento institucional a participantes

102 GRUPOS DE MEJORA. Algunos ejemplos (1) GRUPOS DE MEJORA. Algunos ejemplos (1) Mejora del Préstamo Mejora del Préstamo Atención de incidencias de mantenimiento Atención de incidencias de mantenimiento Información en aularios Información en aularios Pago de proyectos de investigación Pago de proyectos de investigación Pago de conferencias, dietas y traslados Pago de conferencias, dietas y traslados Información previa a la matrícula Información previa a la matrícula Difusión de programas de doctorado Difusión de programas de doctorado Tramitación de convalidaciones Tramitación de convalidaciones Compras con fondos de Proyectos Compras con fondos de Proyectos Gestión del correo electrónico Gestión del correo electrónico Gestión de Erasmus a la carta Gestión de Erasmus a la carta

103 GRUPOS DE MEJORA. Algunos ejemplos (2) Organización y gestión de Prácticas Organización y gestión de Prácticas Mejora del Servicio de Reprografía Mejora del Servicio de Reprografía Solapamiento de contenidos de asignaturas Solapamiento de contenidos de asignaturas Resolución de incidencias en Aulas Informáticas Resolución de incidencias en Aulas Informáticas :::::::::::::: ::::::::::::::

104 GRUPOS DE TRABAJO EN BIBLIOTECA 1. Mejora de Proceso técnico- Web/Prestamos 2. Mejora de envío de documentación electrónica a profesores 3. Mejora de la Intranet 4. Mejora de la integración del sistema de gestión contable 5. Evaluación de proveedores ……………………..

105 ¿Qué se consigue con la autoevaluación? ¿Cuáles son las funciones de la evaluación de Servicios? La participación del personal del Servicio en la evaluación ayuda a comprender mejor el funcionamiento de la organización y a definir su situación laboral. Esto aumenta las posibilidades de contribuir al perfeccionamiento y las oportunidades de desarrollo personal, emocional y profesional. La participación del personal del Servicio en la evaluación ayuda a comprender mejor el funcionamiento de la organización y a definir su situación laboral. Esto aumenta las posibilidades de contribuir al perfeccionamiento y las oportunidades de desarrollo personal, emocional y profesional. La autoevaluación persigue de manera operativa la elaboración de un plan global de mejoras para el Servicio. La autoevaluación persigue de manera operativa la elaboración de un plan global de mejoras para el Servicio. El objetivo fundamental es contribuir al perfeccionamiento. La evaluación sirve para señalar áreas de debilidad, reconocer errores y realizar cambios racionales dentro de la gestión. El objetivo fundamental es contribuir al perfeccionamiento. La evaluación sirve para señalar áreas de debilidad, reconocer errores y realizar cambios racionales dentro de la gestión. –Diagnóstica. Reconocimiento de errores o problemas de funcionamiento y establecimiento de estrategias adecuadas para iniciar acciones. –Formativa. El personal participante comprende qué significa trabajar con un modelo de calidad, qué exigencias requiere y qué nuevos procesos se necesitan. –Sumativo. El Servicio expone públicamente su situación actual, sus logros y las actividades que realiza para que se vea que intenta alcanzar la excelencia del Servicio.

106 Acciones post-evaluación Difusión del Informe Final de Evaluación del Servicio entre los grupos implicados en su funcionamiento. Difusión del Informe Final de Evaluación del Servicio entre los grupos implicados en su funcionamiento. Constitución del Comité de Calidad del Servicio responsable del seguimiento de acciones de mejora. Constitución del Comité de Calidad del Servicio responsable del seguimiento de acciones de mejora. Negociación con los responsables de gobierno universitario para concretar las acciones de mejora. Negociación con los responsables de gobierno universitario para concretar las acciones de mejora. Elaboración del Plan de Calidad del Servicio Elaboración del Plan de Calidad del Servicio Elaboración del plan de seguimiento. Elaboración del plan de seguimiento. Implantación del plan de seguimiento. Implantación del plan de seguimiento. Elaboración de informes semestrales sobre la marcha del proceso. Elaboración de informes semestrales sobre la marcha del proceso. Revisión periódica por expertos externos, tomando como base el plan de mejoras y los informes semestrales. Revisión periódica por expertos externos, tomando como base el plan de mejoras y los informes semestrales. Nueva evaluación del Servicio (autoevaluación y evaluación externa) tras un período de cinco a seis años. Nueva evaluación del Servicio (autoevaluación y evaluación externa) tras un período de cinco a seis años.

107 EvaluaciónTitulaciones

108 La titulación : La titulación : Planificación de la titulación: objetivos y competenciasPlanificación de la titulación: objetivos y competencias Programa de formaciónPrograma de formación RecursosRecursos Desarrollo de la enseñanzaDesarrollo de la enseñanza Calidad de los ResultadosCalidad de los Resultados Puntos fuertes y débilesPuntos fuertes y débiles Plan de mejoraPlan de mejora AutoevaluaciónAutoevaluación Evaluación de Titulaciones titulaciones INTERNAINTERNA FACILITADORES DE ENTRADA PROCESOS RESULTADOS

109 Tiene establecidos explícita y claramente los objetivos, definido el perfil profesional de los egresados y planificados los procesos de dirección. Tiene establecidos explícita y claramente los objetivos, definido el perfil profesional de los egresados y planificados los procesos de dirección. Cuenta con un programa formativo coherente y bien organizado. Cuenta con un programa formativo coherente y bien organizado. Cuenta con los recursos adecuados para desarrollar el programa, lograr los objetivos y alcanzar los resultados deseados. Cuenta con los recursos adecuados para desarrollar el programa, lograr los objetivos y alcanzar los resultados deseados. Logra los resultados esperados. Logra los resultados esperados. Tiene establecidos procedimientos de análisis y revisión que permiten asegurar la calidad de la misma. Tiene establecidos procedimientos de análisis y revisión que permiten asegurar la calidad de la misma. Un titulación es de calidad si:

110 PLA NIFI CA CIÓN 1. 1.Objetivos 2. 2.Perfil profesional 3. 3.Dirección y planificación 1. 1.Estructura Plan de Estudios 2. 2.Programa de asignaturas 3. 3.Dimensión práctica 4. 4.Planificación docente 1. 1.Humanos: Alumnado 2. 2.Humanos: Profesorado 3. 3.Humanos: PAS 4. 4.Físicos 5. 5.Financieros 1. 1.Metodología docente 2. 2.Trabajo del alumnado 3. 3.Evaluación de los aprendizajes 4. 4.Orientación y acción tutorial 5. 5.Coordinación de la enseñanza 1. 1.Resultados del programa formativo 2. 2.Resultados por asignaturas 3. 3.Resultados de los egresados 4. 4.Satisfacción con los resultados Unidades de análisis- Titulaciones PRO GRA MA FOR MA CIÓN RECURSOSRECURSOS DESARROLLOENSEÑANZADESARROLLOENSEÑANZA CALIDADRESULTADOSCALIDADRESULTADOS

111 DIMENSIONES, UNIDADADES Y CRITERIOS PREGUNTASEVIDENCIASFUENTES 1. PLANIFICACIÓN DE LA TITULACIÓN: OBJETIVOS DIMENSIÓN 1.1 Objetivos UNIDAD DE ANÁLISIS 1.1.1 La titulación tiene establecidos de forma concreta y pública sus objetivos. CRITERIO 1. ¿La Titulación tiene establecidos sus objetivos? ¿Cuáles son los objetivos? ¿Son coherentes con los fines de la Enseñanza Superior?..... 2. ¿Se corresponden con los establecidos en el Espacio Europeo de Enseñanza Superior? 1. Existencia y contenido del documento público en el que se constatan metas y objetivos de la Titulación. 2. Nivel de concordancia entre los objetivos de la Titulación y la misión y características de la Universidad. 3..... 1. Directrices sobre Planes de Estudio: normativa de la Universidad, directrices propias de la Titulación 2. Plan de estudios publicado en el Boletín Oficial del Estado. 3..... Estructura de la Guía Titulaciones

112 1. Planificación de la titulación: objetivos 1.1 Objetivos. Su grado de definición y concreción. Los sistemas de revisión de los mismos. ¿Qué se evalúa? titulaciones INTERNAINTERNA 1.2 Perfil profesional. Su grado de especificación. Los sistemas de revisión de los mismos. 1.3 Dirección, planificación y mejora. La existencia de una planificación estratégica, su grado de desarrollo y el compromiso de la dirección en su ejecución.

113 Valoración semicuantitativa El CIE valorará en la escala indicada, cada uno de los criterios incluidos en la dimensión, teniendo en cuenta la descripción y valoración cualitativa efectuada en el cuadro anterior. 1: Ausencia o muy deficiente 4: Muy satisfactorio 2: Deficiente NE: Evidencias insuficientes 3: Satisfactoria 1234NEMediaSUFICIENCIA/ INSUFICIENCI A 1. PLANIFICACIÓN DE LA TITULACIÓN: OBJETIVOS 1.1 Objetivos 1 1 1 3SUFICIENCIA 1.1 La titulación tiene establecidos de forma concreta y pública sus objetivos. X 1.1.2 Las metas y objetivos son concretos y realistas en función de los recursos disponibles y están formulados de manera que permiten su evaluación periódica X 1.1.3 La titulación no cuenta con obstáculos internos o externos insalvables para el logro de sus objetivos. X

114 EVALUACIÓN DE departamentos ¿Qué se puede evaluar en los Departamentos? 1. Perfil del departamento 2. Enseñanzas de primer y segundo ciclo 3. Estudios de tercer ciclo 4. Maestrías y Estudios propios 5. Investigación 6. Prestación de servicios 7. Gestión INTERNAINTERNA Nueva Guía Plan experim. Guía titulaciones Guía EFQM

115 Evaluación Doctorados de Calidad-Modelo Acreditación CRITERIOS CONTEMPLADOS CRITERIOS CONTEMPLADOS A) Criterios referidos a los antecedentes del programa: 40% B) Criterios referidos a la propuesta del programa: 60%

116 Criterios apartado A: ANTECEDENTES DEL PROGRAMA PONDERACIÓN A.1. Historial docente, referido exclusivamente a programas de doctorado, e investigador durante los últimos cinco años del grupo o grupos que desarrollan el programa. 16% A.2. Relación de publicaciones de resultados de investigación relacionados directamente con las tesis doctorales defendidas en los últimos cinco años. A.2. Relación de publicaciones de resultados de investigación relacionados directamente con las tesis doctorales defendidas en los últimos cinco años.6% A.3. Porcentaje de alumnos que han alcanzado el Diploma de Estudios Avanzados (DEA) en ese periodo A.3. Porcentaje de alumnos que han alcanzado el Diploma de Estudios Avanzados (DEA) en ese periodo4% A.4. Número de tesis defendidas en ese mismo periodo. A.4. Número de tesis defendidas en ese mismo periodo.4% A.5. Porcentaje de las tesis defendidas que han incluido la mención “doctorado europeo” en los últimos cinco años. A.5. Porcentaje de las tesis defendidas que han incluido la mención “doctorado europeo” en los últimos cinco años.4% A.6. Número de becarios y de profesores y doctores visitantes con becas y ayudas obtenidas en convocatorias competitivas de ámbito nacional o comunitario en ese mismo periodo. A.6. Número de becarios y de profesores y doctores visitantes con becas y ayudas obtenidas en convocatorias competitivas de ámbito nacional o comunitario en ese mismo periodo.2% A.7. Relación de convenios de colaboración del programa con empresas e instituciones nacionales o internacionales establecidos para la realización del programa. A.7. Relación de convenios de colaboración del programa con empresas e instituciones nacionales o internacionales establecidos para la realización del programa.2% A.8. Procedimiento para el seguimiento de los doctores egresados del programa en los últimos cinco años. A.8. Procedimiento para el seguimiento de los doctores egresados del programa en los últimos cinco años.2%

117 Criterios apartado B: PROPUESTA DE PROGRAMA PONDERACIÓN B.1. Articulación y coherencia de los contenidos y estructura general del programa: antecedentes, justificación de su necesidad, objetivos generales, metodología utilizada para el proceso de enseñanza-aprendizaje, y criterios de evaluación. B.1. Articulación y coherencia de los contenidos y estructura general del programa: antecedentes, justificación de su necesidad, objetivos generales, metodología utilizada para el proceso de enseñanza-aprendizaje, y criterios de evaluación.24% B.2. Afinidad de su contenido con las líneas de investigación de los profesores que los imparten. B.2. Afinidad de su contenido con las líneas de investigación de los profesores que los imparten.8% B.3. Historial docente e investigador de los profesores que imparten el programa. B.3. Historial docente e investigador de los profesores que imparten el programa.8% B.4. Participación de otros grupos o departamentos de la misma o de otras instituciones de Educación Superior tanto nacionales como extranjeras. B.4. Participación de otros grupos o departamentos de la misma o de otras instituciones de Educación Superior tanto nacionales como extranjeras.6% B.5. Estimación razonada del número de alumnos de otras universidades distinta de la responsable del programa. B.5. Estimación razonada del número de alumnos de otras universidades distinta de la responsable del programa.6% B.6. Financiación procedente de otras entidades públicas y privadas. B.6. Financiación procedente de otras entidades públicas y privadas.4% B.7. Informe de la Universidad o Institución que avale el programa. B.7. Informe de la Universidad o Institución que avale el programa.4%

118 ¡ Gracias por su atención ! Universidad de Granada