1 Laurentino Salvador. José M. Osoro. Evaluación de programas... Evaluación de la Calidad

2 2 CONTENIDO: 1.Concepto y sistema de calidad 2.Modelos de calidad 3.Calidad y educación 4.Enlaces a webs sobre calidad

3 3 Conjunto de características de un producto o servicio, que lo convierte en satisfactorio para el cliente o consumidor. ¿Qué es calidad? Conjunto de cualidades que constituyen la manera de ser de una persona o cosa.

4 4 ¿Por qué es ahora más necesaria la calidad? Razones Externas Razones Internas  Globalización.  Clientes exigentes.  Competitividad.  Costes de mala calidad.  Implicación del personal.  Nuevas tecnologías.

5 5 INSATISFACCION INEVITABLE CALIDAD IDEAL SATISFACCION PLENA SATISFACCIÓN DEL TRABAJO ÚTIL PARA EL CLIENTE INSATISFACCION EVITABLE ESFUERZOS INÚTILES DE DISEÑO CALIDAD AMENAZADA SATISFACCIÓN CASUAL TRABAJO REALIZADO INUTILMENTE CALIDAD QUE DESEA EL CLIENTE CALIDAD PROGRAMADA CALIDAD REALIZADA CALIDAD TOTAL: LAS TRES CALIDADES

6 6 Logrando la satisfacción de los clientes. Con la formación permanente. Con el apoyo incondicional de la dirección. Con la participación y cooperación de todos. Mejorando e innovando de forma continua. ¿Cómo se consigue?

7 7 tiempo nivel de calidad MEJORA CONTINUA Ciclo PDCA (rueda de Shewhart o de Deming) P Plan: Planifique lo que va a realizar Identifique los grupos de interés Analice sus necesidades o expectativas Defina características para satisfacerlas Diseñe un proceso adecuado D Do: Desarrolle lo que planificó C Check: Compruebe los resultados de su acción A Act: Actúe para modificar lo que hace o para asegurar los resultados con mayor calidad Planificar, Desarrollar, Comprobar y Actuar

8 8 Del control de la calidad a la excelencia organizacional Excelencia Gestión Sistema Proceso Producto Normas UNE-EN ISO 9000:2000

9 9 CONSISTE EN CONJUNTO DE ESTRUCTURAS DE LA ORGANIZACIÓN, DE RESPONSABILIDADES, DE PROCEDIMIENTOS, DE PROCESOS Y DE RECURSOS QUE SE ESTABLECEN PARA LLEVAR A CABO LA GESTIÓN DE LA CALIDAD. LA DEFINICIÓN Y EJECUCIÓN DE UN MÉTODO DE TRABAJO QUE ASEGURE QUE EL PRODUCTO O SERVICIO CUMPLE CON UNAS ESPECIFICACIONES PREVIAMENTE ESTABLECIDAS PARA SATISFACER LAS NECESIDADES DEL CLIENTE. ¿Qué es un sistema de calidad?

10 10 DARSE CUENTA (sensibilización “cultura de la calidad”). DECISIÓN (ANTES FORMARSE E INFORMARSE). COMPROMISO. ELEGIR UN MODELO DE REFERENCIA: ¿ISO 9000:2000?. ¿BENCHMARKING DE UNA ORGANIZACIÓN SIMILAR CONSIDERADA EXCELENTE?. ¿MODELO EUROPEO DE GESTIÓN DE LA CALIDAD TOTAL?. ACTUACIÓN (SISTEMA; MÉTODO; OBJETIVOS; PLANIFICACIÓN; ORGANIZACIÓN; CALENDARIO; PERSONAS Y MEDIOS). CONTROL. MEJORA CONTINUA. Contratos-programa y planes estratégicos ¿Cómo implantar un sistema de calidad?

11 11 Funciones de los sistemas de calidad y mejora Preparar los mecanismos para la acreditación de instituciones o programas. Mejorar la docencia, la investigación y la gestión. Servir de instrumento para rendir cuentas al gobierno y a la sociedad Suministrar información pública y transparente al estudiante y al mercado laboral. Operar como mecanismos para decidir una financiación diferencial de los centros.

12 12

13 13 ES UNA ESTRATEGIA O MODELO DE GESTIÓN DE UNA ORGANIZACIÓN MODELO ISO 9000 MODELO DE EXCELENCIA CUALQUIER PROCESO DE IMPLANTACIÓN DE UN SISTEMA DE CALIDAD, QUE NO IMPLIQUE LOS PRINCIPIOS DE LA CALIDAD TOTAL, CORRE EL RIESGO DE QUEDARSE EN MERO GASTO ES UN SISTEMA PARA VERIFICAR LA CALIDAD DEL PRODUCTO O SERVICIO Dos enfoques de la Calidad Total

14 14 Modelo ISO 9000:2000

15 15

16 16 Liderazgo Procesos Resultados claves Resultados claves Gestión del Personal Gestión del Personal Política y Estrategia Política y Estrategia Alianzas y Recursos Alianzas y Recursos Resultados en las personas Resultados en las personas Resultados en los cliente Resultados en los cliente Resultados en la sociedad Resultados en la sociedad Agentes facilitadores Resultados Innovación y aprendizaje Modelo Europeo de Gestión de la Calidad Total (EFQM)

17 17 EFQM

18 18 Evaluación de la calidad Debate político Control Evaluación Decisión sumatoria Autorregulación Debate técnico ¿Cómo? ¿Para qué? Indicadores De rendimiento Juicios de expertos Decisión sumatoria Mejora y Apoyo a la unidad

19 19

20 20 Comparación PNECU-PCU y ANECA PNECU-PCUANECA Objetivos Mejora continua Homologación Metodología Cuantitativa y cualitativa Cuantitativa Datos Evidencias: datos, opiniones contrastadas… Evidencias: indicadores y documentos Aspectos a evaluar Dimensiones Criterios Proceso Evaluación interna y externa Externa Papel de los evaluadores “cómplices” de la mejora Auditores ResultadosPropuestas de mejora  contratos-programa  Plan estratégico Informe Acreditación Agencias responsables Agencias autonómicas ANECA  MEC

21 21 Programa de Evaluación Institucional Etapas Etapas Autoevaluación Evaluación Externa Final Informe de autoevaluación Informe de Evaluación Externa Plan de Mejoras Comité de Autoevaluación, Unidad Técnica, Comunidad Universitaria Comité de Autoevaluación, Unidad Técnica, Comité de Evaluación Externa, Comunidad Universitaria Comité de Autoevaluación, Unidad Técnica, Equipo de Gobierno Agentes implicados Resultados Asesoramiento de la ANECA

22 22 PLAZOS PARA LA EJECUCIÓN DEL PEI 2004-2005 Momentos clave del procesoPlazosResponsabilidad Fase de Autoevaluación Del 21 de octubre al 31 de marzo Unidad evaluada Envío Informe de Autoevaluación a la ANECA Hasta el 31 de marzo Unidad evaluada Visitas de Evaluación Externa Del 1 de abril al 15 de mayo Unidad evaluada- ANECA Envío del informe de Evaluación Externa Antes del 15 de junio ANECA Período para la realización de comentarios al Informe de Evaluación Externa, en su caso Del 15 de junio al 1 de julio Universidad Revisión del Informe de Evaluación Externa y realización de las modificaciones oportunas, en su caso Del 1 de julio hasta el 15 de julio ANECA Envío del Plan de Mejoras Hasta el 15 de noviembre Universidad Programa de Evaluación Institucional

23 23 Visión Global del Proceso DIAGNÓSTICO DE LA SITUACIÓN ACTUAL DE LA TITULACIÓN RecursosHumanosRecursosMaterialesOrganización de la de la Enseñanza EnseñanzaProcesoFormativoProgramaFormativo Resultados Plan de Mejoras VISITA A LA TITULACIÓN DEL COMITÉ EXTERNO Informe de Autoevaluación Informe de Evaluación Externa Áreas de Mejora Comité de Autoevaluación Fuentes de información FASE AUTOEVALUACIÓN FASE AUTOEVALUACIÓN FASE EVALUACIÓN EXTERNA FASE FINAL FINAL Comité de Autoevaluación Miembros de la Comunidad Universitaria Documentación, Informes y estudios

24 24 COMUNICACIÓN Y DIFUSIÓN Y DIFUSIÓNCOMUNICACIÓN Modelo de Evaluación de la ANECA PLANIFICACIÓN DEL P.F. PLANIFICACIÓN OBJETIVOS Proceso de captación y selección de alumnos ALUMNO DE NUEVO INGRESO Perfil de ingreso: conocimientos y competencias PROGRAMA FORMATIVO ORGANIZACIÓN DE LA ENSEÑANZA Gestión plan de estudios (contenido, coherencia, flexibilidad, factibilidad, revisión y actualización) Proceso enseñanza -aprendizaje Metodología enseñanza - aprendizaje Metodología evaluación Programas de acción tutorial Prácticas externas Movilidad Formación integral Programas de acogida Programas apoyo al aprendizaje Programas orientación profesional Actividades formación integral RESULTADOSRESULTADOS EGRESADO SOCIEDAD Perfil de egreso: conocimientos y competencias RECURSOSRECURSOS HUMANOSHUMANOS RECURSOSRECURSOS MATERIALESMATERIALES Aulas Bibliotecas Espacios de trabajo alumnos Espacios de trabajo RRHH Infraestructuras destinadas a prácticas externas Laboratorios, talleres y espacios experimentales PDI PAS Resultados de I+D+I Gestión de horarios de clase - ESQUEMA DEL MODELO DE EVALUACIÓN - MEJORACONTÍNUA Gestión de recursos Gestión de procesos

25 25 FUNDAMENTACIÓN DE LOS JUICIOS DE VALOR * Estadísticas de Gestión: Alumnos, Profesores, Recursos,.... * Documentos: Planes de Estudio, Guías Académicas, Reglamentos, Protocolos de exámenes, Actas órganos de gobierno, Encuestas de opinión, memorias, estudios,... * Opiniones de implicados: Dirección Centro/Departamentos, alumnos, profesores, graduados, empleadores,... * Conocimiento del propio Comité EVIDENCIA: Datos objetivos - Consenso intersubjetivo

26 26 Contenido del Autoinforme LO DESCRIPTIVO 1. Información objetiva (cuantitativa o cualitativa) 2. Información documentada basada en opiniones miembros comunidad LO VALORATIVO 3. Inferencias/juicios apoyados en datos y/o documentación. + / - EVIDENCIA 4. Inferencias/juicios sin apoyo en datos y/o documentación. + / - CONSENSO LO DESCRIPTIVO 1. Información objetiva (cuantitativa o cualitativa) 2. Información documentada basada en opiniones miembros comunidad LO VALORATIVO 3. Inferencias/juicios apoyados en datos y/o documentación. + / - EVIDENCIA 4. Inferencias/juicios sin apoyo en datos y/o documentación. + / - CONSENSO

27 27 ACREDITACIÓN 1. Programa formativo: objetivos y plan de estudios 2. Organización de la enseñanza: de la enseñanza: Dirección y planificación Dirección y planificación Gestión y organización Gestión y organización 3. Recursos humanos: Personal académico Personal académico PAS PAS 4. Recursos materiales: Aulas, espacios de trabajo, laboratorios, biblioteca 5. Proceso formativo: Atención al alumno y Atención al alumno y formación integral formación integral Proceso enseñanza-aprendizaje Proceso enseñanza-aprendizaje ACREDITACIÓN DE LAS TITULACIONES CRITERIOS - ANECA ACREDITACIÓN DE LAS TITULACIONES CRITERIOS - ANECA 6. Resultados: del programa del programa de los egresados de los egresados en la sociedad en la sociedad El proceso de acreditación

28 28 Descripción de la situación El programa formativo tiene definidos sus objetivos entre los que se encuentran los conocimientos y las capacidades que los alumnos debe tener al concluir sus estudios. 1.1. Objetivos del programa formativo Protocolo para la elaboración del IA

29 29 Valoración semicuantitativa Protocolo para la elaboración del IA

30 30 Fortalezas, debilidades y propuestas de mejora Protocolo para la elaboración del IA

31 31 1.- Asociación Española de la Calidad, www.aec.eswww.aec.es 2.- European Foundation for Quality Management (EFQM). www.efqm.orgwww.efqm.org 3.- International Standardizaron Organization (ISO), www.iso.chwww.iso.ch 4.- Entidad Nacional de Acreditación (ENAC). www.enac.eswww.enac.es 5.- Asociación Española de Normalización (AENOR). www.aenor.eswww.aenor.es 6.- Proyecto Norma de Calidad. www.ongconcalidad.orgwww.ongconcalidad.org 7.- Comunidades autónomas: Fundación Vasca para la Calidad, www.esukalit.netwww.esukalit.net Fundación Navarra para la Calidad, www.gnavajra.comwww.gnavajra.com Fundación Valenciana para la Calidad, http://turia.gva.es/fvqhttp://turia.gva.es/fvq Club Asturiano de Calidad, www.club-calidad.eswww.club-calidad.es Institut Balear de Desenvolupament Industrial, www.idi.eswww.idi.es 8.- Investors in People. www.investorsinpeople.comwww.investorsinpeople.com 9.- European Organization for Quality (EOQ). www.eoq.orgwww.eoq.org 10.- TÜV Rheinland. www.tuv.eswww.tuv.es 11.- Bureau Veritas. www.bureauveritas.comwww.bureauveritas.com 12.- Club de Gestión de la Calidad, http://www.clubcalidad.es/http://www.clubcalidad.es/ 13.- Instituto de la Calidad Turística Española (ICTE). www.icte.comwww.icte.com 14.- Madrid Excelente, www.madridexcelente.comwww.madridexcelente.com 15.- Un buen glosario de temas de calidad lo encontrareis en www.qualityadvisor.comwww.qualityadvisor.com 16.- Observatorio de Calidad para los Servicios Públicos, www.ocsp.arrakis.eswww.ocsp.arrakis.es 17.- European Society for Quality in Health Care. http://www.esqh.net/http://www.esqh.net/ 18.- Fundació Avedis Donabedian, www.fadg.orgwww.fadg.org 19.- La página del proyecto de Responsabilidad Social. www.accountability.orgwww.accountability.org 20.- La página del proyecto Sphere. www.sphereproject.orgwww.sphereproject.org 21.- La página del proyecto de la ONU. www.unglobalcompact.orgwww.unglobalcompact.org 22.- ANECA. www.aneca.eswww.aneca.es 23.- The European Network for Quality Assurance in Higher Education (ENQA). http://www.enqa.net/ http://www.enqa.net/ 24.- Instituto Nacional de evaluación y calidad del sistema educativo. http://www.ince.mec.es/http://www.ince.mec.es/ 25.- Consejo de Coordinación Universitaria. http://www.mec.es/consejou/calidad/index.htmlhttp://www.mec.es/consejou/calidad/index.html Enlaces Web sobre calidad: