Evaluacin de la Calidad

Laurentino Salvador. Jos M. Osoro. Evaluacin de programas...

CONTENIDO:

1. Concepto y sistema de calidad

2. Modelos de calidad
3. Calidad y educacin
4. Enlaces a webs sobre calidad

2
 Qu es calidad?

Conjunto de cualidades que

constituyen la manera de ser de una
persona o cosa.

Conjunto de caractersticas de un producto

o servicio, que lo convierte en satisfactorio
para el cliente o consumidor.

3
Por qu es ahora ms necesaria la calidad?

Globalizacin.
Razones Clientes exigentes.
Externas
Competitividad.

Costes de mala calidad.

Razones
Implicacin del personal.
Internas
Nuevas tecnologas.

4
CALIDAD TOTAL:
LAS TRES CALIDADES CALIDAD QUE
DESEA EL
CLIENTE

INSATISFACCION
INEVITABLE

INSATISFACCION CALIDAD
EVITABLE AMENAZADA
SATISFACCIN
CALIDAD IDEAL CASUAL
SATISFACCION
PLENA
ESFUERZOS
INTILES DE SATISFACCIN TRABAJO
DISEO DEL TRABAJO REALIZADO
TIL PARA EL INUTILMENTE
CLIENTE

5
Cmo se consigue?

Logrando la satisfaccin de los clientes.

Con el apoyo incondicional de la direccin.

Con la participacin y cooperacin de todos.

Mejorando e innovando de forma continua.

Con la formacin permanente.

6
 MEJORA CONTINUA
Ciclo PDCA (rueda de Shewhart o de Deming)
Planificar, Desarrollar, Comprobar y Actuar

Check: Compruebe los resultados de su accin nivel de

calidad

A P Do: Desarrolle lo que planific

C D Act: Acte para modificar lo

que hace o para asegurar
los resultados con mayor
calidad
Plan: Planifique lo que va a realizar
Identifique los grupos de inters
tiempo
Analice sus necesidades o expectativas
Defina caractersticas para satisfacerlas
Disee un proceso adecuado

7
Del control de la calidad a la
excelencia organizacional

Excelencia
Normas UNE-EN
Gestin
ISO 9000:2000
Sistema

Proceso

Producto

8
 Qu es un sistema de calidad?

CONJUNTO DE ESTRUCTURAS DE LA ORGANIZACIN, DE

RESPONSABILIDADES, DE PROCEDIMIENTOS, DE PROCESOS
Y DE RECURSOS QUE SE ESTABLECEN PARA LLEVAR A CABO
LA GESTIN DE LA CALIDAD.

CONSISTE EN

LA DEFINICIN Y EJECUCIN DE UN MTODO DE

TRABAJO QUE ASEGURE QUE EL PRODUCTO O
SERVICIO CUMPLE CON UNAS ESPECIFICACIONES
PREVIAMENTE ESTABLECIDAS PARA SATISFACER LAS
NECESIDADES DEL CLIENTE.

9
Cmo implantar un sistema de calidad?

DARSE CUENTA (sensibilizacin cultura de la calidad).

DECISIN (ANTES FORMARSE E INFORMARSE).
COMPROMISO.
ELEGIR UN MODELO DE REFERENCIA:
ISO 9000:2000?.
BENCHMARKING DE UNA ORGANIZACIN SIMILAR
CONSIDERADA EXCELENTE?.
MODELO EUROPEO DE GESTIN DE LA CALIDAD TOTAL?.
ACTUACIN (SISTEMA; MTODO; OBJETIVOS; PLANIFICACIN;
ORGANIZACIN; CALENDARIO; PERSONAS Y MEDIOS).
CONTROL.
MEJORA CONTINUA. Contratos-programa y planes estratgicos

10
Funciones de los sistemas de calidad y mejora

Preparar los mecanismos para la acreditacin de

instituciones o programas.

Mejorar la docencia, la investigacin y la gestin.

Servir de instrumento para rendir cuentas

al gobierno y a la sociedad

Suministrar informacin pblica y transparente

al estudiante y al mercado laboral.

Operar como mecanismos para decidir una

financiacin diferencial de los centros.
11
12
Dos enfoques de la Calidad Total

MODELO ISO 9000 MODELO DE EXCELENCIA

ES UN SISTEMA PARA ES UNA ESTRATEGIA O MODELO

VERIFICAR LA CALIDAD DEL DE GESTIN DE UNA
PRODUCTO O SERVICIO ORGANIZACIN

CUALQUIER PROCESO DE IMPLANTACIN DE UN SISTEMA DE

CALIDAD, QUE NO IMPLIQUE LOS PRINCIPIOS DE LA CALIDAD
TOTAL, CORRE EL RIESGO DE QUEDARSE EN MERO GASTO

13
Modelo ISO 9000:2000

14
15
 Modelo Europeo de Gestin de la Calidad
Total (EFQM)

Gestin del Resultados en

Personal las personas

Poltica y Resultados en Resultados

Liderazgo Procesos
Estrategia los cliente claves

Alianzas y Resultados en
Recursos la sociedad

Agentes facilitadores Resultados

Innovacin y aprendizaje 16
EFQM

17
Evaluacin de la calidad
Debate
poltico
Control Evaluacin

Decisin Autorregulacin
sumatoria
Debate
tcnico
Cmo? Para qu?

Indicadores
De rendimiento Juicios de Decisin
Mejora y
expertos sumatoria
Apoyo a la
unidad 18
 Que no hay clientes propiamente dichos
Que la educacin tiene una importancia
relativa en muchos sectores
Que los productos finales son difusos
Que los procesos son variables
Que podemos contemplarlo (en
determinados niveles) como un servicio
pblico al margen de los resultados.

Jos M. Osoro - Dept. Educacin UC

19
 Comparacin PNECU-PCU y ANECA

PNECU-PCU ANECA
Objetivos Mejora continua Homologacin
Metodologa Cuantitativa y cualitativa Cuantitativa
Datos Evidencias: datos, Evidencias: indicadores y
opiniones contrastadas documentos
Aspectos a evaluar Dimensiones Criterios
Proceso Evaluacin interna y Externa
externa
Papel de los evaluadores cmplices de la mejora Auditores
Resultados Propuestas de mejora Informe Acreditacin
contratos-programa
Plan estratgico
Agencias responsables Agencias autonmicas ANECA MEC

20
Programa de Evaluacin Institucional

Etapas Agentes implicados Resultados

Autoevaluacin Comit de Autoevaluacin, Informe de

Unidad Tcnica, Comunidad autoevaluacin
Universitaria

Evaluacin Comit de Autoevaluacin, Informe de

Externa Unidad Tcnica, Comit de Evaluacin Externa
Evaluacin Externa,
Comunidad Universitaria

Comit de Autoevaluacin, Plan de Mejoras

Final Unidad Tcnica, Equipo de
Gobierno

Asesoramiento de la ANECA 21
Programa de Evaluacin Institucional
PLAZOS PARA LA EJECUCIN DEL PEI 2004-2005

Momentos clave del proceso Plazos Responsabilidad

Del 21 de
Fase de Autoevaluacin octubre al 31 Unidad evaluada
de marzo
Envo Informe de Autoevaluacin a la Hasta el 31 de
Unidad evaluada
ANECA marzo
Del 1 de abril Unidad evaluada-
Visitas de Evaluacin Externa
al 15 de mayo ANECA
Envo del informe de Evaluacin Antes del 15
ANECA
Externa de junio
Perodo para la realizacin de Del 15 de
comentarios al Informe de Evaluacin junio al 1 de Universidad
Externa, en su caso julio

Revisin del Informe de Evaluacin Del 1 de julio

Externa y realizacin de las hasta el 15 de ANECA
modificaciones oportunas, en su caso julio

Hasta el 15 de 22
Envo del Plan de Mejoras Universidad
noviembre
 Visin Global del Proceso
Fuentes de informacin

Miembros de la Comunidad Documentacin, Informes y

Universitaria estudios

FASE
Comit de Autoevaluacin
AUTOEVALUACIN
DIAGNSTICO DE LA SITUACIN ACTUAL DE LA TITULACI
Organizacin Recursos
Programa Recursos Proceso
de la Materiales Resultados
Formativo Humanos Formativo
Enseanza

Informe de Autoevaluacin

FASE
VISITA A LA TITULACIN
EVALUACIN
DEL COMIT EXTERNO
EXTERNA
Informe de Evaluacin Externa
Comit de Autoevaluacin
FASE
reas de Mejora
23
FINAL Plan de Mejoras
 Modelo de Evaluacin de la ANECA
- ESQUEMA DEL MODELO DE EVALUACIN -
OBJETIVOS
PROGRAMA FORMATIVO
PLANIFICACIN
DEL P.F. ORGANIZACIN DE LA ENSEANZA
COMUNICACIN Gestin de
Gestin de Gestin de
Y DIFUSIN recursoshorarios de
procesos
clase
Gestin plan de estudios (contenido, coherencia,
flexibilidad, factibilidad, revisin y actualizacin) Perfil de egreso: M
conocimientos y E
Proceso de captacin y competencias J
Proceso enseanza -aprendizaje
seleccin de alumnos O
R R
Metodologa Metodologa Prcticas E A
Perfil de ingreso: ALUMNO DE Movilidad
enseanza - evaluacin externas EGRESADO S
conocimientos NUEVO aprendizaje U C
y competencias INGRESO L O
Formacin integral T N
SOCIEDAD A T
D
Programas Programas Programas Programas Actividades
O N
de acogida apoyo al orientacin de accin formacin
aprendizaje profesional tutorial integral S U
A

Resultados Aulas
de I+D+I M
R R A Bibliotecas
H
E E T
U
C C E Espacios de trabajo alumnos
M
PDI U U R
A
R R I Espacios de trabajo RRHH
N
S S A
O
O O L Infraestructuras destinadas
PAS S
S S a prcticas externas
E 24
S Laboratorios, talleres y
espacios experimentales
 FUNDAMENTACIN
DE LOS JUICIOS DE VALOR

* Estadsticas de Gestin:
Alumnos, Profesores, Recursos, ....
* Documentos:
Planes de Estudio, Guas Acadmicas, Reglamentos,
Protocolos de exmenes, Actas rganos de gobierno,
Encuestas de opinin, memorias, estudios, ...
* Opiniones de implicados:
Direccin Centro/Departamentos, alumnos,
profesores, graduados, empleadores, ...
* Conocimiento del propio Comit

EVIDENCIA: Datos objetivos - Consenso intersubjetivo

25
 Contenido del Autoinforme
LO DESCRIPTIVO
1. Informacin objetiva (cuantitativa o cualitativa)
2. Informacin documentada basada en opiniones
miembros comunidad

LO VALORATIVO
3. Inferencias/juicios apoyados en datos y/o
documentacin. + / - EVIDENCIA
4. Inferencias/juicios sin apoyo en datos y/o
documentacin. + / - CONSENSO

26
 El proceso de acreditacin

ACREDITACIN DE LAS TITULACIONES

CRITERIOS - ANECA
1. Programa formativo: objetivos y plan de estudios
2. Organizacin
de la enseanza:
Direccin y planificacin
6. Resultados: Gestin y organizacin
del programa
de los egresados
en la sociedad
ACREDITACIN

5. Proceso formativo: 3. Recursos humanos:

Atencin al alumno y Personal acadmico
formacin integral PAS
Proceso enseanza-aprendizaje

4. Recursos materiales: 27
Aulas, espacios de trabajo, laboratorios, biblioteca
Protocolo para la elaboracin del IA

Descripcin de la situacin

1.1. Objetivos del programa formativo

El programa formativo tiene definidos sus objetivos entre los

que se encuentran los conocimientos y las capacidades que
los alumnos debe tener al concluir sus estudios.

28
Protocolo para la elaboracin del IA

Valoracin semicuantitativa

1. PROGRAMA FORMATIVO

A B C D EI

1.1. Objetivos del programa formativo

El programa formativo tiene definidos sus objetivos entre los

que se encuentran los conocimientos y las capacidades que los
alumnos deben tener al concluir sus estudios.

29
Protocolo para la elaboracin del IA

Fortalezas, debilidades
y propuestas de mejora

1. PROGRAMA FORMATIVO

FORTALEZAS DEBILIDADES PROPUESTAS DE MEJORA URGENCIA IMPORTANCIA

30
 Enlaces Web sobre calidad:
1.- Asociacin Espaola de la Calidad, www.aec.es
2.- European Foundation for Quality Management (EFQM). www.efqm.org
3.- International Standardizaron Organization (ISO), www.iso.ch
4.- Entidad Nacional de Acreditacin (ENAC). www.enac.es
5.- Asociacin Espaola de Normalizacin (AENOR). www.aenor.es
6.- Proyecto Norma de Calidad. www.ongconcalidad.org
7.- Comunidades autnomas:
Fundacin Vasca para la Calidad, www.esukalit.net
Fundacin Navarra para la Calidad, www.gnavajra.com
Fundacin Valenciana para la Calidad, http://turia.gva.es/fvq
Club Asturiano de Calidad, www.club-calidad.es
Institut Balear de Desenvolupament Industrial, www.idi.es
8.- Investors in People. www.investorsinpeople.com
9.- European Organization for Quality (EOQ). www.eoq.org
10.- TV Rheinland. www.tuv.es
11.- Bureau Veritas. www.bureauveritas.com
12.- Club de Gestin de la Calidad, http://www.clubcalidad.es/
13.- Instituto de la Calidad Turstica Espaola (ICTE). www.icte.com
14.- Madrid Excelente, www.madridexcelente.com
15.- Un buen glosario de temas de calidad lo encontrareis en www.qualityadvisor.com
16.- Observatorio de Calidad para los Servicios Pblicos, www.ocsp.arrakis.es
17.- European Society for Quality in Health Care. http://www.esqh.net/
18.- Fundaci Avedis Donabedian, www.fadg.org
19.- La pgina del proyecto de Responsabilidad Social. www.accountability.org
20.- La pgina del proyecto Sphere. www.sphereproject.org
21.- La pgina del proyecto de la ONU. www.unglobalcompact.org
22.- ANECA. www.aneca.es
23.- The European Network for Quality Assurance in Higher Education (ENQA). http://www.enqa.net/
24.- Instituto Nacional de evaluacin y calidad del sistema educativo. http://www.ince.mec.es/
25.- Consejo de Coordinacin Universitaria. http://www.mec.es/consejou/calidad/index.html
31