Sei sulla pagina 1di 57

La qualitat, garantia de millora.

Gua de evaluacin interna


de las enseanzas de formacin virtual
Gua de evaluacin de las titulaciones

Agncia per a la Qualitat del Sistema Universitari de Catalunya


Via Laietana, 28, 5. planta
08003 Barcelona

Autores: Joan Mateo Andrs, Albert Sangr Morer, Sebastin Rodrguez Espinar, Anna
Prades Nebot
Primera edicin: enero de 2007
Segunda edicin: octubre de 2007
Depsito legal: B-48.853-2007

Sumario
Presentacin.................................................................................................................................. 5
La metodologa de evaluacin ...................................................................................................... 6
El contenido de la evaluacin...................................................................................................... 11
La evaluacin interna .................................................................................................................. 14
El autoinforme.......................................................................................................................... 14
Los comits de evaluacin internos (CAI) ............................................................................... 15
Mecanismos de publicidad y participacin .............................................................................. 15
La elaboracin del informe: el protocolo de evaluacin .......................................................... 15
El proceso de evaluacin externa ............................................................................................... 21
Composicin de los comits de evaluacin externos (CAE)................................................... 21
La visita in situ ......................................................................................................................... 22
Estructura del informe externo................................................................................................. 23
Reaccin de la unidad (titulacin) evaluada............................................................................ 24
Los informes finales .................................................................................................................... 25
Protocolo de evaluacin .............................................................................................................. 27
0. El proceso de evaluacin interna..................................................................................... 29
1. Posicin estratgica de la titulacin................................................................................. 31
1.1. Posicin estratgica interna ...................................................................................... 31
1.2. Posicin estratgica externa ..................................................................................... 33
2. Programa de formacin.................................................................................................... 35
2.1. Definicin del perfil de formacin .............................................................................. 35
2.2. Adecuacin del programa de estudios ...................................................................... 37
3. Diseo de instruccin....................................................................................................... 39
3.1. Metodologa docente ................................................................................................. 39
3.2. Adecuacin de las actividades .................................................................................. 41
3.2. Organizacin de la enseanza.................................................................................. 43
3.4. Sistema de orientacin y tutora................................................................................ 45
3.5. Estructura tcnica dedicada a la instruccin ............................................................. 47

Gua de evaluacin interna de las enseanzas de formacin virtual. Titulaciones (2 edicin)

3.6. Sistemas de comunicacin interpersonal.................................................................. 49


4. Evaluacin de los aprendizajes ....................................................................................... 51
4.1. Sistema evaluativo .................................................................................................... 51
5. Resultados ....................................................................................................................... 53
5.1. Dimensin acadmica: resultados ............................................................................ 53
5.2. Dimensin profesional: resultados ............................................................................ 55
5.3. Dimensin personal: resultados ................................................................................ 57

Gua de evaluacin interna de las enseanzas de formacin virtual. Titulaciones (2 edicin)

Presentacin
La Agncia per a la Qualitat del Sistema Universitari de Catalunya (AQU Catalunya) tiene como
objetivos la evaluacin, acreditacin y certificacin de la calidad en el mbito de las
universidades y los centros de enseanza de educacin superior de Catalunya. Su misin es
impulsar la mejora de la calidad del sistema universitario cataln, en el marco del Espacio
europeo de educacin superior, a travs de sus actividades evaluativas.
La evaluacin institucional de la calidad de las universidades tiene dos objetivos principales:
promover la mejora de la calidad y proporcionar informacin vlida y objetiva del servicio que
las universidades prestan a la sociedad. La evaluacin combina, por lo tanto, dos finalidades:

Pretende ser una herramienta til para ayudar a las titulaciones o instituciones a gestionar
y mejorar la calidad de la formacin universitaria, es decir, para ayudar a producir cambios
significativos en el diseo de las titulaciones y en el proceso de enseanza-aprendizaje.

Pretende facilitar que se d mayor satisfaccin a las demandas de formacin de los


estudiantes y mejor respuesta a las demandas sociales, garantizando la eficacia y
eficiencia de las inversiones en enseanza superior, as como mejorar la calidad de la
informacin que se ofrece a la sociedad sobre el funcionamiento de su sistema de
educacin superior.

El principio fundamental que impregna los procesos evaluativos es que las universidades, en
uso de su autonoma, son las principales responsables de la calidad de la enseanza y su
aseguramiento. Por otro lado, los procesos de evaluacin parten del reconocimiento de que
son las propias instituciones las ms capacitadas para proveer informacin actualizada, fiable y
vlida sobre la calidad de sus procesos formativos.
La GUA DE EVALUACIN INTERNA DE LAS ENSEANZAS DE FORMACIN VIRTUAL ha sido elaborada
por expertos en formacin virtual y en metodologas de evaluacin. Consiste en la adaptacin
de la Gua de evaluacin de titulaciones empleada en el programa PRO-QU a las
peculiaridades de la formacin virtual. Hay que decir que la metodologa de evaluacin utilizada
en este programa cuenta ya con bastante tiempo de rodaje (en 2006 se han cumplido diez
aos de las primeras evaluaciones realizadas por AQU Catalunya) y que a lo largo de este
tiempo ha sufrido progresivas transformaciones. As pues, la gua que se presenta no slo se
fundamenta en los actuales instrumentos evaluativos de AQU Catalunya, sino que tambin
incorpora las especificaciones internacionales de evaluacin de este tipo de enseanzas.
En definitiva, la gua adaptada pretende ser fiel a los objetivos presentes en la primera
evaluacin: la orientacin a la mejora y la informacin a la sociedad, mediante metodologas
evaluativas pblicas y transparentes, a fin de estar en buenas condiciones para el cumplimiento
del objetivo de la Declaracin de Bolonia de alcanzar una dimensin europea del
aseguramiento de la calidad.

Gua de evaluacin interna de las enseanzas de formacin virtual. Titulaciones (2 edicin)

La metodologa de evaluacin
El modelo de evaluacin ha seguido un sistema basado en el modelo europeo, adaptado a la
cultura evaluativa del contexto universitario y social del pas. A continuacin se describen las
distintas fases del proceso de evaluacin y las dos unidades de anlisis previstas: la evaluacin
institucional y la evaluacin de las titulaciones.

El proceso de evaluacin
Las fases del proceso de evaluacin de la calidad son las siguientes:

1. Evaluacin interna
Se inicia con la recogida y sistematizacin de la informacin referida a la unidad objeto de
evaluacin (realidad). Esta informacin est compuesta por estadsticos, datos de gestin e
indicadores sobre los inputs, procesos y resultados de la actividad de la propia unidad. El
autoinforme del comit de evaluacin interno (CAI) integrar dicha informacin con las nuevas
observaciones, opiniones y valoraciones generadas a lo largo del proceso.
Hay que entender la evaluacin interna como un proceso de diagnstico, como un punto de
partida para detectar, del modo ms objetivo y exhaustivo posible, reas de excelencia, para
reconocerlas y potenciarlas, pero tambin para detectar reas susceptibles de ser mejoradas.

2. Evaluacin externa
Un comit de evaluacin externo (CAE) analiza el autoinforme y realiza una vista in situ a la
unidad evaluada. A partir de sus observaciones y de las informaciones, opiniones y
valoraciones recogidas durante el contacto con las diversas audiencias entrevistadas, emitir
un informe externo. Este informe ser sometido a la consideracin de la unidad evaluada, para
que haga llegar las oportunas alegaciones o consideraciones.
La evaluacin externa tiene por objetivo ayudar a la titulacin o institucin en su anlisis, es
decir, validar el diagnstico llevado a cabo por el CAI, as como colaborar en la identificacin de
posibles lneas de mejora de su calidad.

3. Informe de evaluacin
La sntesis ponderada y comprensiva del autoinforme y el informe externo da lugar al informe
definitivo de la unidad evaluada (titulacin), que deber ser objeto de difusin y publicidad.

Gua de evaluacin interna de las enseanzas de formacin virtual. Titulaciones (2 edicin)

Este informe debe tener un doble formato:

El destinado a la informacin externa (a la sociedad). Tomar como referente el informe


externo y ser elaborado por AQU Catalunya. Dicho informe ser sometido a la
consideracin de la titulacin y aprobado por la Comisin de Evaluacin de la Calidad de
AQU Catalunya. Su contenido formar parte del informe anual que hace pblico AQU
Catalunya.

El destinado a la comunidad de la titulacin y a la propia universidad. Corresponde al CAI


realizarlo a partir del autoinforme y del informe externo. Dicho informe contiene una sntesis
de la valoracin de las distintas dimensiones evaluadas, los puntos fuertes y dbiles y,
fundamentalmente, el plan de mejora de la titulacin.

4. Plan de mejora
Para que se complete el crculo hacia la mejora de la calidad, la evaluacin, como herramienta
fundamental de diagnstico, debe conducir a un plan de mejora.
Un plan de mejora es la propuesta de actuaciones, resultante del proceso de diagnstico
previo, que recoge y formaliza los objetivos de mejora y las correspondientes actuaciones
dirigidas a fortalecer los puntos fuertes y a resolver los dbiles, de manera priorizada y
temporizada.
El plan de mejora debe incluir el diseo de las acciones que se consideran pertinentes para
eliminar o aminorar las debilidades detectadas en la evaluacin. La explicitacin de los
objetivos, acciones e indicadores de seguimiento, as como de los responsables de ejecutarlos,
son algunas de las exigencias de un plan de mejora.1

Para ms detalles sobre este tema, vase el Marco general para el establecimiento, el seguimiento y la revisin de los

planes de mejora (AQU Catalunya, 2005) en < www.aqucatalunya.org>.

Gua de evaluacin interna de las enseanzas de formacin virtual. Titulaciones (2 edicin)

Esquema 1. Espiral de evaluacin de la calidad

5. Aplicacin
final

0. Realidad

Estadsticas
Datos
Indicadores

1. Informe
interno

4. Plan de
mejora
Observaciones
Opiniones
Valoraciones

2. Informe
externo

3. Informe final unidad

5. Seguimiento y evaluacin del plan de mejora


Esta fase permitir valorar los cambios reales de mejora de la calidad en la unidad evaluada.
Se inicia as un nuevo ciclo de evaluacin continua de la calidad en la unidad evaluada.

Gua de evaluacin interna de las enseanzas de formacin virtual. Titulaciones (2 edicin)

En suma, el proceso de evaluacin integra distintos planteamientos: evaluacin interna y


externa, evaluacin basada en juicios de expertos versus evaluacin basada en indicadores de
rendimiento, etc. (vase el cuadro 1).

Cuadro 1. Las principales caractersticas de la metodologa evaluativa de AQU


Catalunya

Combinacin de la evaluacin interna (autoinformes) con la evaluacin externa (expertos


externos). El informe de evaluacin interna es la evidencia clave a partir de la que se
desarrolla la evaluacin externa, que tiene por objetivo validar y ayudar a mejorar el
diagnstico realizado por la unidad evaluada, as como orientar y asesorar en las
propuestas de mejora planteadas.

Combinacin de indicadores de rendimiento (resultados) e indicadores de entrada y


proceso. Los indicadores de resultados toman como referencia los indicadores de entrada.
Por ejemplo, la valoracin sobre la adecuacin de los resultados acadmicos depender
del perfil de los estudiantes (nota de entrada, combinacin entre estudios y trabajo, etc.),
aunque tambin considerar aspectos sobre el proceso (calendario de evaluacin, tamao
de los grupos, estrategias empleadas, etc.). Al mismo tiempo, la funcin principal de los
indicadores de resultados dentro de la metodologa empleada es la de orientar sobre la
calidad de los procesos, puesto que ellos son los susceptibles de mejora y son el medio a
travs del cual es posible modificar los resultados.

Combinacin de informacin cuantitativa y cualitativa. Las evidencias que fundamentan el


anlisis son tanto de naturaleza cuantitativa (datos, indicadores, tasas, etc.) como
cualitativa (opiniones del comit, de expertos externos, de estudiantes, etc.). La
informacin cuantitativa es contextualizada e interpretada por los comits, mediante el
anlisis combinado de distintos tipos de evidencias.

Rendimiento de cuentas (accountability) y mejora de la calidad. Tal y como se ha sealado


en la presentacin, se combinan dos finalidades en la evaluacin: la informacin a la
sociedad y la continua mejora de la calidad.

Gua de evaluacin interna de las enseanzas de formacin virtual. Titulaciones (2 edicin)

La unidad de evaluacin
El proceso de evaluacin, tal y como se ha efectuado en otros proyectos como por ejemplo la
evaluacin de la transicin al mercado laboral, se ha estructurado en dos mbitos:
a) Uno centralizado, que incluye todos aquellos aspectos que son comunes a todas las
titulaciones (misin, visin, polticas de recursos humanos, etc.), haciendo especial
nfasis en las polticas y mecanismos de aseguramiento de la calidad, incluidos los
sistemas de informacin que deben sustentar dichos mecanismos.
Para evaluar estos aspectos se ha elaborado la Gua de evaluacin institucional.
b) Uno especfico de cada titulacin, en el que se concreta el funcionamiento de los
aspectos, polticas y mecanismos generales: adecuacin del perfil de formacin,
adecuacin del perfil y tipologas de profesorado, etc.
Para evaluar estos aspectos, en cada una de las titulaciones, se ha elaborado la Gua
de evaluacin de las titulaciones virtuales.
Consiguientemente, se han definido dos tipologas de comits: un comit institucional y comits
especficos para la evaluacin de las titulaciones.

Esquema 2. Las unidades de evaluacin

Evaluacin
especfica
Evaluacin
especfica

Evaluacin
especfica

Evaluacin
especfica

Evaluacin
institucional

Evaluacin
especfica

Evaluacin
especfica

Evaluacin
especfica
Evaluacin
especfica

Gua de evaluacin interna de las enseanzas de formacin virtual. Titulaciones (2 edicin)

10

El contenido de la evaluacin
La evaluacin institucional se organiza alrededor de tres grandes apartados (vase el cuadro
2):

La misin y la visin institucionales, donde se recogen los objetivos de la institucin.

La planificacin de recursos (inputs) prevista para alcanzar los objetivos. Es decir, el


anlisis de las polticas referidas a todos aquellos elementos que determinan el
potencial o la capacidad del sistema (alumnado, profesorado, etc.).

Los mecanismos de aseguramiento de la calidad incluyendo los sistemas de


informacin y su gestin para realizar un seguimiento del logro de los objetivos
previstos.

Cuadro 2. El contenido de la evaluacin institucional


1. Misin y visin institucionales
1.1. Misin institucional
1.2. Visin institucional
2. Capacidad del sistema
2.1. Alumnado
2.2. Profesorado
2.3. Infraestructuras
2.4. Relaciones externas
3. Mecanismos de aseguramiento de la calidad
3.1. Visin y misin institucionales
3.2. Capacidad del sistema: alumnado, profesorado, infraestructuras y relaciones externas
3.3. Posicin estratgica interna y externa
3.4. Perfil de formacin y programa de estudios
3.5. Diseo de la instruccin
3.6. Evaluacin de los aprendizajes
3.7. Resultados: acadmicos, profesionales y personales

Gua de evaluacin interna de las enseanzas de formacin virtual. Titulaciones (2 edicin)

11

Mientras que la Gua de evaluacin institucional versa sobre la definicin de objetivos y


polticas, junto con la valoracin de la relevancia de dichos objetivos, la Gua de evaluacin de
las titulaciones se centra en la valoracin de la adecuacin de las distintas polticas
institucionales, vistos los resultados de estos procesos.
La Gua de evaluacin de las titulaciones se organiza en cinco apartados (vase el cuadro 3):

En primer lugar, se analiza la potencialidad o fortaleza de la titulacin en relacin tanto con


la propia universidad como con otras titulaciones similares. En este anlisis se incluye la
adecuacin del perfil del alumnado y el profesorado a los objetivos previstos.

En segundo lugar, se considera su programa de formacin, es decir, los objetivos


formativos de la titulacin.

Seguidamente, se pasa a analizar el despliegue y funcionamiento del programa de


formacin: el diseo de instruccin (apartado 3) y la evaluacin de los aprendizajes
(apartado 4).

Y, por ltimo, se consideran los resultados alcanzados, teniendo en cuenta tanto la


adecuacin de los recursos (el perfil de los estudiantes, profesorado, infraestructuras...)
como el funcionamiento de los procesos de formacin.

Cuadro 3. El contenido de los informes de evaluacin de las titulaciones


1. Posicin estratgica de la titulacin
1.1. Posicin estratgica interna
1.2. Posicin estratgica externa
2. Programa de formacin
2.1. Definicin del perfil de formacin
2.2. Adecuacin del programa de estudios
3. Diseo de instruccin
3.1. Metodologa docente
3.2. Adecuacin de las actividades
3.3. Organizacin de la enseanza
3.4. Sistema de orientacin y tutora
3.5. Estructura tcnica dedicada a la instruccin
3.6. Sistemas de comunicacin interpersonal

Gua de evaluacin interna de las enseanzas de formacin virtual. Titulaciones (2 edicin)

12

4. Evaluacin de los aprendizajes


4.1. Sistema evaluativo
5. Resultados
5.1. Dimensin acadmica: resultados
5.2. Dimensin profesional: resultados
5.3. Dimensin personal: resultados

Gua de evaluacin interna de las enseanzas de formacin virtual. Titulaciones (2 edicin)

13

La evaluacin interna
El autoinforme
El autoinforme representa la pieza clave del modelo de evaluacin adoptado y la principal
evidencia del proceso de evaluacin externa. El autoinforme, para poder fundamentar un buen
plan de mejora, debe ser un diagnstico cuidadoso y objetivo. Debe cumplir, entre otros, los
siguientes requisitos:

Completo y riguroso: debe analizar y valorar los elementos considerados clave para la
realidad que se quiere evaluar y mejorar.

Basado en evidencias, puesto que es ms slido, ms objetivo, ms argumentado y


menos discutible.

Sistemtico y detallado con respecto al anlisis de las causas y, por lo tanto, de lo que
es necesario para afrontar las mejoras.

Equilibrado y objetivo, tanto en aspectos positivos como en aspectos a mejorar.

Compartido por los agentes o por las comunidades afectadas, para asegurar la
representatividad en el anlisis y, consiguientemente, su exhaustividad o la inclusin
de las distintas perspectivas.

La responsabilidad de la elaboracin del autoinforme corresponde al CAI. Este comit,


siguiendo las pautas de la gua, lo someter a informacin pblica, para ser validado por la
comunidad universitaria o la titulacin. Una vez validado, se pondr a disposicin del CAE.

Gua de evaluacin interna de las enseanzas de formacin virtual. Titulaciones (2 edicin)

14

Los comits de evaluacin internos (CAI)


Se han establecido dos tipologas de comits internos:
1. El CAI institucional, encargado de elaborar el informe de evaluacin interna
institucional. Este comit estar compuesto por nueve personas:

dos vicerrectores,

dos vicegerentes,

tres directores de estudios y

dos directores de programa.

2. El CAI de titulacin, encargado de elaborar los informes de evaluacin interna


siguiendo la Gua de evaluacin de las titulaciones. Este comit estar compuesto por
los siguientes perfiles:

el director de estudios,

los directores de programa,

dos profesores,

consultores de los estudios,

el administrador de los estudios y

un mnimo de un graduado de la UOC por cada titulacin.

Mecanismos de publicidad y participacin


Los procedimientos que se adopten deben permitir recoger la opinin de los distintos agentes y
estamentos de la organizacin. Asimismo, se emprendern acciones de informacin especfica
en las titulaciones a evaluar a fin de asegurar el conocimiento del proceso. La publicidad del
autoestudio y su envo a los rganos significativos (departamentos, comisiones, asociaciones
de estudiantes, servicios, etc.) son condiciones indispensables para la validacin interna del
proceso.

La elaboracin del informe: el protocolo de evaluacin


A continuacin se detallan las consideraciones tcnicas y metodolgicas que hay que tener
presentes a la hora de elaborar el autoinforme. El planteamiento y la estructura del proceso de
evaluacin pretenden hacer converger, en un mismo esquema de anlisis, las coincidencias y

Gua de evaluacin interna de las enseanzas de formacin virtual. Titulaciones (2 edicin)

15

discrepancias de los puntos de vista interno y externo, lo que determina el uso de un protocolo
igual tanto por el comit interno como por el comit externo.
El protocolo, tal y como puede verse en el esquema 3, se organiza de la siguiente manera:
a) En la pgina izquierda se encuentran las dimensiones a evaluar, para las que se
presenta una relacin de indicadores o elementos que configuran aspectos de calidad
de la dimensin analizada. Las valoraciones de esta parte se efectan en una escala
de 4 puntos (de muy favorable o muy adecuado a nada favorable o nada adecuado).
b) En la pgina derecha se incluyen los estndares que deben orientar el juicio evaluativo
del comit y una relacin de evidencias que podran sustentar las opiniones o
valoraciones efectuadas.

Los estndares son afirmaciones sobre el nivel y la calidad esperada de la


dimensin evaluada. De este modo se asegura que la evaluacin se basa en
criterios explcitos y pblicos.2

Las evidencias pueden ser los datos, documentos u opiniones recogidos de


distintos agentes, que basan, sustentan o justifican los juicios de valor que se
emiten.

Los estndares del protocolo se han elaborado a partir de las siguientes fuentes:
Por un lado, los estndares especficos para la formacin virtual: Council for Higher Education Accreditation
(CHEA), Institute for Higher Education Policy (IHEP) y The cooperative advancing in the effective use of
technology in Higher Education (WCET).
Por otro lado, los estndares de acreditacin de las titulaciones participantes en el proyecto Pruebas piloto de las
titulaciones en el Espacio europeo de educacin superior, y los estndares y directrices para el aseguramiento de
la calidad en el Espacio europeo de educacin superior (estndares para el aseguramiento interno de la calidad)
adoptados en la Declaracin de Bergen por los ministros responsables de educacin superior, y que a partir de
ahora guiarn la elaboracin de todas las metodologas de evaluacin/acreditacin en Europa.

Gua de evaluacin interna de las enseanzas de formacin virtual. Titulaciones (2 edicin)

16

Esquema 3. Organizacin del protocolo de evaluacin

Dimensin de
evaluacin

Pregunta
resumen

Estndares

Indicadores

Evidencias

Pgina derecha

Pgina izquierda

Con esta estructura se pretende introducir ms racionalidad en el proceso de evaluacin y


reducir la variabilidad de los criterios empleados en la emisin de juicios, tanto por los comits
internos como por los externos, a travs del establecimiento de datos y criterios de evaluacin
definidos y pblicos.

Gua de evaluacin interna de las enseanzas de formacin virtual. Titulaciones (2 edicin)

17

A continuacin se muestran y describen los distintos pasos en la elaboracin del informe:

Esquema 4. Pasos a seguir para cumplimentar el protocolo de evaluacin

Dimensin a evaluar

Pregunta clave
Paso 3

Paso 1

Paso 2

Paso 1: Valoracin de cada uno de los indicadores que configuran el apartado


A partir de los datos o evidencias disponibles para cada uno de los indicadores, el comit
interno3 hace una valoracin con alguno de los siguientes juicios:
a = muy positivo / muy adecuado / muy satisfactorio
b = positivo / adecuado / satisfactorio
c = poco positivo / poco adecuado / poco satisfactorio
d = nada positivo / nada adecuado / nada satisfactorio

El comit externo slo hace la valoracin de la pregunta resumen y no de cada uno de los indicadores de la

dimensin evaluada.

Gua de evaluacin interna de las enseanzas de formacin virtual. Titulaciones (2 edicin)

18

En el momento de decidir el juicio que describe mejor la realidad de la titulacin, hay que tener
en cuenta los siguientes referentes:

Los datos o evidencias ofrecidos. En caso de que sean datos, hay que tomar en
consideracin su evolucin y, cuando sea posible, compararlos con otros (por ejemplo,
datos de la titulacin en relacin con otras titulaciones del mismo mbito, etc.).

Los estndares sugeridos.

El criterio del propio comit o el validado por la comunidad evaluada como consecuencia
de un proceso de consulta ms o menos estructurado.

Paso 2: Visin comprensiva de la situacin


1. Valoracin de la calidad de la evidencia aportada:
Para cada uno de los aspectos o apartados evaluados, se especificar la disponibilidad y el
uso de la evidencia que ha servido de base para emitir los juicios del paso 1.
Asimismo, se valorar la suficiencia, pertinencia y adecuacin de la evidencia como
fundamento de la valoracin realizada.
2. Cambios significativos que se han constatado durante el ltimo quinquenio:
El carcter cclico del proceso evaluativo aconseja tomar en consideracin las variaciones
cambios y mejoras ms destacadas que se han producido durante el ltimo
quinquenio.
3. Comentarios/matizaciones a los juicios emitidos:
En este apartado hay que incluir todas las consideraciones que no han podido introducirse
en la valoracin de los distintos indicadores que describen la situacin de un determinado
aspecto o dimensin, por haberse tenido que ajustar a unos referentes o criterios
predeterminados.
4. Puntos fuertes ms significativos:
Este apartado recoge, de forma sinttica, aquellas situaciones, prcticas o realidades que
representan los puntos fuertes de la titulacin, haciendo especial nfasis en la posibilidad
de asegurar la vigencia o presencia a medio plazo.
5. Puntos dbiles ms significativos y posibles explicaciones de su presencia:
Del mismo modo, la sntesis de los puntos dbiles o deficiencias observadas, junto con las
hiptesis explicativas del porqu de la situacin, representa una etapa obligatoria si se
quieren llevar a cabo las oportunas acciones de mejora. Hay que tener presente que un
diagnstico asumido por la comunidad es un primer paso para aminorar el dficit.
6. Direccin de las posibles propuestas de mejora/cambio:
En este apartado, una vez visto el anlisis de puntos fuertes y dbiles, se proponen las
posibles lneas de actuacin que deberan adoptarse para resolver o aminorar las

Gua de evaluacin interna de las enseanzas de formacin virtual. Titulaciones (2 edicin)

19

debilidades detectadas. De esta forma puede valorarse un primer nivel de coherencia entre
la situacin presente y las estrategias propuestas para llegar a la situacin deseada.

Paso 3: Juicio global sobre el apartado evaluado


Los comits de evaluacin debern posicionarse, con una valoracin global, sobre cada uno de
los apartados que se consideran en la gua. De este modo se integran la especificidad
(indicadores) y la comprensividad (apartados), para poder generar una visin global del perfil
de la calidad de la titulacin. La tipologa de juicios propuestos es la resultante de la
combinacin de dos criterios: el de la fortaleza o debilidad de la situacin presente y el de la
actitud de la organizacin (titulacin o universidad) ante dicha situacin.

Gua de evaluacin interna de las enseanzas de formacin virtual. Titulaciones (2 edicin)

20

El proceso de evaluacin externa


La credibilidad y la validez del autoinforme realizado por la titulacin o la universidad deben ser
confirmadas por la evaluacin externa, llevada a cabo por un comit de expertos externos (peer
review) o CAE. Los orgenes de estos tipos de evaluaciones los encontramos en los comits de
acreditacin de programas, en los refrees de las revistas cientficas y en las asesoras de
fondos de investigacin.
Aunque vlidos, la fiabilidad de los juicios de los expertos est condicionada, en buena medida,
por las evidencias (informacin objetiva) aportadas en el autoinforme o recogidas por el propio
CAE, as como por el cumplimiento metdico de la Gua de evaluacin externa. Esta gua
seala que el objetivo general de la evaluacin externa es formular juicios de valor sobre el
diseo, la organizacin, el desarrollo de procesos y los resultados de la enseanza con relacin
a los objetivos de las unidades evaluadas, con el fin de estimar su calidad y proponer acciones
de mejora.
La evaluacin externa tiene dos objetivos:

Debe servir para el asesoramiento y la orientacin de las instituciones o titulaciones


evaluadas a fin de mejorar el nivel y la calidad de los programas de estudios y las
titulaciones asociadas.

Responde a la necesidad de ofrecer informacin independiente y rigurosa a los


estudiantes y a la sociedad en general, que comparten el inters en la buena calidad
de la educacin superior.

Composicin de los comits de evaluacin externos (CAE)


Composicin y perfil de los CAE
El CAE institucional estar compuesto como mnimo por cuatro personas: dos acadmicos,
un profesional y un metodlogo. Estas personas debern responder al siguiente perfil:

Un catedrtico con larga experiencia en docencia e investigacin y en gestin (de


instituciones universitarias), fundamentalmente en el sistema universitario cataln.

Un experto en la enseanza virtual de educacin superior, procedente de una universidad


extranjera de prestigio en el mbito de la formacin virtual.

Un profesional experto en la enseanza virtual fuera del mbito universitario, con


conocimientos y experiencia en la aplicacin de las tecnologas de la informacin y la
comunicacin.

Gua de evaluacin interna de las enseanzas de formacin virtual. Titulaciones (2 edicin)

21

Un metodlogo, con experiencia en la evaluacin de programas de formacin o en la


evaluacin de la calidad institucional de las universidades, que har de puente entre el
CAE institucional y los CAE de titulaciones.

Los CAE especficos de titulaciones incluirn los perfiles acadmico, profesional y de experto
en metodologa de evaluacin. A continuacin se describe el perfil de dichas figuras:

El perfil acadmico estar representado por personal docente e investigador de la


universidad con reconocido prestigio como profesor doctor, preferentemente externo al
sistema universitario cataln. Es recomendable que haya ocupado algn cargo de gobierno
de la universidad y, por lo tanto, que conozca la gestin universitaria. Es preferible que
tenga experiencia en procesos de evaluacin institucional.

El perfil profesional estar ocupado por graduados de la UOC. Debe ser un profesional con
experiencia en el campo laboral propio de la titulacin que se evala. Por su perfil, debe
poder aportar informacin sobre los nuevos requerimientos de la empresa en la formacin
de las personas tituladas o bien sobre la prctica profesional relacionada con las
correspondientes enseanzas.

El perfil del metodlogo estar constituido por personas con experiencia en la evaluacin
de programas de formacin o en la evaluacin de la calidad institucional de las
universidades, preferentemente con conocimientos sobre el mbito de formacin virtual.

Los miembros de los CAE son nombrados por la Direccin de AQU Catalunya, previo
conocimiento de las titulaciones o las universidades. Uno de los evaluadores tiene el cargo de
presidente del comit externo.

La visita in situ
Los expertos externos recibirn formacin sobre el campus virtual antes de la visita, para
aprovechar mejor el tiempo de las audiencias, y se darn contraseas para poder visitar dicho
campus antes de la visita fsica.
La duracin de la visita ser de dos das, y estar previamente concertada. Existe un intervalo
de al menos tres semanas entre la recepcin del autoinforme y la visita a la institucin o la
unidad a evaluar. Se inicia con un encuentro del CAE en la tarde del primer da, que servir
para que cada miembro haga una valoracin individual del autoinforme y para preparar los
contenidos que se tratarn con cada una de las diferentes audiencias con las que se reunir. El
segundo da se inician las audiencias con los distintos colectivos. A continuacin se detalla la
tipologa de audiencias de cada uno de los comits.
Audiencias del CAE institucional con:
1. el CAI institucional y/o el Consejo de Gobierno,
2. profesorado,

Gua de evaluacin interna de las enseanzas de formacin virtual. Titulaciones (2 edicin)

22

3. mbito tecnolgico,
4. comunicacin y gestin de los estudios y
5. directores de estudios.
Audiencias de los CAE de titulaciones con:
1. el CAI (presencial),
2. estudiantes (virtual),
3. colaboradores docentes: consultores y tutores (virtual),
4. graduados (presencial),
5. profesorado propio de la titulacin (presencial) y
6. responsables de la titulacin: directores de estudios y de programas (presencial).
En ambos casos la visita finaliza con un encuentro con el CAI en el que el CAE presenta de
forma oral un borrador de su informe.
Se recomienda que las audiencias virtuales se realicen con antelacin, a fin de facilitar al
mximo la participacin.

Estructura del informe externo


El informe externo de evaluacin se elaborar a partir del informe del CAE institucional. Tendr
los siguientes epgrafes:

Introduccin: objetivos, composicin del CAE, plan de trabajo, incidencias.

Valoracin del proceso de evaluacin interno.

Valoracin del CAE sobre cada uno de los apartados del protocolo, incluyendo una
justificacin del juicio valorativo (evidencias a partir de las que emite la
valoracin...).

Valoracin general: puntos fuertes y dbiles, conclusiones y recomendaciones.

Valoracin del proceso de evaluacin externo.

El informe externo que elabora el CAE tiene en cuenta el informe externo institucional y el
autoinforme a nivel de titulaciones. Por ejemplo, el apartado de resultados se iniciar con el
anlisis del CAE institucional sobre la planificacin y funcionamiento de los mecanismos de
aseguramiento de la calidad con respecto a los resultados, y, seguidamente, se proceder a la
valoracin de si los resultados son en la prctica satisfactorios para cada una de las
titulaciones evaluadas.

Gua de evaluacin interna de las enseanzas de formacin virtual. Titulaciones (2 edicin)

23

Reaccin de la unidad (titulacin) evaluada


El proceso de evaluacin institucional se caracteriza por su transparencia. As, la universidad
tiene la posibilidad de matizar el informe externo. Esto no quiere decir que deba existir un
acuerdo absoluto entre ambos comits, sino que se establece el mecanismo formal para que
quede constancia de las argumentaciones valorativas.
Una vez finalizada esta etapa, el CAE considerar definitivo su informe y se cerrar la etapa de
evaluacin externa.

Gua de evaluacin interna de las enseanzas de formacin virtual. Titulaciones (2 edicin)

24

Los informes finales


La universidad evaluada, si lo considera oportuno, puede elaborar un informe para su
comunidad, con las siguientes caractersticas:

Corresponde al CAI elaborarlo a partir del autoinforme y del informe externo. Este informe
contiene una sntesis de la valoracin de las distintas dimensiones, as como los puntos
fuertes y dbiles y, fundamentalmente, el plan de mejora de la titulacin/estudios o de
la institucin en general.

Este informe ser ampliamente divulgado entre los miembros de la comunidad y se dirigir
al comit de calidad de la universidad. As, el informe cumple con las siguientes funciones:

Rendir cuentas sobre el desarrollo y los resultados de la evaluacin ante un rgano


superior.

Garantizar el compromiso de la comunidad de la titulacin para realizar las acciones de


mejora que el informe propone.

Garantizar el compromiso y apoyo de la institucin a las propuestas de mejora.

Por su parte, AQU Catalunya elaborar un informe destinado a la informacin externa (a la


sociedad), que tomar como referente el informe externo de evaluacin. Este informe ser
sometido a la consideracin de los estudios o la institucin evaluados y aprobado por la
Comisin de Evaluacin de la Calidad. Su contenido formar parte del informe anual de
evaluacin que AQU Catalunya hace pblico.

Gua de evaluacin interna de las enseanzas de formacin virtual. Titulaciones (2 edicin)

25

Protocolo de evaluacin
Escala de valoracin:
a)

Muy positivo / muy adecuado / muy satisfactorio / muy bien

b)

Positivo / adecuado / satisfactorio / bien

c)

Poco positivo / poco adecuado / poco satisfactorio / poco

d)

Nada positivo / nada adecuado / nada satisfactorio / nada

Gua de evaluacin interna de las enseanzas de formacin virtual. Institucional (2 edicin)

27

0. El proceso de evaluacin interna


En resumen:
Es positivo el proceso de evaluacin interna de la titulacin?
Muy positivo

Positivo

Poco positivo

Nada positivo

Indicadores:
* Vase la escala de valoracin en la portada del protocolo.

0.1. Actitud de la comunidad de la titulacin respecto al proceso


de evaluacin
0.2. Apoyo y colaboracin de la unidad tcnica de evaluacin
0.3. Apoyo y colaboracin de los rganos de gobierno de la
universidad
0.4. Proceso interno de elaboracin del informe
0.5. Acciones de difusin y fomento de la participacin en el
proceso de evaluacin
0.6. Nivel de respuesta de la comunidad en el proceso
0.7. Valoracin global del informe interno
1.
2.
3.
4.
5.
6.

Valoracin de la calidad de la evidencia aportada


Cambios significativos en relacin con el anterior proceso de evaluacin
Comentarios/matizaciones sobre las valoraciones de los indicadores
Puntos fuertes ms significativos
Puntos dbiles ms significativos y posibles explicaciones de su presencia
Direccin de las posibles propuestas de mejora/cambio

NOTA: Hay que detallar la composicin del comit de evaluacin interno, as como el nmero
de reuniones y el calendario de trabajo.

Gua de evaluacin interna de las enseanzas de formacin virtual. Institucional (2 edicin)

29

1. Posicin estratgica de la titulacin


1.1.

Posicin estratgica interna

En resumen:
Es favorable la posicin estratgica interna de la titulacin?
Muy favorable

Favorable

Poco favorable

Nada favorable

Indicadores:
* Vase la escala de valoracin en la portada del protocolo.

1.1.1. Grado de definicin y documentacin de la propuesta


formativa y adecuacin a la misin y la visin institucionales
1.1.2. Adecuacin del perfil de los estudiantes a la misin y la
visin de la titulacin
1.1.3. Posicin de la titulacin respecto al nmero de
estudiantes total en relacin con las dems titulaciones de la
universidad
1.1.4. Posicin de la titulacin respecto a la adecuacin del perfil
del profesorado a las necesidades especficas de las
enseanzas virtuales
1.1.5. Posicin de la titulacin respecto al nmero de
profesorado propio
1.1.6. Posicin de la titulacin respecto a la vinculacin
profesional del profesorado colaborador (adecuacin del perfil
profesionalizador de la titulacin)
1.1.7. Percepcin del grado de apoyo institucional
1. Valoracin de la calidad de la evidencia aportada
2. Cambios significativos que se han constatado durante el ltimo quinquenio
3. Comentarios/matizaciones sobre las valoraciones de los indicadores
4. Puntos fuertes ms significativos
5. Puntos dbiles ms significativos y posibles explicaciones de su presencia
6. Direccin de las posibles propuestas de mejora/cambio

Gua de evaluacin interna de las enseanzas de formacin virtual. Institucional (2 edicin)

30

1. Posicin estratgica de la titulacin


1.1. Posicin estratgica interna
Estndares
La situacin de fortaleza de la titulacin dentro de la institucin universitaria puede deberse al
claro encaje de la propuesta con la misin y la visin institucionales, al nmero y caractersticas
de los estudiantes matriculados, al nmero y caractersticas del profesorado propio, y al grado
de apoyo institucional recibido.

Evidencias

Estudios de los perfiles de los estudiantes de nueva entrada, as como de los estudiantes
matriculados.

En cuanto a la cantidad y calidad de los estudiantes, las tablas 1a, 1b, 2 y 3 permiten que
el CAI disponga de evidencias oferta, demanda, estudiantes de nuevo acceso,
estudiantes totales matriculados para situar la titulacin en una posicin de ms o menos
fortaleza, de acuerdo con la trayectoria evolutiva y con la situacin respecto al resto de
titulaciones de la universidad y, en especial, respecto a otras titulaciones iguales o afines.

Documentacin explcita de justificacin del programa de acuerdo con la misin


institucional.

Plantilla de profesorado (vase la tabla 10).

Gua de evaluacin interna de las enseanzas de formacin virtual. Institucional (2 edicin)

31

1.2.

Posicin estratgica externa

En resumen:
Es favorable la posicin estratgica externa de la titulacin?
Muy favorable

Favorable

Poco favorable

Nada favorable

Indicadores:
* Vase la escala de valoracin en la portada del protocolo.

1.2.1. Equiparacin de la propuesta formativa a otras propuestas


formativas de universidades de reconocido prestigio
1.2.2. Importancia del nmero de estudiantes de la titulacin en
relacin con el de otras universidades que imparten la misma
enseanza
1.2.3. Equiparacin de la calidad de los estudiantes de la
titulacin a la de otros estudiantes de la misma titulacin de
otras universidades
1.2.4. Equiparacin de la tipologa del profesorado (propio y
vinculado profesionalmente) a la establecida en otras
universidades de reconocido prestigio y que imparten la misma
enseanza a distancia
1.2.5. Equiparacin de la ratio profesores asignados por
estudiante en la enseanza a la ratio de otras universidades de
reconocido prestigio y que imparten la misma enseanza a
distancia
1.2.6. Grado de participacin del profesorado de la titulacin en
reconocidas redes profesionales y cientficas
1.2.7. Percepcin de la proyeccin de los graduados en el
contexto socioeconmico (masa crtica)
1.2.8. Percepcin de la titulacin en cuanto al grado de apoyo
social y poltico
1. Valoracin de la calidad de la evidencia aportada
2. Cambios significativos que se han constatado durante el ltimo quinquenio
3. Comentarios/matizaciones sobre las valoraciones de los indicadores
4. Puntos fuertes ms significativos
5. Puntos dbiles ms significativos y posibles explicaciones de su presencia
6. Direccin de las posibles propuestas de mejora/cambio

Gua de evaluacin interna de las enseanzas de formacin virtual. Institucional (2 edicin)

32

1.2. Posicin estratgica externa


Estndares
La titulacin presenta una posicin estratgica externa fuerte toda vez que su propuesta
formativa, la cantidad y perfil de los estudiantes, y la tipologa, volumen y perfil del profesorado
son comparables a los de otras propuestas de enseanzas a distancia de reconocido prestigio.
El profesorado de la titulacin participa en redes profesionales y cientficas de reconocido
prestigio, tanto nacionales como internacionales.

Evidencias
Documentacin:

Estudios comparativos con otras propuestas formativas, principalmente con enseanzas a


distancia similares.

Anlisis cuantitativos sobre el nmero de alumnos matriculados en la titulacin en distintas


universidades que imparten la misma enseanza, principalmente a distancia.

Estudios comparativos sobre la tipologa de los estudiantes de la titulacin en distintas


universidades que imparten la misma enseanza, principalmente a distancia.

Anlisis comparativos entre universidades sobre el nmero de profesores asignados a esta


enseanza a distancia.

Estadsticas:

Nmero de doctores, licenciados y diplomados existentes entre el profesorado de la


titulacin.

Presencia del profesorado en reconocidas redes profesionales y cientficas.

Nmero de trabajos del profesorado presentados en publicaciones de reconocido prestigio.

Nmero de trabajos del profesorado sobre metodologas aplicadas a la enseanza a


distancia, presentadas en publicaciones de prestigio.

Anlisis comparativos con los resultados de otras universidades.

Gua de evaluacin interna de las enseanzas de formacin virtual. Institucional (2 edicin)

33

2. Programa de formacin
2.1.

Definicin del perfil de formacin

En resumen:
Es satisfactoria la definicin del perfil de formacin?
Muy satisfactoria

Satisfactoria

Poco satisfactoria

Nada satisfactoria

Indicadores:
* Vase la escala de valoracin en la portada del protocolo.

2.1.1. Grado de desarrollo de la estructura del perfil de


formacin
(competencias
especficas
acadmicas
y
profesionales y competencias transversales)
2.1.2. Uso de referentes acadmicos y profesionales de mbito
nacional e internacional
2.1.3. Grado de adecuacin del perfil de formacin a las
demandas acadmicas y profesionales
2.1.4. Participacin de los distintos agentes internos y externos
en la definicin del perfil
2.1.5. Grado de conocimientos y consenso de la comunidad
universitaria en relacin con el perfil
2.1.6. Pertinencia de los objetivos institucionales de la titulacin
en relacin con el perfil de formacin explicitado
1. Valoracin de la calidad de la evidencia aportada
2. Cambios significativos que se han constatado durante el ltimo quinquenio
3. Comentarios/matizaciones sobre las valoraciones de los indicadores
4. Puntos fuertes ms significativos
5. Puntos dbiles ms significativos y posibles explicaciones de su presencia
6. Direccin de las posibles propuestas de mejora/cambio

Gua de evaluacin interna de las enseanzas de formacin virtual. Institucional (2 edicin)

34

2. Programa de formacin
2.1. Definicin del perfil de formacin
Estndares

El perfil de formacin est definido claramente en trminos competenciales.

El perfil de formacin incluye las competencias acadmico-cientficas, profesionales y


transversales que deben desarrollarse en los estudiantes.

La adecuacin de las competencias y objetivos del perfil de formacin a las demandas


profesionales est explcitamente analizada y establecida.

Los mecanismos de participacin de los agentes internos y externos estn establecidos en


la definicin del perfil.

Los mecanismos de difusin del perfil de formacin en la comunidad universitaria estn


establecidos en la definicin del perfil.

Evidencias

Existencia documentada de estudios sobre la definicin del perfil de formacin de la


titulacin.

Existencia documentada de anlisis sobre las competencias ms adecuadas al perfil de


formacin.

Anlisis especficos de derivacin de los objetivos formativos ms importantes respecto a


las competencias y de adecuacin al perfil de formacin.

Existencia de procedimientos establecidos de participacin de los distintos agentes internos


y externos en la definicin del perfil.

Existencia de procedimientos establecidos de revisin y actualizacin del perfil de


formacin y de su incidencia en el programa de estudios.

Gua de evaluacin interna de las enseanzas de formacin virtual. Institucional (2 edicin)

35

2.2.

Adecuacin del programa de estudios

En resumen:
Es adecuado el programa de estudios al perfil de formacin?
Muy adecuado

Adecuado

Poco adecuado

Nada adecuado

Indicadores:
* Vase la escala de valoracin en la portada del protocolo.

2.2.1. Adecuacin del grado de coherencia entre el programa de


estudios y el perfil de formacin
2.2.2. Consistencia interna de la estructura del programa de
estudios y coherencia con el perfil de formacin
2.2.3. Constancia, en el programa de estudios, de las
actividades orientadas al desarrollo de las competencias
previstas en el perfil de formacin
2.2.4. Coherencia de los contenidos, actividades y metodologas
de los programas de las asignaturas con el programa de
estudios
2.2.5. Adecuacin del tiempo establecido en el programa de
estudios para el desarrollo de las actividades
2.2.6. Coherencia entre los programas de las asignaturas de un
mismo programa de estudios
2.2.7. Existencia de programas de estudios y de programas de
las asignaturas documentados y pblicos
2.2.8. Grado de satisfaccin del profesorado respecto al
programa de formacin
2.2.9. Grado de satisfaccin del alumnado respecto al programa
de formacin
1. Valoracin de la calidad de la evidencia aportada
2. Cambios significativos que se han constatado durante el ltimo quinquenio
3. Comentarios/matizaciones sobre las valoraciones de los indicadores
4. Puntos fuertes ms significativos
5. Puntos dbiles ms significativos y posibles explicaciones de su presencia
6. Direccin de las posibles propuestas de mejora/cambio

Gua de evaluacin interna de las enseanzas de formacin virtual. Institucional (2 edicin)

36

2.2. Adecuacin del programa de estudios


Estndares

El programa de estudios est concretado y documentado.

El programa de estudios est estructurado a partir de los objetivos derivados del perfil de
formacin.

El programa de estudios se orienta al desarrollo de las competencias asociadas al perfil de


formacin.

Los programas de las asignaturas son coherentes entre ellos y con el programa de
estudios.

La institucin tiene documentados y son pblicos los programas de estudios y de las


asignaturas.

Evidencias

Existencia de documentacin explcita sobre el programa de estudios.

Existencia documentada de los distintos programas de las asignaturas.

Especificacin detallada de los objetivos orientadores y de las competencias que deben


desarrollarse en el programa de estudios.

Especificacin en los programas de las asignaturas de la forma de abordar el desarrollo de


las competencias.

Existencia documentada de procedimientos para el anlisis de la satisfaccin del


profesorado respecto al programa de estudios.

Existencia documentada de procedimientos para el anlisis de la satisfaccin del alumnado


respecto al programa de estudios.

Existencia documentada de procedimientos para el anlisis de la satisfaccin de los


graduados respecto al programa de estudios.

Existencia documentada de procedimientos reglamentados de anlisis de la coherencia de


los programas de las asignaturas con el programa de estudios.

Existencia documentada de procedimientos reglamentados de anlisis de la coherencia


entre las distintas asignaturas incluidas en el marco del programa.

Gua de evaluacin interna de las enseanzas de formacin virtual. Institucional (2 edicin)

37

3. Diseo de instruccin
3.1.

Metodologa docente

En resumen:
Es adecuada la metodologa docente en cuanto a la naturaleza de la enseanza y a las
caractersticas de las enseanzas a distancia?
Muy adecuada

Adecuada

Poco adecuada

Nada adecuada

Indicadores:
* Vase la escala de valoracin en la portada del protocolo.

3.1.1. Adecuacin de la metodologa a los objetivos docentes,


especialmente a los de carcter competencial
3.1.2. Concrecin de los sistemas de trabajo en equipo,
pensando en el desarrollo de la programacin por competencias
3.1.3. Adecuacin de la metodologa a las caractersticas de las
enseanzas a distancia
3.1.4. Existencia de una metodologa que aplica los recursos
docentes ms apropiados de acuerdo con la naturaleza de la
enseanza
3.1.5. Adecuacin de los recursos de aprendizaje empleados a
las caractersticas de las enseanzas a distancia

1. Valoracin de la calidad de la evidencia aportada


2. Cambios significativos que se han constatado durante el ltimo quinquenio
3. Comentarios/matizaciones sobre las valoraciones de los indicadores
4. Puntos fuertes ms significativos
5. Puntos dbiles ms significativos y posibles explicaciones de su presencia
6. Direccin de las posibles propuestas de mejora/cambio

Gua de evaluacin interna de las enseanzas de formacin virtual. Institucional (2 edicin)

38

3. Diseo de instruccin
3.1. Metodologa docente
Estndares

La metodologa docente se adeca a los objetivos docentes, especialmente teniendo en


cuenta los nuevos planteamientos orientados al desarrollo competencial.

La metodologa docente se adeca a las caractersticas de las enseanzas a distancia.

Los recursos de aprendizaje se adecan a la metodologa propuesta para la consecucin


de los objetivos formativos.

Los recursos de aprendizaje se adecan a la metodologa propuesta en las enseanzas a


distancia.

Evidencias

Existencia de procedimientos y guas metodolgicas para la prctica docente adecuada a


la enseanza virtual.

Estudios efectuados sobre la calidad y buen funcionamiento de las guas.

ndices de la opinin del profesorado respecto a la metodologa docente empleada.

ndices de satisfaccin del estudiantado respecto a la metodologa docente empleada.

Procedimientos especficos de revisin de la metodologa docente.

Planes especficos de innovacin metodolgica.

Gua de evaluacin interna de las enseanzas de formacin virtual. Institucional (2 edicin)

39

3.2.

Adecuacin de las actividades

En resumen:
Son adecuadas las actividades propuestas en cuanto al perfil de formacin y a las
caractersticas de las enseanzas a distancia?
Muy adecuadas

Adecuadas

Poco adecuadas

Nada adecuadas

Indicadores:
* Vase la escala de valoracin en la portada del protocolo.

3.2.1. Grado de adecuacin global del conjunto de actividades


que figuran en el plan docente de la enseanza al desarrollo
competencial profesional de los alumnos
3.2.2. Grado de adecuacin de las actividades formativas a las
caractersticas propias de las enseanzas a distancia
3.2.3. Grado de adecuacin del tiempo asignado al desarrollo de
las actividades formativas
3.2.4. Grado de adecuacin de las actividades de evaluacin
programadas al modelo de desarrollo competencial
3.2.5. Grado de adecuacin de las actividades de evaluacin a
las caractersticas de las enseanzas a distancia
3.2.6. Calidad de los recursos de aprendizaje dedicados a las
actividades de aprendizaje
3.2.7. Grado de adecuacin del PFC/prcticum a los objetivos
de aprendizaje
3.2.8. Grado de orientacin hacia el mundo profesional del
PFC/prcticum
3.2.9. Grado de valoracin del desarrollo del proceso
(organizacin, orientacin y supervisin) en el marco del
PFC/prcticum
3.2.10. Grado de adecuacin de la evaluacin de los estudiantes
en la realizacin del PFC/prcticum
3.2.11. Grado de satisfaccin de los estudiantes con el
PFC/prcticum
3.2.12. Grado de satisfaccin del profesorado con el
PFC/prcticum
PFC: proyecto final de carrera

1. Valoracin de la calidad de la evidencia aportada


2. Cambios significativos que se han constatado durante el ltimo quinquenio
3. Comentarios/matizaciones sobre las valoraciones de los indicadores
4. Puntos fuertes ms significativos
5. Puntos dbiles ms significativos y posibles explicaciones de su presencia
6. Direccin de las posibles propuestas de mejora/cambio

Gua de evaluacin interna de las enseanzas de formacin virtual. Institucional (2 edicin)

40

3.2. Adecuacin de las actividades


Estndares
Las actividades generales incluidas en el plan docente de la enseanza estn diseadas
pensando en el desarrollo competencial profesional.
Las actividades planificadas en los planes docentes de las asignaturas facilitan el
desarrollo de las competencias acadmico-cientficas y profesionales asociadas a las
asignaturas.
Las actividades formativas se adecan a las caractersticas de las enseanzas a distancia.
Los tiempos programados son apropiados para el desarrollo de las actividades formativas.
Los entornos tecnolgicos son adecuados para el desarrollo de las actividades formativas.
Las actividades de evaluacin son consistentes con el modelo de desarrollo competencial.
Las actividades de evaluacin estn diseadas de acuerdo con las caractersticas de las
enseanzas a distancia.
Existen sistemas de trabajo en equipo para la programacin de actividades de desarrollo
competencial.
Los recursos de aprendizaje diseados que soportan las actividades de aprendizaje son
suficientes y adecuados a las enseanzas a distancia.
Los PFC/prcticums son evaluados de forma colegiada con la participacin de profesores y
expertos profesionales.
Los evaluadores y estudiantes cuentan con criterios claros sobre la evaluacin de los
PFC/prcticums, entre los que figuran la valoracin del logro de determinadas
competencias especficas y transversales de la enseanza.
La oferta de plazas y proyectos es coherente y consistente con los objetivos de la
enseanza.
El estudiantado es adecuadamente orientado en la eleccin del PFC/prcticum.
El estudiante informa peridicamente del desarrollo del PFC/prcticum y recibe
asesoramiento del profesorado sobre el mismo.
Evidencias
Existencia de documentacin sobre el plan docente de la enseanza.
Existencia de documentacin sobre los planes docentes de las asignaturas.
Muestreo de modelos de actividades formativas.
Muestreo de modelos de actividades evaluativas.
Existencia de estudios sobre la adecuacin de los entornos tecnolgicos a la naturaleza y
tipologa de las actividades.
Existencia de anlisis sobre la temporalizacin del desarrollo de las actividades formativas.
Justificacin del carcter presencial de las actividades que lo requieran.
Documentacin del sistema organizativo del funcionamiento del trabajo de los estudiantes.
Procedimientos establecidos para la creacin, revisin y actualizacin de las asignaturas.
Guas para la elaboracin de recursos de aprendizaje en soporte digital.
Procedimientos existentes de revisin y actualizacin de los recursos de aprendizaje.
Manual para el diseo, desarrollo, supervisin y evaluacin de los PFC/prcticums.
Existencia de documentacin sobre la poltica del PFC/prcticum.
Procedimientos de anlisis de la satisfaccin del alumnado y la opinin del profesorado en
cuanto al PFC/prcticum.
Procedimientos de anlisis de la orientacin profesional del PFC/prcticum.

Gua de evaluacin interna de las enseanzas de formacin virtual. Institucional (2 edicin)

41

3.3.

Organizacin de la enseanza

En resumen:
Es adecuada la organizacin de la enseanza en cuanto a las caractersticas propias de los
sistemas no presenciales?
Muy adecuada

Adecuada

Poco adecuada

Nada adecuada

Indicadores:
* Vase la escala de valoracin en la portada del protocolo.

3.3.1. Grado de adecuacin de la organizacin de la enseanza


para dar respuesta a las caractersticas de los estudiantes y a
su aprendizaje
3.3.2. Justificacin de la incorporacin de actividades formativas
presenciales, segn su importancia y las dificultades inherentes
a su desarrollo virtual
3.3.3. Sistema de comunicacin para dar a conocer el
funcionamiento del sistema a los nuevos estudiantes
3.3.4. Mecanismos de apoyo continuo al alumnado
3.3.5. Mecanismos para conocer las necesidades del alumnado
1. Valoracin de la calidad de la evidencia aportada
2. Cambios significativos que se han constatado durante el ltimo quinquenio
3. Comentarios/matizaciones sobre las valoraciones de los indicadores
4. Puntos fuertes ms significativos
5. Puntos dbiles ms significativos y posibles explicaciones de su presencia
6. Direccin de las posibles propuestas de mejora/cambio

Gua de evaluacin interna de las enseanzas de formacin virtual. Institucional (2 edicin)

42

3.2. Organizacin de la enseanza


Estndares

La organizacin de la enseanza se adeca a las caractersticas del sistema no presencial.

La organizacin de la enseanza incorpora, de manera justificada, elementos formativos


presenciales, de carcter imprescindible, cuando la dificultad de desarrollo de forma virtual
es muy alta.

Existe un sistema especfico y adecuado de comunicacin inicial con los nuevos


estudiantes para dar a conocer el funcionamiento del sistema no presencial.

Existen mecanismos adecuados de apoyo continuo al alumnado.

Existen mecanismos apropiados para conocer las necesidades del alumnado.

Evidencias

Existencia de documentacin sobre la estructura organizativa de la enseanza.

Existencia documental de un plan de acogida y seguimiento del estudiantado recin


llegado.

Existencia de procedimientos de seguimiento del funcionamiento de los mecanismos de


gestin y apoyo de la docencia.

ndices de satisfaccin del alumnado y el profesorado respecto a los mecanismos de


gestin y apoyo de la docencia.

Gua de evaluacin interna de las enseanzas de formacin virtual. Institucional (2 edicin)

43

3.4.

Sistema de orientacin, tutora y consultora

En resumen:
Es satisfactorio el funcionamiento del sistema de orientacin y tutora empleado en la
enseanza?
Muy satisfactorio

Satisfactorio

Poco satisfactorio

Nada satisfactorio

Indicadores:
* Vase la escala de valoracin en la portada del protocolo.

3.4.1. Grado de satisfaccin de los estudiantes respecto al


sistema de orientacin
3.4.2. Grado de satisfaccin de los estudiantes respecto a la
accin tutorial
3.4.3. Grado de satisfaccin de los estudiantes respecto a la
accin de consultora
3.4.4. Proporcin de estudiantes por profesor-consultor de
materia
3.4.5. Proporcin de estudiantes por profesor-tutor de referencia
3.4.6. Agilidad, rapidez y funcionalidad en las respuestas de los
tutores a las consultas de los estudiantes
3.4.7. Agilidad, rapidez y funcionalidad en las respuestas de los
consultores a las consultas de los estudiantes
1. Valoracin de la calidad de la evidencia aportada
2. Cambios significativos que se han constatado durante el ltimo quinquenio
3. Comentarios/matizaciones sobre las valoraciones de los indicadores
4. Puntos fuertes ms significativos
5. Puntos dbiles ms significativos y posibles explicaciones de su presencia
6. Direccin de las posibles propuestas de mejora/cambio

Gua de evaluacin interna de las enseanzas de formacin virtual. Institucional (2 edicin)

44

3.4. Sistema de orientacin y tutora


Estndares

La institucin tiene un sistema de apoyo al estudiante, especialmente de tutora personal,


acadmica y profesional. La institucin ha establecido acciones para facilitar una buena
insercin acadmica de los estudiantes

Cada uno de los estudiantes tiene asignado un profesor-tutor de referencia.

Los estudiantes cuentan con un sistema de profesores-consultores para las distintas


materias de estudio.

El sistema de acceso para la consulta es directo y la respuesta se produce con rapidez.

Las respuestas son de calidad.

Evidencias

Ratio de estudiantes por tutor.

Ratio de estudiantes por consultor.

Frecuencia de uso de los servicios de orientacin y tutora.

Desviacin media del tiempo de respuesta respecto al tiempo mximo establecido por la
institucin.

Grado de satisfaccin de los estudiantes en relacin con los servicios de orientacin y


tutora y con la rapidez y calidad de las respuestas recibidas.

Procedimientos establecidos de revisin del funcionamiento y mejora de los servicios de


orientacin y tutora.

Gua de evaluacin interna de las enseanzas de formacin virtual. Institucional (2 edicin)

45

3.5.

Estructura tcnica dedicada a la instruccin

En resumen:
Es satisfactoria la estructura tcnica dedicada a la instruccin?
Muy satisfactoria

Satisfactoria

Poco satisfactoria

Nada satisfactoria

Indicadores:
* Vase la escala de valoracin en la portada del protocolo.

3.5.1. Potencia de acceso y estabilidad del entorno virtual para


garantizar su funcionamiento permanente
3.5.2. Adecuacin del entorno virtual a los objetivos de la
enseanza
3.5.3. Grado de adecuacin del entorno tecnolgico a las
actividades formativas
3.5.4. Facilidad de uso del campus virtual
3.5.5. Facilidad de bsqueda de informacin en el campus
virtual
1. Valoracin de la calidad de la evidencia aportada
2. Cambios significativos que se han constatado durante el ltimo quinquenio
3. Comentarios/matizaciones sobre las valoraciones de los indicadores
4. Puntos fuertes ms significativos
5. Puntos dbiles ms significativos y posibles explicaciones de su presencia
6. Direccin de las posibles propuestas de mejora/cambio

Gua de evaluacin interna de las enseanzas de formacin virtual. Institucional (2 edicin)

46

3.5. Estructura tcnica dedicada a la instruccin


Estndares

El entorno virtual es potente y adecuado a los objetivos de la enseanza y garantiza su


permanente funcionamiento.

El sistema operativo responde con eficiencia a las necesidades de profesorado y


alumnado.

Evidencias

Existencia de instrumentos de iniciacin del alumnado en el uso de los entornos virtuales.

Existencia de servicios permanentes de apoyo tcnico para el profesorado y el


estudiantado.

Datos de conexin de alumnado y profesorado.

Ratio entre el nmero de incidencias atendidas por ao y el nmero de usuarios.

Nmero de consultas al campus virtual.

Grado de satisfaccin del profesorado y el estudiantado, analizado por los procedimientos


especficos establecidos.

Gua de evaluacin interna de las enseanzas de formacin virtual. Institucional (2 edicin)

47

3.6.

Sistemas de comunicacin interpersonal

En resumen:
Es satisfactorio el grado de comunicacin interpersonal entre sujetos pertenecientes a los
distintos colectivos?
Muy satisfactorio

Satisfactorio

Poco satisfactorio

Nada satisfactorio

Indicadores:
* Vase la escala de valoracin en la portada del protocolo.

3.6.1. Grado de comunicacin interpersonal entre sujetos de los


distintos colectivos universitarios
3.6.2. Estimulacin por parte del profesorado para activar la
intercomunicacin entre estudiantes de un mismo grupo
3.6.3. Grado de comunicacin multidireccional promovida por
actividades de carcter coral, dinamizadas desde la institucin
1. Valoracin de la calidad de la evidencia aportada
2. Cambios significativos que se han constatado durante el ltimo quinquenio
3. Comentarios/matizaciones sobre las valoraciones de los indicadores
4. Puntos fuertes ms significativos
5. Puntos dbiles ms significativos y posibles explicaciones de su presencia
6. Direccin de las posibles propuestas de mejora/cambio

Gua de evaluacin interna de las enseanzas de formacin virtual. Institucional (2 edicin)

48

3.6. Sistemas de comunicacin interpersonal


Estndares

Existencia de sistemas y vas de comunicacin interpersonal entre los distintos colectivos


(estudiantes, estudiantes-profesores, profesores).

Planificacin de actividades para estimular la comunicacin entre estudiantes de un mismo


grupo.

Planificacin de actividades corales para promover la comunicacin multidireccional.

Evidencias

Trfico de mensajes entre sujetos de los distintos colectivos.

Existencia de espacios para el trabajo virtual en grupo.

Existencia de espacios comunes para el intercambio entre los distintos colectivos.

Existencia de comisiones de induccin a la participacin de alumnado y profesorado.

Nmero de grupos de trabajo virtual existentes.

Estadsticas sobre frecuencia de las comunicaciones.

Procedimientos establecidos para el anlisis del funcionamiento de los sistemas de


comunicacin interpersonal.

Procedimientos establecidos para el anlisis de la satisfaccin del profesorado y el


estudiantado respecto al funcionamiento de los sistemas de comunicacin interpersonal.

Gua de evaluacin interna de las enseanzas de formacin virtual. Institucional (2 edicin)

49

4. Evaluacin de los aprendizajes


4.1.

Sistema evaluativo

En resumen:
Es adecuado el sistema de evaluacin de los aprendizajes empleado de acuerdo con la
naturaleza de la enseanza y con las caractersticas especficas de las enseanzas virtuales?
Muy adecuado

Adecuado

Poco adecuado

Nada adecuado

Indicadores:
* Vase la escala de valoracin en la portada del protocolo.

4.1.1. Nivel de logro de los aprendizajes para obtener la


calificacin o el grado
4.1.2. Adecuacin de los mtodos e instrumentos de evaluacin
aplicados para comprobar el rendimiento de los estudiantes
4.1.3. Especificacin y conocimiento general de los criterios de
evaluacin
4.1.4. Procedimientos de apoyo al alumnado para preparar las
evaluaciones
4.1.5. Grado de actualizacin de las pruebas y estrategias de
evaluacin
4.1.6. Sistemas de revisin de las metodologas evaluativas
4.1.7. Especificacin y conocimiento de los sistemas de
reclamacin respecto a los resultados de la evaluacin
1. Valoracin de la calidad de la evidencia aportada
2. Cambios significativos que se han constatado durante el ltimo quinquenio
3. Comentarios/matizaciones sobre las valoraciones de los indicadores
4. Puntos fuertes ms significativos
5. Puntos dbiles ms significativos y posibles explicaciones de su presencia
6. Direccin de las posibles propuestas de mejora/cambio

Gua de evaluacin interna de las enseanzas de formacin virtual. Institucional (2 edicin)

50

4. Evaluacin de los aprendizajes


4.1. Sistema evaluativo
Estndares

El logro de un grado o de la calificacin requiere, por parte del estudiante, completar un


conjunto perfectamente determinado de evaluaciones que cubren los aprendizajes
identificados como relevantes.

Los mtodos e instrumentos de evaluacin aplicados para comprobar el rendimiento de los


estudiantes son vlidos y claramente referidos al tipo y a la naturaleza de los aprendizajes
a cubrir y se adecan al sistema de enseanza a distancia.

Los criterios de evaluacin estn claramente establecidos, figuran en las publicaciones de


la institucin y, en general, son conocidos y entendidos por el alumnado y el profesorado.

La institucin asegura a los estudiantes posibilidades reales de superar o prepararse para


superar las evaluaciones, mediante procesos continuos de valoracin de su progreso,
ayudados por la actuacin de los profesores-tutores y de los profesores-consultores.

Las evaluaciones son revisadas peridicamente para ponerlas al da en relacin con los
cambios que se producen en el campo especfico del conocimiento.

Las metodologas de evaluacin son revisadas peridicamente para comprobar su


adecuacin a la tipologa y naturaleza de los aprendizajes y a sus cambios, as como a las
innovaciones tecnolgicas que se van incorporando al sistema.

Los sistemas de reclamacin respecto a los resultados de la evaluacin estn


perfectamente establecidos y son conocidos por el profesorado y el alumnado.

Evidencias

Existencia de documentacin pblica que defina el modelo de evaluacin a emplear.

Documento pblico que especifique los criterios de evaluacin.

Constancia especfica en el plan docente de la asignatura de los objetivos fundamentales


de las asignaturas y de la naturaleza y criterios de evaluacin.

Procedimientos pblicos de reclamacin de los resultados de la evaluacin por parte de los


estudiantes.

Procedimientos de revisin y mejora de la adecuacin de las metodologas de evaluacin.

Procedimientos de anlisis de la satisfaccin del alumnado y la opinin del profesorado


respecto al sistema de evaluacin.

Gua de evaluacin interna de las enseanzas de formacin virtual. Institucional (2 edicin)

51

5. Resultados
5.1.

Dimensin acadmica: resultados

En resumen:
Son satisfactorios los resultados acadmicos de los estudiantes?
Muy
satisfactorios

Satisfactorios

Poco satisfactorios

Nada satisfactorios

Indicadores:
* Vase la escala de valoracin en la portada del protocolo.

5.1.1. Tiempo empleado para finalizar los estudios


5.1.2. Grado de abandono de los estudios
5.1.3. Nivel de xito acadmico
5.1.4. Grado de rendimiento alcanzado
5.1.5. Nivel de eficiencia
1. Valoracin de la calidad de la evidencia aportada
2. Cambios significativos que se han constatado durante el ltimo quinquenio
3. Comentarios/matizaciones sobre las valoraciones de los indicadores
4. Puntos fuertes ms significativos
5. Puntos dbiles ms significativos y posibles explicaciones de su presencia
6. Direccin de las posibles propuestas de mejora/cambio

Gua de evaluacin interna de las enseanzas de formacin virtual. Institucional (2 edicin)

52

5. Resultados
5.1. Dimensin acadmica: resultados
Estndares

Los estudiantes finalizan los estudios en el tiempo previsto, teniendo en cuenta su situacin
personal.

Las tasas de abandono, xito, rendimiento y eficiencia son las adecuadas de acuerdo con
la naturaleza de estas enseanzas.

Evidencias

Desviacin media del tiempo de finalizacin de los estudios del conjunto de estudiantes
respecto a la media de tiempo expresada en sus proyectos personales tutorizados.

Datos y estadsticas sobre las tasas de abandono, rendimiento y eficiencia.

Planes documentados de la titulacin para mejorar los resultados acadmicos y facilitar la


adecuada interpretacin de las distintas tasas.

Gua de evaluacin interna de las enseanzas de formacin virtual. Institucional (2 edicin)

53

5.2.

Dimensin profesional: resultados

En resumen:
Son satisfactorios los resultados profesionales de los estudiantes?
Muy
satisfactorios

Satisfactorios

Poco satisfactorios

Nada satisfactorios

Indicadores:
* Vase la escala de valoracin en la portada del protocolo.

5.2.1. Nivel de desarrollo o mejora profesional de los graduados


5.2.2. Nivel de participacin de los agentes externos en la
evaluacin de los graduados
5.2.3. Nivel de insercin laboral o mejora profesional a corto
plazo
5.2.4. Nivel de insercin laboral o mejora profesional a medio
plazo
5.2.5. Nivel de satisfaccin de los graduados respecto a la
formacin recibida
1. Valoracin de la calidad de la evidencia aportada
2. Cambios significativos que se han constatado durante el ltimo quinquenio
3. Comentarios/matizaciones sobre las valoraciones de los indicadores
4. Puntos fuertes ms significativos
5. Puntos dbiles ms significativos y posibles explicaciones de su presencia
6. Direccin de las posibles propuestas de mejora/cambio

Gua de evaluacin interna de las enseanzas de formacin virtual. Institucional (2 edicin)

54

5.2. Dimensin profesional: resultados


Estndares

La enseanza a distancia facilita la mejora y el desarrollo profesional de los estudiantes.

La evolucin profesional de los graduados es relevante y continua.

Los agentes externos estn implicados en el anlisis de la calidad de la formacin de los


graduados y su desarrollo o mejora profesional.

Los graduados expresan de manera fehaciente su satisfaccin respecto a la formacin


recibida durante los estudios.

La insercin laboral a corto y medio plazo es satisfactoria.

Evidencias

Existencia documentada de informacin sobre la satisfaccin respecto a la formacin


recibida durante los estudios.

Existencia documentada de informacin sobre el grado de calidad de la insercin laboral o


la mejora profesional a corto y medio plazo.

Existencia documentada sobre el grado de satisfaccin de los empleadores laborales


respecto a la calidad profesional de los graduados.

Gua de evaluacin interna de las enseanzas de formacin virtual. Institucional (2 edicin)

55

5.3.

Dimensin personal: resultados

En resumen:
Son satisfactorios los resultados personales de los estudiantes?
Muy
satisfactorios

Satisfactorios

Poco satisfactorios

Nada satisfactorios

Indicadores:
* Vase la escala de valoracin en la portada del protocolo.

5.3.1. Nivel de desarrollo personal de los graduados


5.3.2. Grado de desarrollo de las competencias clave y
transversales de los graduados
5.3.3. Nivel de valoracin del desarrollo personal de los
graduados expresado por los empleadores laborales
5.3.4. Grado de satisfaccin del desarrollo personal expresado
por los propios graduados
1. Valoracin de la calidad de la evidencia aportada
2. Cambios significativos que se han constatado durante el ltimo quinquenio
3. Comentarios/matizaciones sobre las valoraciones de los indicadores
4. Puntos fuertes ms significativos
5. Puntos dbiles ms significativos y posibles explicaciones de su presencia
6. Direccin de las posibles propuestas de mejora/cambio

Gua de evaluacin interna de las enseanzas de formacin virtual. Institucional (2 edicin)

56

5.3. Dimensin personal: resultados


Estndares

Los estudios realizados han facilitado el desarrollo personal de los graduados.

Los estudios realizados han desarrollado las competencias clave y transversales de los
graduados.

Los agentes externos valoran positivamente el nivel de desarrollo personal de los


graduados.

La percepcin personal de los graduados sobre su nivel de desarrollo personal es


satisfactoria.

Evidencias

Existencia documental de anlisis sobre el desarrollo personal de los graduados.

Presencia en el plan docente de actividades orientadas al desarrollo personal de los


estudiantes.

Anlisis sobre los resultados de los estudiantes en estas actividades y su evolucin.

Estudios de satisfaccin de los empleadores laborales sobre el nivel de desarrollo personal


de los graduados.

Estudios de satisfaccin de los propios graduados sobre su nivel de desarrollo personal.

Gua de evaluacin interna de las enseanzas de formacin virtual. Institucional (2 edicin)

57

Potrebbero piacerti anche