UNIDAD III

EVALUACIN INSTITUCIONAL CUALITATIVA Y

CUANTITATIVA

Las prcticas evaluativas en educacin, admiten dimensiones tanto cuantitativas
como cualitativas, siendo su objetivo la obtencin de informacin vlida para la
toma de decisiones institucionales.
La primera es tangible, mensurable. La calidad es difcil de medir, ya que su
definicin no es particular. Tal como explica Habermas, "la calidad escapa a
nuestras palabras y mora en las cosas. Es tan cierto que existe cuanto que es
difcil de captar".

La descomposicin de estos enfoques no nos ayudan cuando el objetivo de un
sistema evaluativo educativo no es nicamente la calidad de la educacin, sino el
desarrollo de un sistema de evaluacin que realmente contribuya a concienciar a
los actores acerca de las motivaciones y los intereses que interactan para
producir y dar forma al conocimiento.
Es indudable que se requiere conocer el comportamiento de los indicadores
cuantitativos del funcionamiento de las instituciones de educacin superior, en un
tiempo determinado y su evolucin histrica, siempre es necesario.

Los ndices de matrcula, promocin y desercin facilitan importantes anlisis y
decisiones polticas y gerenciales (en el caso de las universidades privadas)
basados en su conocimiento. Pero no se puede hacer caso omiso a las demandas
de contar con indicadores que expresen los niveles de calidad tanto de las
instituciones como del sistema educativo superior en general de cada pas y
regin.

Para satisfacer esta exigencia se requiere producir un tipo de informacin distinto.
Su adecuada captacin y su elaboracin dependen de la aplicacin de otras
metodologas y procedimientos para evaluar, por ejemplo las evaluaciones
cuantitativas no hacen referencia a la realidad del currculum que enseado, sino
que, por lo general, parte del currculum prescripto y a partir de l estima la
conformidad o no de los resultados a la norma instituida.

El enfoque cualitativo, por su propia metodologa, puede tomar en consideracin el
currculum efectivamente enseado, la especificidad de la gestin institucional con
relacin a la interpretacin que se hace de los saberes aprendidos por el alumno y
las variables contextuales ms amplias en su carcter de condiciones para la
enseanza y el aprendizaje. En esta interpretacin compleja de la accin
educativa evaluada, el enfoque cualitativo nos conecta ms directamente con la
realidad institucional, la curricular y la prctica docente.

C. Gutirrez, al hacer referencia a dos paradigmas complementarios del campo de
la metodologa de la ciencia, afirma:
Uno de los paradigmas correspondera al mtodo heurstico; el otro, al mtodo
positivo. Los dos paradigmas, complementarios en el sentido de la disyuncin, no
en el de la conjuncin, seran dos vas alternativas hacia el dominio de la realidad.
Los dos enfoques seran importantes y necesarios. Habra que usar los dos,
especialmente por su tendencia a contrarrestar los posibles excesos de cada uno:
el peligro de inflacin verbal o especulacin sin garanta, por un lado; el peligro de
depresin intelectual, anulacin del impulso heurstico, por el otro. Sera bueno
que todos tratramos de cultivar ambos enfoques simultneamente ya que, como
el economista poltico dira, aunque la inflacin es siempre preferible a la
depresin, debemos evitar ambas.

Por otra parte, la evaluacin cualitativa tiene que promover un fenmeno
participativo, de modo que paulatinamente aqulla se gestione por iniciativa "de
adentro para afuera" como forma factible de un autntico mejoramiento de la
calidad de la educacin en sus mltiples dimensiones de expresin.
Como sealan Cook y Reichardt, para una comprensin completa de una
evaluacin, sta tendra que realizar al menos tres tareas: comprobacin,
valoracin del impacto y explicacin causal. Se trata de una gama muy amplia de
tareas que, para ser eficazmente atendidas, requerirn quiz el empleo de
mtodos tanto cualitativos como cuantitativos. Aunque no de un modo inevitable,
puede suceder a menudo que la comprobacin sea realizada con mayor eficacia
conforme a un mtodo cualitativo, que la valoracin del impacto se realice con
mayor precisin mediante mtodos cuantitativos y que la explicacin causal se
obtenga de mejor manera a travs del empleo conjunto de mtodos cuantitativos y
cualitativos.

En consecuencia, la combinacin flexible de ambos enfoques -para atender a las
mltiples necesidades de informacin del sistema educativo- contribuye a corregir
los sesgos que, inevitablemente, presentan los mtodos cuantitativos y cualitativos
cuando se los usa en forma separada.

CLASIFICACIN DE PRACTICAS EVALUATIVAS

Dentro de las perspectivas para clasificar las diversas prcticas de evaluacin
institucional en educacin superior tenemos:

De acuerdo al objetivo de la evaluacin
De acuerdo la metodologa de evaluacin
De acuerdo los agentes de la evaluacin
De acuerdo la tipologa de evidencias que sostienen la evaluacin
De acuerdo el momento de la evaluacin

De acuerdo al objetivo de la evaluacin
Aseguramiento de la calidad para rendicin de cuentas, caracterizado por una
visin externa de control y asociada a estructuras administrativas centralizadas y a
una revisin externa de auditores que miden indicadores cuantitativos de xito.
Aseguramiento de la calidad para la mejora, caracterizado por una visin interna
de control y asociado a estructuras administradoras facilitadoras y con la
utilizacin de la revisin por pares para obtener indicadores cualitativos de xito.
Subir
De acuerdo a la metodologa de evaluacin
Acreditacin. La acreditacin supone el reconocimiento de la situacin y
legitimidad de una institucin, programa o mdulo de estudio. Un proceso porel
cual un programa educativo o institucin provee informacin sobre su actividad y
consecuciones a un comit externo que, de forma independiente, evala tal
informacin para emitir un juicio pblico a partir de unos estndares explicitados
sobre el valor y calidad de la institucin o programa.

De acuerdo los agentes de la evaluacin
Tradicionalmente la acreditacin pone el nfasis en los input como garanta de la
calidad de los outputs, presenta una orientacin hacia la eficacia y tiene un alto
componente de evaluacin sumativa.

Revisin / Evaluacin de programas. A diferencia de la acreditacin, no se
confronta con criterios previamente fijados sino que slo pretende describir y
valorar los antecedentes de la unidad o programa, su rendimiento actual as como
sus planes futuros. Es un proceso que analiza la calidad del proceso de
aprendizaje, incluyendo aspectos como la actividad docente y los mtodos
pedaggicos. Es obvio que cuando la revisin no responde a una motivacin
interna, la dificultad de su puesta en marcha es alta.

Auditora. Es un proceso de revisin de los procedimientos puestos en marcha
para la garanta de la calidad. Una auditora de calidad comprueba hasta qu
medida una institucin o programa consigue alcanzar sus objetivos, a travs de los
procesos que tiene establecidos. Verifica la idoneidad de lo previsto en los
procedimientos de calidad con relacin a los objetivos a alcanzar; la conformidad
de las actuales actividades de calidad con relacin a las planificadas y, finalmente,
la efectividad de las actividades en la consecucin de los objetivos establecidos en
el programa.


Subir
Segn los agentes de la evaluacin

Dimensin interna. La responsabilidad en la iniciativa y ejecucin recae en la
propia institucin universitaria. El liderazgo, participacin y organizacin del
proceso son factores clave del xito.

Dimensin externa. La responsabilidad de ejecucin recae en rganos externos a
la institucin. La calidad de los comits de evaluacin, ms all de la tecnologa
(guas y protocolos) puesta a su disposicin, es el factor determinante de una
buena prctica de evaluacin.
Subir

Segn la tipologa de evidencias que sostienen la evaluacin

Evaluacin basada en indicadores de rendimiento. El juicio de valor que se emite
es una consecuencia directa de la constatacin de un determinado valor
cuantitativo o la presencia-ausencia de una serie de caractersticas en el objeto
sometido a evaluacin. En general se tiende a un cierto reduccionismo en la
identificacin de indicadores (facilidad, fiabilidad del indicador, potencialidad de su
manejo estadstico), as como a su asociacin a una evaluacin orientada a la
rendicin de cuentas.

Evaluacin basada en juicios de expertos. En ocasiones se ha confundido este
tipo de evaluacin con la ausencia de informacin (indicadores) cuantitativa; como
si el juicio del experto proviniera de la inferencia cualitativa (ojo clnico) del
evaluador. Su autntico significado es que los datos (cuantitativos y cualitativos)
son contextualizados, interpretados y valorados (dentro de unos marcos de
referencia) por los evaluadores. Se descarta el automatismo del dato al juicio de
evaluacin.

De acuerdo al momento de la evaluacin

Modelo ex ante. En el contexto europeo en general, y en el espaol en particular,
siempre ha habido un proceso de acreditacin (sui generes) de instituciones y
programas que culminaba con la aprobacin administrativa de la creacin de una
universidad o del plan de estudios conducente a una titulacin homologada. El en
que se apoyaba el proceso era de carcter totalmente apriorstico y
administrativista: si se cumplen los requisitos-normas-directrices establecidas, la
calidad est asegurada. Los rganos responsables de tales procesos eran de
ndole gubernamental y estaban regidos por procedimientos altamente
formalizados y con escasa transparencia.

Modelo a posteriori. Habitual en los sistemas universitarios con amplia tradicin de
autonoma en la oferta, diseo y desarrollo de sus programas formativos. Est
vinculado, generalmente, a la acreditacin o a la evaluacin-revisin de programas
y, por lo tanto, exige haber completado un determinado ciclo temporal en el cual el
programa ha pasado por todas sus fases de ejecucin.


ANLISIS DE UN MODELO DE EVALUACIN CUALITATIVO

MODELO RUECA

Creado por la Red Universitaria de Evaluacin de la Calidad

Se funda en los siguientes aspectos:
Demandas y necesidades sociales.
Competitividad entre centros
Obligacin de rendir cuentas ante la sociedad
Conceptos claves
Calidad
Cambio
Estructura del modelo
Est conformada por:
Variables
Criterios de Calidad


VARIABLES Y CRITERIOS DE CALIDAD


ENTORNO Conocimiento del entorno
Apertura al entorno
Respuestas a las demandas del
entorno
Promocin de la interaccin
CULTURA Misin, visin y valores
Proyecto Educativo institucional
Poltica de Calidad
ESTRATEGIAS Estrategias para la mejora de la
calidad
Planificacin de la calidad
Seguimiento y y evaluacin de la
calidad
ORGANIZACIN Formalizacin del sistema de calidad
Estructura de la organizacin
Gobierno centrado en la calidad
PROCESOS Y RECURSOS Mejora de los procesos
Recursos financieros y materiales
Recursos tecnolgicos y de
informacin
PROGRAMAS Programas acadmicos
Programas de investigacin
Programas de orientacin y ayuda
PERSONAS Desarrollo del personal
Desarrollo de la comunidad
universitaria
Compromiso con la mejora


COMPONENTES DEL SISTEMA RUECA

VARIABLES CRITERIOS DIMENSIONES DE
LOS CRITERIOS
DESCRIPTORES
PARTES EN LAS QUE
SE DIVIDIDO LA
INSTITUCIN PARA
REALIZAR SU
EVALUACIN:
Entorno
Cultura
Estrategia
Arquitectura
Procesos y
recursos
Programas
Personas

Definen los
componentes
esenciales de la
Calidad en la
Universidad.
Se han
establecido 22
criterios que se
agrupan en
torno a las siete
variables
Definen los aspectos
que permiten medir el
nivel de logro en
caca uno de los
criterios de Calidad.
Cada criterio tiene
varias dimensiones
que tratan de
describir
sus aspectos ms
significativos.
Para los 22 criterios
se han fijado 118
dimensiones, que
pueden ampliarse,
reducirse o
modificarse de
acuerdo con las
caractersticas de la
Universidad en que
se aplica el modelo.
Las dimensiones
pueden ser
clasificadas en dos
categoras: las
relevantes, que son
imprescindibles en
cualquier
autoevaluacin
porque
representan el nivel
de
aseguramiento de la
Manifestaciones o
indicios
cuantitativos o
cualitativos que
permiten un juicio de
valor
sobre el contenido de
las
dimensiones en una
institucin, una
unidad
organizativa
(facultad,
departamento,
programa, etc).
Los descriptores
representan aspectos
del sistema de
Calidad. Por ello,
deben ser
utilizados para
comprobar su nivel
de I existencia o de
aplicacin en la
dinmica
universitaria.
Cada dimensin
presenta un nmero
variado de
descriptores que
ayudan a seleccionar
la informacin ms
adecuada. Los
Calidad, y las
importantes, que
complementan el
sistema y pueden
seleccionarse o
ampliarse para
asegurar una
infraestructura ms
adecuada de Calidad
evaluadores
ampliarn o
modificarn los
descriptores de
acuerdo con las
condiciones
diferenciadas de
cada universidad


CRITERIOS DE CALIDAD

ESTRATEGIAS PARA LA MEJORA DE LA CALIDAD
PLANIFICACIN DE LA CALIDAD
SEGUIMIENTO Y EVALUACIN DE LA CALIDAD

ESTRATEGIAS PARA LA MEJORA DE LA CALIDAD
DIMENSIONES DESCRIPTORES DE LAS
DIMENSIONES
1.a ) La universidad disea estrategias e
incorpora a ellas el concepto de Calidad en su
definicin, difusin, implantacin, revisin y
mejora.
1.b) Las estrategias de mejora de la Calidad
tienen en cuenta las demandas del entorno y
la cultura universitaria.
1.c) La creacin y desarrollo de la estrategia
se realiza con la participacin de los
implicados.
1.a ) Procedimientos de creacin y seleccin
de estrategias.
Importancia de la Calidad en la creacin de
Estrategias.
1.b) Relacin de la estrategia con las
demandas de Calidad del entorno.
Relacin de la estrategia con los
compromisos de Calidad explicitados en la
misin, la visin y los valores de la
universidad.
1.c) Sistema de apoyos para potenciar la
participacin.
Procedimientos para hacer real la
participacin de
los implicados en la creacin de estrategias

PLANIFICACIN DE LA CALIDAD

DIMENSIONES DESCRIPTORES DE LAS
DIMENSIONES
2.a) La planificacin participada constituye
una
funcin esencial para mejorar la Calidad en la
universidad.
2.b) En los procesos de planificacin se
tienen en cuenta los criterios de calidad y los
factores clave de Calidad y no Calidad que
afectan a la universidad.
2.c) En los procesos de planificacin se
analizan y utilizan las informaciones
procedentes de la
institucin, del entorno y de otros entornos.
2.d) La universidad realiza un plan anual de
Calidad como parte del plan general.
Procesos y procedimientos utilizados en
la planificacin.
Contenidos sobre Calidad en las
actividades generales de planificacin.
Profesores, estudiantes, directivos, otro
personal y representantes del entorno
que intervienen en la planificacin.
Presencia de los criterios de Calidad en
todos los pasos de la planificacin.
Identificacin de los factores clave de la
Calidad y la no Calidad (por ejemplo, en
la colaboracin con la sociedad, la
gestin de la institucin, los objetivos y el
desarrollo de los programas de formacin
y de investigacin, el
desarrollo integral y la orientacin de los
alumnos, o el uso de los recursos y los
servicios).
Procedimientos para la realizacin de
estudios, investigaciones, informes, etc.
sobre la Calidad en la universidad.
Sistema de anlisis para lograr la,
mxima precisin y validez de las
informaciones internas (por ej: reduccin
de variaciones, incremento de
productividad, satisfaccin de
persona, resultados sociales).
Necesidades y problemas internos (clima,
quejas, desajustes, etc.) identificados
desde el exterior.
Informaciones existentes y utilizadas,
procedentes del entorno y de la
institucin.
Sistema de evaluacin de necesidades
de alumnos, empresas, etc. que se utiliza
en los procesos de planificacin anual.
Sistema que establece como crear un
plan estructurado (objetivos, actividades,
responsabilidades y tiempos).
Adaptaciones o modificaciones realizadas
en los dos ltimos cursos.


SEGUIMIENTO Y EVALUACIN DE LA CALIDAD

DIMENSIONES DESCRIPTORES DE LAS
DIMENSIONES
3.a) Un sistema de seguimiento y evaluacin
recoge, organiza y presenta la informacin
sobre la Calidad de la universidad
3.b) El sistema de seguimiento y evaluacin
recoge, organiza y presenta la informacin
sobre
la no Calidad en la universidad.
3.c) El sistema de seguimiento y evaluacin
recoge y ofrece informacin sobre la imagen
global de Calidad de la universidad.
3.d) Los sistemas de seguimiento y
evaluacin est
coordinado entre si para lograr sus
propsitos.
3.a)
Sistema de recogida y organizacin de
informacin adaptado, en la medida en
que es necesario, a las distintas
facultades, escuelas, institutos,
departamentos o programas.
Disponibilidad de informacin completa y
peridica de toda la comunidad
universitaria.
Informacin presentada, organizada y
ofrecido con tcnicas de control
estadstico que permitan anlisis
posteriores.
Participacin de representantes internos
(de direccin, alumnos,
profesores) y externos (administracin
pblica, empresas, otros centros)
Informacin sobre los criterios de Calidad
utilizados y los factores clave de Calidad.
3.b)
Permite obtener informacin especfica a
los grupos afectados.
Permite incluir clculos del coste en el
momento y en proyecciones futuras.
Permite obtener estimaciones de las
tendencias y efectos inmediatos y a
corto plazo.
Utiliza medios variados y eficaces para la
difusin: documentos escritos, reuniones
de unidades afectadas, reuniones
departamentales, atencin personalizada.
Tiene en cuenta el impacto que provoca
el seguimiento y la informacin ofrecida
en el conjunto de la universidad y en las
partes afectadas.
3.c )
Precisin en los datos, anlisis de
tendencias,
comparaciones con el exterior, anlisis de
los cambios realizados, etc.
Realizado por personal especializado e
independiente (en imagen institucional,
con destrezas en anlisis de problemas,
experiencia en procesos similares, etc.
Apertura de la informacin a toda la
comunidad universitaria.
3.d )
Mecanismos de coordinacin entre los
procesos y procedimientos de los tres
sistemas.
Efectos de la coordinacin entre los
sistemas (por ejemplo, coherencia de la
informacin ofrecida, ahorro de tiempo).






GLOSARIO DE TRMINOS PARA RESPONDER

1. Calidad
2. Indicadores cuantitativos
3. Indicadores cualitativos
4. Aseguramiento de la calidad
5. Acreditacin
6. Input
7. Outputs
8. Auditora
9. Entorno
10. Cultura
11. Estrategias

Recuerden que los trminos deben responderse contextualizados al tema que
trata la unidad















ACTIVIDADES UNIDAD III


EVALUACIN INSTITUCIONAL CUALITATIVA Y CUANTITATIVA

OBJETIVOS
Identificar las prcticas evaluativas en educacin superior, que nos permitan
obtener informacin vlida para la toma de decisiones institucionales.

TAREA A REALIZAR
1. Elaboracin de Trabajo de Investigacin sobre el sistema de evaluacin
institucional (cualitativa y cuantitativa), que se utiliza en su pas de origen.
2. Anexar aportes reflexivos sobre lo que aprendieron del tema
3. Glosario de trminos
No mayor de 25 pginas, letra Arial 12, 1.5 espacio.
Nota: incluir las referencias bibliogrficas que utilicen para los trabajos
PORCENTAJE 35%

TECNICA DE TRABAJO INDIVIDUAL
RECURSOS REQUERIDOS
Material bibliogrfico, mdulo de aprendizaje, material investigado, entre otros.
CRITERIOS DE EVALUACIN
Puntualidad de entrega..5%
Contenido.30%
TOTAL...35%
BIBLIOGRAFA RECOMENDADA

Argentina
http://www.coneau.gov.ar/CONEAU/

Colombia
http://www.cna.gov.co/1741/article-186365.html

Chile
http://www.cnachile.cl/

Panam
http://www.utp.ac.pa/guia-de-coneaupa
http://www.coneaupa.com/#!normativa/c1fz6