FASES Y PROPUESTAS PRCTICAS PARA LA EVALUACIN DE PROGRAMAS

Sin perder de vista la continuidad que caracteriza al proceso evaluador, las distintas
aportaciones analizadas hacen referencia clara a momentos puntuales para evaluar y a aspectos
concretos que, necesariamente, han de evaluarse. Estos momentos son:
Evaluacin inicial de las necesidades que justifican el diseo del programa.
Evaluacin del propio diseo.
Evaluacin del desarrollo.
Evaluacin de los resultados.

Sanz (1990:64-71), apoyndose en las aportaciones de diferentes autores establece un plan de

evaluacin con cinco pasos bsicos. Para el, la evaluacin tiene que verse como el ncleo central
del programa, interactuando con todos los dems elementos fundamentales de este. El proceso
de evaluacin del programa de orientacin pasa por los siguientes pasos bsicos:

a) Anlisis de necesidades. El objetivo es determinar los indicadores en los que basar el xito
del programa, utilizando el dialogo con los implicados en el mismo y apoyndose en
instrumentos de recogida de informacin.
b) Establecimiento de metas y objetivos. A partir de la priorizacin de las necesidades, se fijan
las metas que constituyen los logros finales que se desean conseguir, enuncindose como
conductas generales que no son directamente medibles, establecindose a la vez objetivos
de rendimiento observables y medibles.
c) Diseo del programa. El siguiente paso es la planificacin de actividades, su
temporalizacin, los recursos necesarios y el costo.
d) Modificacin y mejora del programa. Realizada gracias a la evaluacin continua.
e) Informe y utilizacin de los resultados del programa. Se debe dirigir a todas las partes
implicadas. Con los datos obtenidos, podremos basar nuestras decisiones, comprobar si los
procedimientos de evaluacin fueron los apropiados y si el programa produjo los resultados
esperados en los alumnos.

En la aportacin de Prez Juste (1997:125-145), aparecen tres momentos crticos de la

evaluacin de programas con las siguientes recomendaciones:
Primer momento: Hacer una evaluacin del programa como documento atendiendo las
siguientes dimensiones:
Contenidos, calidad tcnica y evaluabilidad. (Ver el grado de especificacin de los objetivos,
los medios y la evaluacin; nivel de coherencia/congruencia y grado de relevancia de la
informacin. Mediante el anlisis de contenido y el juicio de expertos)
Adecuacin a los destinatarios. (Ver la coherencia interna, la congruencia externa, la
sensibilizacin del personal, la participacin y el consenso existente. Mediante el anlisis
de contenido, el contraste de datos de observacin, los estudios prospectivos y el anlisis
de la demanda)
Nivel de viabilidad. (Ver el realismo en las metas, existencia de apoyos y de recursos y
capacitacin del profesorado. Mediante el contraste recursos/exigencias, entrevista con el
personal y observacin de la realidad)

Segundo momento: Hacer una evaluacin procesual considerando las dimensiones siguientes:
 Ejecucin: actividades, secuencia, temporalizacin, etc. (Ver la conformidad con el plan
desfases, resultados parciales, efectos no planteados-. Mediante la observacin, el dilogo,
las entrevistas, el anlisis de tareas)
Marco: clima social, coherencia institucional, etc. (Ver si est incluido en el proyecto
general y la satisfaccin del personal. Mediante la observacin, el dilogo, las entrevistas,
el anlisis de tareas)

Tercer momento: Evaluar el producto obtenido considerando las dimensiones:

Medida y logros: constatacin, contraste. (Ver las circunstancias, normatividad,
criterialidad, idiosincrasia. Mediante pruebas de diversa naturaleza, inventarios,
cuestionarios, escalas, diseos experimentales, diseos cuasi-experimentales, tcnicas
correlacionales, diseos longitudinales y tratamiento cuantitativo-cualitativo)
Valoracin: criterios, referencias. (Ver las circunstancias, normatividad, criterialidad,
idiosincrasia. Mediante pruebas de diversa naturaleza, inventarios, cuestionarios, escalas,
diseos experimentales, diseos cuasi-experimentales, tcnicas correlacionales, diseos
longitudinales y tratamiento cuantitativo-cualitativo)
Continuidad: decisiones, incorporacin de las mejoras, seguimiento. (Ver la participacin,
control interno del plan y sistema de revisin. Mediante diseos longitudinales, estudios de
casos, anlisis de documentos y tratamiento cuantitativo/cualitativo)

Por otra parte, Zabalza (1977:88) recomienda que los pasos en la evaluacin de un programa
educativo deben ser los siguientes:

a) Especificacin de los objetivos que se desean evaluar y razn para evaluarlos.

b) Transformacin de los objetivos educativos en tipos o niveles de eficiencia.
c) Seleccin de las variables relevantes que se vayan a utilizar.
d) Seleccin y construccin de los instrumentos de obtencin de datos.
e) Determinacin de la muestra y el campo de utilizacin para obtener las informaciones
necesarias.
f) Recoger los datos, ordenarlos y analizarlos para obtener el diagnstico de la situacin que
se evala.
g) Interpretacin y valoracin de datos, mostrando posibles alternativas de accin.
h) Toma de decisiones respecto a la permanencia, modificacin o abandono del programa.

Del Carmen (citado por Parcerisa, 1996: 70), seala que junto al material diseado para el
alumnado debe elaborarse una gua didctica y propone como dimensiones de anlisis las
siguientes:
a) Caracterizacin general (mbito de aplicacin del proyecto, descripcin de los materiales,
objetivos generales...).
b) Adecuacin al curriculum prescriptivo (correspondencia entre los objetivos generales del
proyecto y los del curriculum prescriptivo; entre unos y otros contenidos...).
c) Adecuacin a los criterios que comparte el equipo de profesores que va a utilizar los
materiales (acomodacin de la propuesta al Proyecto Curricular de Centro, acuerdo del
equipo docente con los objetivos generales del proyecto y con la orientacin en el
tratamiento del rea o reas...).
 DIFICULTADES EN LA EVALUACIN DE PROGRAMAS
El proceso evaluador de los programas de orientacin no va a estar exento de algunas
dificultades. Resumiendo las ideas aportadas por distintos autores podemos establecer dos
grandes grupos:
a) Dificultades organizativas. Es conveniente tener en cuenta aquellos problemas que nos
podamos encontrar durante las fases del proceso, siendo algunos de ellos los siguientes:

Desvinculacin del profesorado y el centro en la planificacin y el diseo del programa.

No Inclusin del programa en el proyecto educativo del centro, por lo que se ve como
algo aislado y ajeno.
No establecimiento de responsabilidades y grado de implicacin de los distintos
miembros de la comunidad educativa en el desarrollo del programa.
Participacin de personas ajenas al centro en tareas de observacin y evaluacin.
Seleccin de los grupos.
Formacin del Profesorado.

b) Dificultades didcticas. Las principales que podemos encontrar giran en torno a:

Falta de concordancia entre los objetivos del programa y los del centro.
Delimitacin de objetivos, metas y criterios evaluativos. En este sentido es bastante
clarificador la postura defendida por Rodrguez Espinar (1993:591) sobre la dificultad de
medir los objetivos si no han sido formulados en resultados de conducta cuando afirma:
No hay tampoco unanimidad entre los profesionales sobre cules son los resultados
ms adecuados para medir los logros en orientacin, y, por ltimo, a veces cuesta
decidirse por unos resultados a corto plazo, de lo que resulta fcil recoger informacin,
o por otros, ms a largo plazo, como indicadores de la efectividad del programa.
Saber interpretar los resultados de la evaluacin.