04/05/2015

Programa
Evaluacin aplicada a contextos
educativos

Tema 1- La evaluacin educativa: concepto, contextos

de evaluacin y finalidades.

Prof. Rubn Palomo Seldas

Dpto. Psicologa Evolutiva y de la Educacin

Tema 2- Evaluacin psicopedaggica: Instrumentos,

tipos de informes, asesoramiento a docentes.

rupalomo@ucm.es
Despacho 2124
Tutoras martes y jueves 13:00 a 14:30

Tema 3- Evaluacin de centros educativos: Evaluaciones

externas e internas. Procesos de los centros. Clima
escolar.

HISTORIA

Antecedentes remotos (2000 a.c.-1900)

TEMA 1.
LA EVALUACIN
EDUCATIVA

China 2000ac; Grecia s.V; Jesuitas 1599; Juan Huarte de San

Juan, 1575; Luis Vives;
Revolucin Industrial (s. XIX) y la mejora de los sistemas
educativos

Inspectores escolares

Avances en los campo de la medicin (Fetchner, Wunt, Galton,

Binet)

Mann (1845) pruebas de rendimiento

Rice, primera evaluacin formal (1895-1905)

04/05/2015

HISTORIA

HISTORIA

Antecedentes remotos (2000a.c.-1900)

Antecedentes remotos (2000a.c.-1900)

Etapa de la eficiencia y de los tests (1901-1929)

Etapa de la eficiencia y de los tests (1901-1929)

Influencia del positivismo del circulo de Viena

Etapa Tyler (1930-1945)

Desarrollo de mtodos estadsticos

Inocencia (1946-1957)

Evaluacin de expertos: evaluacin eficiente

Desarrollo de tests psicolgicos y tests escolares

Etapa Tyler (1930-1945)

Docimologia Francesa

Tyler: hacia la verdadera evaluacin educativa

nuevo concepto de CV (objetivos/ actividades/ organizacin/

evaluacin) y de la evaluacin

J.Dewey, Movimiento de Educacin Progresista (EEUU)

Estudio de los 8 aos (Smith y Tyler, 1942)

Se reduce el inters por la educacin, aunque sta se expande

Avances metodolgicos y tcnicos (tests y taxonomas de
objetivos)

Expansin (1958-1972)

Gran inversin en educacin

Accountability

1958, EEUU: fondos para evaluar los programas renovados de

mates y ciencias
Reflexin sobre las prcticas educativas

HISTORIA

Profesionalizacin (1973-actualidad)

La evaluacin como campo diferenciado (de la investigacin

educativa) y profesionalizado

Proliferacin de publicaciones y aparicin de revistas especializadas

mbito especifico: investigacin evaluativa

Cursos especializados diferenciados de metodloga

Asociaciones profesionales

Orientacin de la evaluacin a la toma de decisiones

Se multiplican los modelos de evaluacin

Evaluaciones que informen sobre los logros pero tambin sobre

los aspectos del programa que funcionan y los que no

Scriven (1967)

Glaser (1963)

CONCEPTO

Varia en funcin de las posiciones ideolgicas y metodolgicas

imperantes en cada momento.
Ligado a los cambios educativos.
Clasificacin de las definiciones de evaluacin en funcin de los
aspectos a los que hacen referencia:
1- LOGROS de los alumnos

Expansin de la evaluacin de programas entre pases

occidentales
Pluralidad de perspectivas, modelos y mtodos

Cronbach (1963)

Tyler (1950, 1970): Proceso para determinar en qu

medida los objetivos educativos han sido alcanzados
Lafourcade (1977): Etapa del proceso educacional que tiene
por fin controlar de modo sistemtico en qu medida se han
logrado los resultados previstos en los objetivos que se
hubieran especificado con antelacin
Gronlund (1985): Proceso sistemtico de recopilar, analizar e
interpretar informacin para determinar el grado en que los
alumnos han logrado los objetivos instructivos

Van mas all de los resultados

04/05/2015

CONCEPTO
2- Determinacin del MRITO (capacidad del programa de lograr
los que pretende) o VALOR (capacidad del programa para
responder a las necesidades)

Suchman (1967): Proceso de emitir juicios de valor

Stufflebeam y Skinkfield (1987): Proceso sistemtico,
planificado, dirigido y realizado con el fin de ayudar un grupo
de clientes a juzgar y/o perfeccionar el valor y/o mrito de
algn objeto
Mateo (1998): Proceso de recogida de informacin orientado
a la emisin de juicios de mrito o de valor respeto de algn
sujeto, objeto o intervencin con relevancia educativa

CONCEPTO
4- Subrayan la importancia de la METODOLOGA

Cronbach (1963) Proceso de recopilacin y utilizacin de la

informacin para tomar decisiones

Tenbrinck (1984): Proceso de obtener informacin y usarla para

formar juicios que a su vez se utilizarn en la toma de decisiones
De Miguel (2000): Proceso sistemtico de bsqueda de
evidencias para formular juicios de valor que orienten la toma
de decisiones

EVALUACIN: CONCEPTO
INTEGRACIN DE LAS DEFINICIONES ANTERIORES

La evaluacin es el proceso de identificacin,

recogida y anlisis de informacin relevante
que podr ser cuantitativa o cualitativa- de manera
sistemtica, rigurosa, planificada, dirigida, objetiva,
creble, fiable y vlida para emitir juicios de valor
basados
en
criterios
y
referencias
preestablecidos para determinar el valor y el
mrito del objeto educativo en cuestin, a fin de
tomar decisiones que ayuden a optimizar el
mencionado objeto
Lukas y Santiago (2009)

Ruttman (1984): Es la utilizacin del mtodo cientfico con la intencin de

tomar decisiones sobre la implantacin de un programa y medir sus resultados
Garca Llamas (1995): Proceso de identificacin, recoleccin y
tratamiento de datos para obtener una informacin que justifique una
determinada decisin

5- AGLUTINAN aspectos anteriores

3- Basadas en la informacin para la TOMA DE DECISIONES

Berk (1981): Es la aplicacin del mtodo cientfico para recoger la informacin

fiable y vlida necesaria para tomar decisiones sobre un programa educativo

Prez Juste (1995, 2000): La valoracin a partir de criterios y referencias preespecificados, de la informacin tcnicamente diseada y sistemticamente
recogida y organizada, sobre cuantos factores relevantes integran los procesos
educativos para facilitar la toma de decisiones de mejora
Casanova (1995): Recogida de informacin rigurosa y sistemtica para
obtener datos vlidos y fiables acerca de una situacin con objeto de
formar y emitir un juicio de valor con respecto a ella. Estas
valoraciones permitirn tomar decisiones consecuentes en orden a
corregir la situacin evaluada
Bordas Alsina (1999): Detectar cmo es una realidad educativa alumno,
grupo, clase, centro, planificacin curricular, sistemas educativo..- sea desde
una perspectiva cualitativa, cuantitativa o mixta, con el fin de tomar decisiones

Evolucin del concepto de

evaluacin
Control

FINALIDAD

Perfeccionamiento,
mejora y aprendizaje

Certificar

OBJETIVO

Instrumento de mejora

Centrada en el alumno

OBJETO

Holstica

Puntual

MOMENTO

A lo largo del proceso

Esttica

CONCEPCIN

Dinmica

Evaluacin profesional

RESPONSABILIDAD

Evaluacin participativa

04/05/2015

REFERENTES PARA LA
VALORACIN

DEFINICIN

La evaluacin es la actividad para:

Aprender a conocer y a hacer

Aprender a convivir
Aprender a ser

Obtener informacin sobre las dimensiones ms

relevantes de un objeto

Medir

Objetivos de la educacin

Determinar la valoracin de su mrito y de su

valor
Valorar

Competencias

Contribuir a mejorar su funcionamiento y sus

resultados

la capacidad de aplicar conocimientos y destrezas en

materiales clave y de analizar, razonar y transmitir ideas con
eficacia al tiempo que se plantean, resuelven e interpretan
problemas en situaciones diferentes (OCDE, 2005, p.1)

Decidir

REFERENTES PARA LA
VALORACIN
COMPETENCIAS CLAVE DEL PROYECTO DeSeCo

Interactuar en grupos socialmente heterogneos

Actuar con autonoma

Relacionarse bien con otros

Cooperar
Manejar y resolver conflictos
Comprender, considerar y poder actuar en la sociedad o el
mundo global
Elaborar y desarrollar proyectos y planes de vida
Defender y afirmar derechos, necesidades, intereses, lmites

Usar herramientas interactivamente

Lenguaje, smbolos y textos

Conocimiento e informacin
Tecnologa

REFERENTES PARA LA
VALORACIN

COMPETENCIAS (U.E.)

Comunicarse en la lengua materna

Comunicarse en lenguas extranjeras
Competencia matemtica y competencias en
bsicas en ciencia y tecnologa
Competencia digital
Aprender a aprender
Competencias sociales y cvicas
Sentido de la iniciativa y espritu de empresa
Conciencia y expresin culturales

Recomendaciones del Parlamento Europeo y del consejo de 18 de dic. de

2006 sobre las competencias clave para el aprendizaje permanente.

04/05/2015

Prembulos
LOE (2006)

LOMCE (2013)

Las sociedades actuales conceden gran importancia a

la educacin que reciben sus jvenes, en la
conviccin de que de ella dependen tanto
el bienestar individual como el colectivo. La
educacin es el medio ms adecuado
para construir su personalidad, desarrollar al
mximo sus capacidades, conformar su
propia identidad personal y configurar
su comprensin de la
realidad, integrando la dimensin
cognoscitiva, la afectiva y la axiolgica.
Para la sociedad, la educacin es el medio
de transmitir y, al mismo tiempo,
de renovar la cultura y el acervo
de conocimientos y valores que la sustentan,
de extraer las mximas posibilidades de
sus fuentes de riqueza, de fomentar
la convivencia democrtica y el respeto a las
diferencias individuales, de promover
la solidaridad y evitar la discriminacin, con
el objetivo fundamental de lograr la
necesaria cohesin social. Adems, la
educacin es el medio ms adecuado para
garantizar el ejercicio de la ciudadana
democrtica, responsable, libre y crtica, que
resulta indispensable para la constitucin
de sociedades avanzadas, dinmicas y
justas. Por ese motivo, una buena educacin
es la mayor riqueza y el principal recurso de
un pas y de sus ciudadanos.

La educacin es el motor que

promueve la competitividad de
la economa y las cotas de
prosperidad de un pas; su
nivel educativo determina su
capacidad
de competir con xito en
la arena internacional y de
afrontar los desafos que se
planteen en el futuro. Mejorar el
nivel de los ciudadanos en el
mbito educativo supone abrirles
las puertas a puestos de trabajo
de alta cualificacin, lo que
representa una apuesta por
el crecimiento econmico y por
conseguir ventajas
competitivas en el mercado
global.

COMPONENTES DE LA
EVALUACIN
1234567-

FINALIDAD
OBJETO
INFORMACIN
AGENTE
MOMENTO
VALORACIN
INFORME

REFERENTES PARA LA
VALORACIN
Objetivos de la educacin

Aprender a conocer y a hacer. Competencias

Aprender a convivir
Aprender a ser. Educacin moral y cvica

Factores de la calidad de la educacin

Contexto sociocultural
Profesorado
Currculum
Evaluacin
Participacin
Liderazgo
Recursos disponibles

COMPONENTES DE LA EVALUACIN

FINALIDAD

Funcin formativa: utilizacin de la

evaluacin como medio para mejorar
el objeto evaluado. Se realiza
paralelamente a la actividad evaluada.
Funcin sumativa: carcter de control,
de certificacin de resultados. Valora
procesos o productos finalizados.

04/05/2015

COMPONENTES DE LA EVALUACIN
FINALIDAD
FORMATIVA

Evala procesos
Elemento interno del p.
enseanza-aprendizaje

OBJETO

Categoras

Unidades evaluadas

Actores de la
educacin

Alumnado

Evala productos
Evaluacin puntual al final
del proceso

Organizaciones

SUMATIVA

COMPONENTES DE LA EVALUACIN

Profesorado
Educacin formal

Instituciones educativas:
Centros de Infantil, Primaria y
Secundaria

Educacin no formal

Objetivo de mejora

Medidas inmediatas

Objetivo: determinar el
grado de cumplimiento de
los objetivos y valorar +
el producto
Medias a medio-largo plazo

Elementos
formales de
materializacin
de la
intervencin
educativa

Diseos curriculares y proyectos educativos

Educativos
Programas

De educacin para el trabajo

Socioeducativos

Materiales educativos

(Adaptado de Jornet, 2001) en Lukas y Santiago 2009

MBITOS

Alumnos

MBITOS

POLITICAS EDUCATIVAS

Alumnos

ESCUELA

Profesorado

Centros

Programas

Sistema educativo

ALUMNOS

PROGRAMAS

PROFES.

El proceso de enseanza-aprendizaje
y la evaluacin
Conocimientos, procedimientos y
actitudes y competencias
Evaluacin tradicional
Evaluacin alternativa

Evaluacin de ejecucin
Evaluacin autentica

Proceso de evaluacin

04/05/2015

MBITOS

MBITOS

Profesorado

Evaluacin sistemtica de la actuacin profesional

y/o cualificaciones de una persona en relacin a
un cometido profesional y algn fin institucional
defendible

Programas
Objetivo de la evaluacin de programas: Valorar si el
programa ha, est o va a generar los efectos
esperados, sealando los puntos fuertes y dbiles del
mismo en tres momentos:

Necesidad de llegar a acuerdos con los profesores.

Propsitos de la valuacin

Orientada a los resultados

Orientada a la mejora

Qu evaluar: conocimiento de la materia; competencias

instruccionales; competencias evaluativas;
profesionalidad
Fases: Ideacin / Desarrollo / Implementacin /
Metaevaluacin

Antes de la implementacin del programa

Durante su desarrollo como fuente de mejora continua
Despus de la finalizacin para analizar la efectividad

La evaluacin ofrece informacin sobre el valor

intrnseco, instrumental, comparativo, de idealizacin y/o
de decisin del programa
Finalidad: Eficacia, valoracin por parte de los
implicados, eficiencia, eficiencia
Criterios de valoracin de programas: eficacia,
eficiencia, basados en los participantes, juicio experto de
profesionales, calidad total

COMPONENTES NECESARIOS EN LOS

PROCESOS DE EVALUACIN DE CENTROS
Contexto

Amplio consenso en valorar

diferentes componentes:
Modelo CIPP (Stufflebean y
Shinkfield, 1987)

Entrada
Input

Proceso

MBITOS

Finalidades de la evaluacin del Sistema Educativo:

Producto
Output

Nivel de contexto: contexto sociocultural, tamao, diagrama de flujo

sobre promocin y repeticin, personal,
Nivel de entrada: datos iniciales de los alumnos, tendencias con
respecto a los cambios realizados en aos anteriores,
Nivel de procesos: procesos de centro (conocimiento del funcionamiento
del centro, valoracin del equipo directivo, participacin, comunicacin,
liderazgo, clima de trabajo) y procesos de aula (planificacin de la
enseanza, innovacin en la evaluacin, amplitud de contenidos,
capacidad de mantener ambientes de trabajo ordenados, atencin a la
diversidad).
Nivel de producto: resultados de los alumnos, actitudes, valores,
valoracin del centro escolar por parte de alumnos, padres y profesores,

Sistema Educativo

Mejora
de
escuelas

Mejorar su calidad
Ofrecer informacin para tomar decisiones
Contribuir al debate social sobre educacin

Funciones
Diagnstica
Rendicin de cuentas
Control / acreditacin

Toma de decisiones
Comparacin
Funcin prospectiva

Calidad como: relevancia, equidad, eficacia, eficiencia

04/05/2015

OBTENCIN DE LA
INFORMACIN

COMPONENTES DE LA EVALUACIN

INFORMACIN

Fuentes de informacin:

Instrumentalizacin:

Personas, documentos o entidades que

proporcionan datos necesarios para la
evaluacin
Estrategias, tcnicas e instrumentos
necesarios para recoger la informacin

Tratamiento de la informacin:

Anlisis de la informacin recogida

COMPONENTES DE LA EVALUACIN

Heteroevaluacin: una persona evala a otra

Autoevaluacin: una persona se evala a s misma
Coevaluacin: evaluacin mutua de un trabajo
realizado entre varios

Evaluacin de programas o de centros:

EXTERNA: agentes externos al programa o centro

INTERNA / Autoevaluacin: los propios evaluados
evalan.
En programas sociales, en la evaluacin interna,
los agentes son miembros de la misma entidad
pero no implicados en el programa
Mixta: combinacin de agentes

Observacin

Entrevista

Cuestionarios

Pruebas de aprendizaje

Pruebas estandarizadas

Otros sistemas

Evaluacin INTERNA

AGENTES EVALUADORES

Evaluacin del alumnado:

VENTAJAS

Legitimidad conferida al
proceso
Mejor comunicacin
Mayor capacidad de
dinamizar la vida del
centro
Relacin ms estrecha
con las decisiones de
mejora que se puedan
adoptar
Mayor conocimiento y
comprensin del
objeto de evaluacin y
del contexto
Mayor aceptacin de los
evaluados

INCONVENIENTES

Falta de tiempo
La falta de distancia
emocional y el
compromiso puede
convertir el proceso
evaluador en
autojustificacin
Menor objetividad y
credibilidad
Falta de contraste
externo

04/05/2015

Evaluacin EXTERNA
INCONVENIENTES

VENTAJAS

Mayor tiempo de
dedicacin a la
evaluacin
Mayor rigor
(especializacin tcnica)
Mayor credibilidad de
los resultados
Imparcialidad de las
opiniones
Establecer una
referencia externa en
las valoraciones
Mayor independencia

Dificultades para
entrar en la vida del
centro
Mayor rechazo por parte
de la comunidad escolar
Sesgo informativo

COMPONENTES DE LA EVALUACIN

VALORACIN (I)

Supone la emisin de un juicio de valor. Se necesita referentes

(criterios de evaluacin) que permitan valorar la calidad del
objeto evaluado. Aspectos necesarios:
1. Seleccin de CRITERIOS: en ellos nos apoyaremos para
decidir el xito o no del programa.

La idoneidad o suficiencia
La pertinencia o propiedad
La eficiencia o rendimiento
La eficacia y la efectividad
La coherencia o congruencia
La conformidad o legalidad
La vigencia o actualidad
La oportunidad o sincrona
La aceptacin o satisfaccin
El impacto

Varan en funcin de los objetivos de la evaluacin.

COMPONENTES DE LA EVALUACIN

MOMENTO

Est determinado por el objeto evaluado y el propsito de la

evaluacin
1. INICIAL

Rendimiento de alumnos o procesos de enseanzaDiagnstica

aprendizaje: detectar situacin inicial para actuar
consecuentemente.
Programas: realizada en la fase de diseo para:
Comprobar la pertinencia del programa;
Coherencia y congruencia interna: Evaluar la
organizacin, examinar la viabilidad y coherencia entre
medios, recursos y objetivos; objetivos generales,
especficos y metas; diagnostico y proposiciones
Rentabilidad econmica de la acciones para alcanzar los
objetivos propuestos
2. PROCESUAL: detectar en qu medida se estn cumpliendo el
Formativa
programa en funcin de la propuesta inicial. Sirve para
reorientar,
corregir, subsanar el propio proceso
3. FINAL: se pretender establecer la congruencia entre los objetivos
alcanzados y los planteados. Tener en cuenta los resultados no
Sumativay la
esperados, y sealar la relacin entre los resultados obtenidos
influencia del programa en la consecucin de esos resultados.
Eficacia potencial, eficiencia y efectividad real.

COMPONENTES DE LA EVALUACIN

VALORACIN (II)

2. Desarrollo de INDICADORES: realizacin observable de

los criterios. Aspectos especficos sobre los que recoger la
informacin. Datos cuantitativos o cualitativos recogidos
sistemticamente.
3. Establecimiento de ESTNDARES: sirven como trminos
de comparacin que delimitan la consecucin o no del
xito y el grado de consecucin.
Evaluacin normativa o relativa: el estndar o
referente es el grupo de referencia.
Evaluacin criterial o absoluta: el referente son los
criterios de calidad o excelencia previamente
establecida.
Evaluacin personalizada, ideogrfica,
idiosincrsica o de progreso: el referente es el
propio objeto evaluado

04/05/2015

COMPONENTES DE LA EVALUACIN

INFORME

Describe los resultados favorables y

desfavorables del objeto evaluado.
Muy importante saber:

Finalidad y alcance

1.

INFORME

Apartados habituales del informe:

Introduccin: origen, motivos, finalidad, contexto y
limitaciones de evaluacin,
II. Objeto y finalidad de la evaluacin: definicin del
objeto, criterios, parmetros y estndares
III. Diseo del modelo de evaluacin: proceso seguido,
descripcin del modelo, instrumentos y tcnicas de
recogida de informacin, informacin recogida,
descripcin del anlisis...
IV. Resultados: resultados obtenidos e interpretacin.
V. Conclusiones: respuestas a las preguntas de la
evaluacin, puntos fuertes y puntos dbiles.
VI. Recomendaciones: sugerencias de mejora
VII. Anexos: resumen del informe, instrumentos, datos
brutos, muestras de observaciones,
I.

FASES DE LA EVALUACIN

Clarificar el origen y la necesidad de la evaluacin

Valorar la viabilidad de la evaluacin
Formar el equipo de evaluacin
Determinar la finalidad y el objeto de la evaluacin
Decidir la naturaleza de la evaluacin

Planificar

2.

Especificar preguntas a las que la evaluacin responder y criterios de

evaluacin
Planificar la recogida de la informacin
Seleccionar / crear instrumentos de evaluacin

Tratamiento de la informacin

3.

4.

Quin o quines son los interlocutores de

ese informe,
A quin va dirigido (audiencias),
Qu uso se va a hacer de l
Factores polticos y contextuales que
puedan dificultar la utilizacin del informe.

COMPONENTES DE LA EVALUACIN

Analizar la informacin cuantitativa y cualitativa

Interpretar la informacin

Informe y discusin
Devolver y contrastar la informacin
Elaborar el informe

Difundir los resultados

Meta-evaluacin

5.

Utilidad de la evaluacin
Viabilidad de la evaluacin

10