Evaluación por evidencias

Evaluación
• Existe una gran brecha entre la formulación de objetivos de
evaluación y su materialización en tareas específicas.

• Para cerrar la brecha es necesario un proceso de especificación

paulatina:

• Modelo Basado en Evidencias. (Robert J. Mislevy, ETS).

Modelo Basado en Evidencias
• Se refiere a un conjunto de procesos que parte de la identificación de
las dimensiones de evaluación y la descripción de las categorías que
las conforman (procesos del sujeto y en aspectos disciplinares) hasta
la definición de las tareas que debe desarrollar un estudiante en
una evaluación, de manera que estas últimas se constituyan en
evidencias que den cuenta de las competencias, los conocimientos o
las habilidades que se quieren medir.
MBE
• Es necesario articular los propósitos y objetivos de la evaluación con
las tareas que los estudiantes deben desarrollar en el marco de una
prueba  validez de la prueba  información confiable que
permita hacer juicios válidos sobre el desempeño de los estudiantes

• Definir cuáles son los resultados de aprendizaje que se espera que los
estudiantes alcancen y que se quieren medir, constituye el paso
más importante en el diseño de una evaluación centrada en el
modelo de evidencias.
Análisis del dominio
• A nivel sistémico: referentes de política educativa.

• A nivel particular: metas institucionales educativas para la enseñanza

y el aprendizaje.

Una vez se han definido los resultados de aprendizaje y se han

determinado aquellos que se quieren evaluar  diseñar o seleccionar
actividades de evaluación que permitan recoger las evidencias que se
requieren para hacer juicios pertinentes.
¿Qué se quiere medir?
• En el caso de las evaluaciones centradas en las competencias, se
refiere a la definición de la competencia y de los rasgos que se
quieren rastrear dentro de la misma.
Afirmaciones
Especifican el referente a partir del cual se harán las inferencias sobre
los resultados

• Las afirmaciones son enunciados globales que se hacen acerca de

los conocimientos, capacidades y habilidades de los estudiantes.
• Las afirmaciones involucran acciones complejas que articulan
varios procesos de pensamiento en un marco conceptual o disciplinar
amplio, por lo cual no es posible medirlas directamente…
• Generalmente están enunciadas a través de verbos no observables,
por ejemplo: comprende, interpreta, analiza.
Evidencias
Se refieren a enunciados que representan acciones o ejecuciones
observables que revelan el constructo a medir y mediante las cuales
es posible verificar si este ha sido alcanzado.

• Asegurar que estas sean pertinentes con las características o

restricciones de una prueba  por ejemplo no todo se puede medir
a través de una prueba de papel y lápiz.
Tareas
Son enunciados que representan una actividad específica; corresponden a
una descripción de un potencial o familia de preguntas o de actividades.

• Se consideran los diferentes contextos y situaciones en las que el

estudiante debe aplicar conocimientos y desplegar habilidades para
resolver la tarea planteada.

• Es importante explicitar todas las características de contenido y de

procedimiento que involucra y que se requieren para solucionarla 
escala de dificultad para discriminar escala del constructo (ej.
Habilidad).
Caracterización de los resultados
• La evaluación hace parte de los procesos de formación
 proporcionar información sobre la efectividad del proceso de
enseñanza y de aprendizaje  retroalimentación de la labor docente
 diseñar nuevas estrategias pedagógicas para mejorar los
aprendizajes de los estudiantes.
Retroalimentación
• La evaluación es insuficiente cuando únicamente se da una simple
retroalimentación respecto de si las respuestas de los estudiantes son
correctas o incorrectas.

• Una retroalimentación efectiva debe estar vinculada, explícitamente, a

criterios de desempeño con los cuales sea posible diseñar estrategias de
mejoramiento acordes con las necesidades específicas de los estudiantes.

• Permite comparar los resultados de un proceso de enseñanza determinado

con los objetivos previamente fijados, con unos patrones de ejecución o
con un conjunto de situaciones deseables y previamente definidas.
Bibliografía
• Yanneth Castelblanco. Contribución del modelo de evidencias al
diseño de evaluaciones estandarizadas y de aula. Revista Magisterio.
Organización en el MBE
• El DBE organiza el trabajo de diseño e implementación en términos de
estratos o niveles.

• Cada uno de los estratos o niveles está informado o tiene implicaciones para
los otros estratos:

• Estándar
• Competencia
• Afirmación
• Evidencia
• Tarea
 Estrato Qué es
“Uno de los parámetros de lo
que todo niño, niña y joven
debe saber y saber hacer para
lograr el nivel de calidad
esperado a su paso por el
sistema educativo” (MEN, 2006,
p. 9)
Estándar “Es un criterio claro y público
que permite juzgar si un
estudiante, una institución o el
sistema educativo en su
conjunto cumplen con unas
expectativas comunes de
calidad” (MEN, 2006, p. 11)
Para qué
Guiar el diseño de currículos,
planes de estudio, proyectos
escolares y el trabajo de
enseñanza en el aula
Producción de textos escolares,
materiales y demás apoyos
educativos
Diseño de prácticas evaluativas
dentro de la institución
Criterios comunes para las
evaluaciones externas
(MEN, 2006, p. 11)
 Estrato Qué es Para qué
“Saber hacer en situaciones Para superar la visión tradicional
concretas que requieren la de educación que privilegiaba la
aplicación creativa, flexible y transmisión y memorización de
responsable de contenidos
conocimientos, habilidades y
actitudes” (MEN, 2006, p. 12) Favorecer una pedagogía que
permita a los estudiantes
Competencia “Un saber hacer flexible que comprender los conocimientos y
puede actualizarse en distintos utilizarlos efectivamente dentro
contextos … capacidad de usar y fuera de la escuela, de
los conocimientos en acuerdo con exigencias de los
situaciones distintas de distintos contextos
aquellas en las que se
aprendieron” (MEN, 2006, p. (MEN, 2006, p. 12)
12)
 Estrato Qué es Para qué
Enunciado sobre los Comunicar el significado
conocimientos, habilidades de los resultados de una
y capacidades de los evaluación
estudiantes que serán
evaluados
Afirmación
Identifica el propósito de la
prueba atendiendo a la
pregunta: ¿qué se quiere
decir sobre los estudiantes
a partir de sus respuestas
en una evaluación?
 Estrato Qué es Para qué
Enunciado que representa Asegurar la pertinencia de
conductas o productos una prueba, según sus
observables, con el que es características o
posible verificar los restricciones
desempeños a los que se
refieren las afirmaciones Cada afirmación debe
Evidencia
tener el número de
Responde a la pregunta: evidencias suficiente para
¿qué tiene que hacer el sustentarla
evaluado que permita
hacer inferencias sobre su
desempeño?
 Estrato Qué es
Enunciado que representa
una descripción de una
potencial familia de
preguntas. Es específico y
puede diferenciarse en su
Tarea
nivel de complejidad
Para qué
Caracterizar la dificultad /
complejidad de las
preguntas
Dar las pautas para la
construcción de preguntas

Se refiere a lo que se pide

a los evaluados que hagan
en una prueba
Estructura de un ítem
Contexto
Es la información necesaria que sitúa conceptualmente al evaluado para la
resolución de una problemática.

• Provee elementos necesarios y suficientes para focalizar la tarea de evaluación.

• Puede ser un texto, gráfica, dibujo, tabla, o cualquier información a partir de la
cual se deriva el enunciado.
• Debe estar relacionado con la tarea de evaluación y con las opciones de
respuesta.
• Deber ser coherente con las condiciones técnicas de la evaluación (tiempo y
complejidad).

La selección del contexto es una labor exigente en cuanto a que su propósito es

justamente contextualizar y no confundir al evaluado.
Enunciado
• Es el planteamiento de la problemática que se espera sea resuelta por
el evaluado.
• En el enunciado se expone la tarea de evaluación elegida para dar
cuenta del objeto evaluado y por tanto, dirige el esfuerzo del
evaluado para generar o seleccionar una respuesta.
• Este debe proveer una idea completa y clara de la tarea de evaluación
y contener la información necesaria y suficiente para contestar el
ítem.
Orientaciones sobre los enunciados
• Utilizar enunciados afirmativos.
• Resaltar en mayúscula o negrilla la negación en caso de ser necesario.
• Evitar el uso de la doble negación ya que puede afectar la
comprensión del ítem.
• Evitar enunciado demasiado extensos y poco atractivos ya que
desmotivan la lectura, disminuyen el tiempo de respuesta y fatigan.
• Asegurar la coherencia interna del enunciado y de este con las
opciones de respuesta.
Orientaciones sobre las opciones de
respuesta
• Evitar la repetición de expresiones en las opciones de respuesta si
estas se pueden incluir en el enunciado del ítem.
• Evitar el uso de expresiones: todas o ninguna de las anteriores, nunca,
siempre, totalmente, absolutamente, completamente. En su lugar
construir alternativas de respuestas plausibles a la pregunta.
• Mantener la independencia entre las opciones. No deben ser
sinónimas.
• Evitar opciones fácilmente descartables.
Taller
Especificación de una prueba basada en el MBE.

1. Análisis de dominio.
2. Determinación de afirmaciones y evidencias.
2.1. Criterios de retroalimentación.
3. Construcción de actividades o ítems.