Evaluaciones y rbricas

Cuando ya se ha identificado aquello en lo que los estudiantes debern demostrar su dominio, lo que queda por hacer es disear una forma de evaluacin estableciendo el criterio que habr de utilizarse para determinar hasta dnde han llegado en su aprendizaje. Por ejemplo, digamos que se ha optado por utilizar un test como mtodo de evaluacin para determinar los logros en torno a un objetivo particular. Qu criterio, o estndar, definir el xito o el fracaso? Se alcanzar el objetivo cuando los estudiantes obtengan un puntaje de 70, 80, o 90? Muy a menudo los tests y cuestionarios (bien confeccionados, que es el mejor modo de asegurar su validez y confiabilidad) son el recurso de evaluacin ms eficiente y apropiado. Pero no son los nicos, y no siempre son los ms convenientes. Qu otros modos de evaluacin pueden imaginarse, aparte de los tests? Una de las alternativas es la de la "evaluacin autntica". Una evaluacin autntica involucra el desarrollo de un producto tangible que refleje el nivel de aprendizaje. Los productos tradicionales, como ensayos o lecciones orales, pueden ser autnticos si se los convierte a formatos de comunicacin real, como por ejemplo cartas, reportes tcnicos, presentaciones pblicas, discursos, pginas web, etc. Consideremos el siguiente ejemplo para evaluar su propio nivel de comprensin sobre el concepto de los logros del aprendizaje. Queremos saber qu entiende usted por "un logro en el aprendizaje". Un modo de evaluar esa comprensin sera presentarle un cuestionario sobre temas de diseo instruccional. En esta instancia, Ud. debera responder a una serie de preguntas concebidas de antemano por el evaluador, lo cual ya implica guiarlo en el recorrido de los problemas. Otro modo sera pedirle que directamente formule objetivos de aprendizaje para un tema en particular y que los justifique. Esta sera una evaluacin autntica que no slo demostrara qu tan bien conoce la teora, sino que adems probara si Ud. es capaz o no de aplicar el concepto de un modo significativo y valioso. Ahora bien, cmo juzgar si su trabajo sobre los logros del aprendizaje est en un nivel aceptable de comprensin y aplicacin? Una evaluacin autntica implica de parte del evaluador un anlisis interpretativo del trabajo del estudiante que debe ser esencialmente uniforme, justo y objetivo. En otras palabras, el evaluador debe poseer un estndar de correccin. En principio, esto parece sencillo de implementar, pero consideremos las opciones. En una prueba objetiva -por ejemplo un test de seleccin mltiple- las respuestas correctas pueden cotejarse contra un listado preimpreso y no estn sometidas a interpretacin. Si bien el alumno no las conoce de antemano, sabe que la correccin no depender de ningn anlisis personal del evaluador, sino que surgir simplemente de cotejar lo respondido contra ese listado. En cambio en una evaluacin autntica, donde el estudiante responde a consignas, incluso cosas tan elementales como cul debera ser la longitud de cada exposicin se vuelven conflictivas.

Es imprescindible, entonces, tanto para acotar el trabajo de correccin por parte del evaluador como para dar seguridad al alumno de que su examen ser corregido objetivamente, informar de antemano sobre los criterios que se utilizarn para interpretar la produccin del estudiante. Un mtodo diseado para facilitar la calificacin y acelerarla, as como para proveer de una ms til realimentacin a los alumnos, es el uso de rbricas. Cuando calificamos productos autnticos del aprendizaje, una rbrica es el modo sencillo, rpido y consistente de organizar la calificacin. Una rbrica es bsicamente una lista de caractersticas que facilita evaluar la calidad de un producto de aprendizaje determinado. Identifica los rasgos y los componentes que deben estar presentes para indicar el nivel que se ha alcanzado en el aprendizaje. En otras palabras, una rbrica es un conjunto de criterios de evaluacin que especifica las caractersticas del producto para cada nivel de calidad, usualmente asociado con una letra o un nmero.

Ejemplo de rbrica
A = excepcional (calidad, no cantidad; supera con exceso las expectativas)
El trabajo tiene un nivel profesional. Cubre todos los subtpicos de la tarea encargada. No resume ni parafrasea los textos de referencia. Demuestra dominio de la materia usando ejemplos y/o reflexiones personales sobre el contenido. Demuestra un nivel de comprensin aplicada a travs de reflexiones originales sobre el contenido.

B = excelente (calidad superior; cumple las expectativas) Con muy pocas modificaciones el trabajo tendra un nivel profesional. Cubre la mayora de los subtpicos de la tarea encargada. No resume ni parafrasea los textos de referencia. Demuestra dominio de la materia usando ejemplos y/o reflexiones personales (o no) sobre el contenido o demuestra un nivel de comprensin aplicada a travs de reflexiones originales (o no) sobre el contenido.

C = aceptable (calidad satisfactoria; alcanza la mayora de las expectativas)

Requiere de alguna revisin importante para alcanzar un nivel profesional. Cubre ms o menos la mitad de los subtpicos de la tarea encargada. Incluye algunos resmenes, citas o parfrasis de los textos de referencia. Demuestra dominio de la materia usando ejemplos y/o reflexiones sobre el contenido o demuestra un nivel de comprensin aplicada a travs de reflexiones sobre el contenido. D = no aceptable (no alcanza las expectativas)

Necesita mucha revisin para alcanzar un nivel profesional. Cubre menos de la mitad de los subtpicos de la tarea encargada. Consiste primordialmente en citas, sntesis y parfrasis del texto de referencia. La informacin resumida es aceptable.

E = sin valor (el trabajo no merece crdito) Necesita demasiadas revisiones para alcanzar un nivel profesional. Cubre apenas uno o dos subtpicos de la tarea encargada. Consiste primordialmente en un resumen de las ideas principales extradas del texto de referencia. La informacin resumida no es precisa ni apropiada.

La rbrica debe disearse para cada tipo especfico de producto. En el caso presentado podra tratarse de un ensayo literario, y a partir de este ejemplo es fcil ver cmo adaptar el concepto para cualquier otro producto del aprendizaje. Lo importante de las rbricas es que no slo sirven como criterio de evaluacin para el docente, sino que pueden ser compartidas con los alumnos quienes, a travs de su anlisis, tendrn una percepcin correcta y completa de qu es lo que se espera de ellos en cada momento. Para elaborar sus propias rbricas, tenga en cuenta lo siguiente Primero, seleccione uno o varios de los objetivos pedaggicos a los que apunta el tema o materia. Con esos objetivos en mente, piense: cul sera un ejemplo de producto del aprendizaje apto para evaluar autnticamente el nivel alcanzado por un estudiante? Imagine el producto ideal. En otras palabras, si el logro fuese alcanzado al nivel ms alto posible, cmo sera? Elabore una lista completa de todas las caractersticas que ese producto ideal debera tener. Decida cmo calificar el producto, si como "aprob/desaprob", o con un nmero o una letra. En estos casos, determine cuntas subcategoras habr entre los extremos de la calificacin. Es importante que tenga en cuenta esto: si utiliza muy pocas subdivisiones en su calificacin (el caso extremo es el binario aprob/desaprob) la medicin carecer de la precisin necesaria para describir adecuadamente los logros y motivar muchas discusiones por parte de los alumnos en torno a la interpretacin de su rbrica. Si en cambio utiliza muchas, no slo se volver un problema definir las cualidades de cada una de ellas, sino que luego se complicar innecesariamente el proceso de calificacin, y deber "hilarse muy fino" para categorizar cada producto. Luego pregntese: qu caractersticas tendr un producto mnimamente aceptable? Este nivel corresponde al "punto de corte" entre lo aceptable y lo que no lo es (la nota de "aprobacin"). Idealmente (como en el caso de rbrica presentado ms arriba), la categorizacin es simtrica; el punto de corte est en el centro (C) y por encima y por debajo hay la misma cantidad de niveles de calificacin. Pero puede ser que se trabaje bajo otros conceptos, como el de "porcentaje de adquisicin" de conocimientos o habilidades. Este es el criterio

tradicional con el que, por ejemplo, se utilizan los nmeros del cero al diez para calificar a los alumnos y se establece que la aprobacin se consigue con un seis o un siete, lo cual equivaldra al sesenta o setenta por ciento del mximo. Dnde se ubique el punto de corte o aprobacin no tiene relevancia, en tanto por encima y por debajo haya suficientes niveles como para describir adecuadamente el nivel alcanzado. Complete su rbrica con las caractersticas requeridas en cada subcategora. Balancee adecuadamente los niveles. Utilice escalas de trminos como "todos, la mayora, la mitad, pocos, ninguno" para establecer criterios fciles de interpretar en torno a un objetivo. Tenga en cuenta que sus primeras rbricas no sern perfectas. Escuche a sus alumnos luego de calificarlos; preste atencin a los reclamos que pudieran hacerle sobre el modo en que los ha evaluado, y vuelva sobre su rbrica para adaptarla y corregirla. La prctica hace a la perfeccin. Adaptado de "Teaching efectiveness", St. Edward's University, Austin, Tx, EE.UU.