Documenti di Didattica
Documenti di Professioni
Documenti di Cultura
tcnico-pedaggico en el
proceso de elaboracin,
justificacin y validacin
de los criterios de
evaluacin.
introduccin
El presente documento es el resultado del trabajo que se llev
a cabo con el objeto de establecer un marco terico-explicativo,
y desde el cual propiciar una mejor comprensin acerca de las
diferentes acciones realizadas en el rea de Evaluacin de la
DINIECE, con la colaboracin y participacin de las jurisdicciones
del pas.
Se inicia el primer captulo con la justificacin y con el
anlisis del cambio de enfoque de evaluacin propuesto por
esta direccin. Se abordan los conceptos relevantes, las
caractersticas y las condiciones en las que se enmarcan las
prcticas de la evaluacin educativa, a fin de lograr una
descripcin explicativa sobre las Pruebas Referidas a Criterios.
El segundo captulo se propone una explicitacin de la
metodologa implementada en el desarrollo del proceso de
validacin de los criterios de evaluacin. Se llev a cabo,
fundamentalmente, bajo dos acciones, un Seminario Nacional
de Validacin de Criterios de Evaluacin y una Encuesta Nacional
a Docentes. Se caracteriz la metodologa de trabajo como la
de una evaluacin en colaboracin. Se entiende que esta
metodologa implic el anlisis conjunto, entre la Nacin y
las Jurisdicciones, de los criterios seleccionados para el
Operativo Nacional de Evaluacin (ONE).
Por ltimo, el tercer captulo se realiza una justificacin sobre
las Capacidades Cognitivas, sintticamente se comenz por un
desarrollo histrico-explicativo sobre la adopcin de las
diferentes terminologas, y se culmin con la definicin de cada
una de las capacidades cognitivas, consensuadas con las
jurisdicciones.
captulo 1
Justificacin para un cambio de enfoque en las evaluaciones
nacionales: de pruebas referidas a normas a pruebas referidas
a criterios. Para qu?, por qu? y en qu consiste?
La DINIECE est encarando un cambio de enfoque para las futuras pruebas nacionales, capaz
de generar y de brindar nuevos aportes y diferentes miradas sobre los logros acadmicos de los alumnos.
De acuerdo con la experiencia acumulada en
la DINIECE y con la decisin poltica de profundizar
y ampliar los resultados a obtener, el Plan de Evaluacin de la Calidad Educativa 2003 2007 se
propone un mejor aprovechamiento de la evaluacin como herramienta para la gestin y la transformacin de las estrategias educativas; nuevos
objetivos y acciones, y otras alternativas y recursos
tcnico-pedaggicos, en el contexto de un nuevo
modelo y un nuevo enfoque de evaluacin educativa.
Para resignificar, en trminos del sentido y del
valor, los procesos de evaluacin de la calidad educativa se hace necesario revisar los criterios polticos y tcnicos-pedaggicos asumidos a lo largo
de estos aos y construir nuevos y complementarios criterios de evaluacin.
La Argentina desde 1993 ha realizado un gran
esfuerzo y ha alcanzado importantes logros en
materia de evaluacin de los procesos de la calidad educativa:
z La realizacin, a cargo del Ministerio de
Educacin de la Nacin y de las autoridades
educativas de las jurisdicciones, de diez Operativos Nacionales de Evaluacin de la Calidad
Educativa, desde el ao 1993 a 2000 y en 2002
y 2003.
z La produccin de las Recomendaciones
Metodolgicas para el mejoramiento de las formas de enseanza y los aprendizajes de los
alumnos.
z La creacin y desarrollo de experiencias
de evaluacin y de sistemas jurisdiccionales de
evaluacin de la calidad educativa.
z El asesoramiento para el desarrollo de
sistemas o experiencias provinciales de evaluacin de la calidad educativa.
1
2
Los requisitos bsicos para que una prueba pueda ser considerada una Prueba Referida al Criterio
(PRC) son los siguientes:
z La existencia de un conjunto de capacidades claramente definidas. Se asumen
las capacidades como un continuo complejo,
en el que se pueden establecer niveles de desempeos. Estas grandes capacidades pueden
ser abiertas en tres o cuatro grandes subcapacidades. La ventaja de un continuo es que permite definir varios niveles de desempeo de la
capacidad y a lo largo del tiempo variar qu es
lo que se define como prioritario. A partir de la
formulacin de los Ncleos de Aprendizaje Prioritarios (NAP) planteados por el CFE y en la
medida en que se vayan aprobando para los
distintos aos y ciclos, se convertirn en un referente sustancial para la elaboracin de los
criterios.
z Una proposicin explcita de la finalidad de la prueba. En las PRC el objetivo es
determinar el estatus actual del rendimiento de
un alumno o una clara descripcin de lo que
los alumnos saben y son capaces de hacer.
se compara con los resultados de los dems alumnos a los que se les ha aplicado la prueba, con los
resultados del grupo o muestra representativa de
la poblacin a la que pertenece.
En cuanto a la construccin de la prueba,
ambos tipos establecen los elementos en trminos
de los rendimientos que el alumno exhibe en algn
momento determinado. En ambos casos se pone
el acento en que las respuestas a valorar sean pblicas, estandarizadas y fcilmente objetivables. En
las PRC, adems, la determinacin del dominio de
contenido o especificaciones de contenido es central para la construccin de la prueba.
En cuanto a la seleccin de los tem, las propiedades psicomtricas consideradas para su inclusin en la prueba son diferentes. En las PRN el objetivo es maximizar las diferencias individuales, lo
que lleva a la inclusin de un gran nmero de tem
de dificultad media para poner de relieve las diferencias individuales y aumentar el poder discriminativo de la prueba. En las PRC son las capacidades de la prueba los que marcan la norma para la
inclusin de los tem, as como el propsito y la
finalidad de la misma.3
Martnez Arias, Rosario. Psicometra: teora de los test psicolgicos y educativos Ed. Sntesis. Madrid, 1995.
Cmo surge la
Teora de Respuesta al tem?
La Teora del Rasgo Latente o Teora de Respuesta al tem (TRI), tuvo su origen hace varias
dcadas pero se desarrolla principalmente en los
aos ochenta, cuando la computadora irrumpe con
fuerza en Estados Unidos, pues los clculos exigidos para su aplicacin resultan casi imposibles de
poder ser llevados a cabo sin disponer de una
plataforma informtica para el tratamiento de
los datos.
Parte del supuesto de que los resultados obtenidos en un tem por un alumno y por consiguiente en una prueba- dependen directamente del grado o nivel en que ese alumno posee el rasgo medido. Este rasgo es inobservable, por lo que se lo
denomina rasgo latente y es un constructo que
se utiliza para explicar el hecho. Hay una relacin
directa entre el rendimiento observable del alumno, las puntuaciones obtenidas en la prueba y el
nivel de posesin del rasgo no observable o laten-
Qu caractersticas tiene
la Teora de Respuesta al tem?
Asumir la TRI como modelo matemtico para
el procesamiento y la produccin de resultados
permite:
z Trabajar mejor con tem abiertos de respuesta breve y de respuesta extendida. Esta
decisin brinda la posibilidad de evaluar capacidades con mayor complejidad y riqueza, aportando a los docentes informacin ms valiosa
acerca de los desempeos de los alumnos.
z Trabajar con mayor cantidad de tem, lo
que hace posible descripciones ms detalladas
de las capacidades de los alumnos y sus subdimensiones.
z Comparaciones ms precisas en el tiempo.
En trminos generales, la TRI considera tres
supuestos bsicos:
z Unidimensionalidad: en la TRI se asume
que cuando se disea una prueba sta deber
medir, preferiblemente, una dimensin, una habilidad (el trmino habilidad, en su concepcin
psicomtrica, se refiere al objeto de medicin). Se reconoce que cuando una persona
responde a una pregunta en una prueba, entran en juego mltiples habilidades, pero las
preguntas deben disearse haciendo nfasis en
una de ellas o en una combinacin de ellas en
particular.
z Independencia local: se espera que un
alumno responda a una pregunta en particular
sin que recurra a informacin de otros tem para
hacerlo correctamente. Es decir, la respuesta
de un alumno en una pregunta no debe afectar sus respuestas en otra. Es prctica generalizada elaborar pruebas en donde se disean tem
en relacin con un contexto, del que dependen las respuestas del alumno; aqu tambin
se aplica la independencia local entre los tem
y no entre ellos y el contexto. Es decir, el supuesto de independencia local implica que la
respuesta de un alumno a un tem es independiente, estadsticamente, de las respuestas a
los otros, pero no que los tem de la prueba no
estn relacionados.
Para la construccin de tem ver Criterios para la elaboracin, seleccin, supervisin, envo de tem y texto de la DINIECE.
z Curva caracterstica del tem: viene determinada por la funcin matemtica entre el nivel de
habilidad o rasgo latente medido y la probabilidad
de responder correctamente al tem.
captulo 2
Proceso de validacin de los criterios de evaluacin
Para el anlisis y la lectura crtica de los criterios se formaron 12 grupos de trabajo, de entre 8 y
12 participantes cada uno. Se destinaron dos grupos para el rea de Ciencias Naturales y dos para
el rea de Ciencias Sociales de 3 y 6 aos de
EGB, respectivamente y cuatro para el rea de
Matemtica y otros cuatro para el rea de Lengua,
de 3, 6, 9 de EGB y fin de Polimodal, respectivamente.
Del trabajo y anlisis realizados por los grupos
se acord la incorporacin de las siguientes modificaciones a los criterios de evaluacin de las reas
abordadas:
A) rea de Ciencias Naturales:
3 y 6 aos de la EGB
z Se separaron las siguientes capacidades:
reconocimiento de datos y hechos de reconocimiento de conceptos, que se haban presentado como una sola.
z Se incorpor la capacidad reconocimiento de valores.
z Se quit la capacidad interpretacin/exploracin, mantenindose a la comunicacin
como la capacidad de interpretar y expresar.
z Se modificaron y ajustaron los contenidos propuestos teniendo en cuenta las observaciones que se hicieron desde la visin de los
diseos curriculares jurisdiccionales.
C) rea de Matemtica:
3, 6, 9 y Fin de Polimodal
z Se modificaron y ajustaron los contenidos
propuestos teniendo en cuenta las observaciones
que se hicieron desde la visin de los diseos
curriculares jurisdiccionales.
z Se reemplaz la anterior capacidad llamada
operar usando algoritmos por solucionar operaciones matemticas mediante diversos procedimientos.
z La resolucin de problemas (en Matemtica)
fue redefinida como capacidad cognitiva general como Solucin de situaciones nuevas para el
alumno, en las que necesita usar los conocimientos matemticos de que dispone. La resolucin de
problemas puede requerir de los estudiantes: reconocer, relacionar y utilizar informacin; determinar
la pertinencia, suficiencia y consistencia de los datos; reconocer, utilizar y relacionar conceptos; utilizar, transferir, modificar y generar procedimientos;
juzgar la razonabilidad y coherencia de las soluciones y justificar y argumentar sus acciones.
z Se incluy como una de las capacidades
especficas (en Matemtica) la resolucin de situaciones matemticas nuevas, integrales y situadas en contextos intramatemticos y/o de la realidad cotidiana.
D) rea de Lengua:
3, 6, 9 y Fin de Polimodal
z Se precis la definicin de comprensin
lectora.
z Se revis la graduacin en los niveles alto/
medio/bajo.
z Se incorporaron algunos contenidos, de
modo tal que los dos tipos de textos que se
trabajan (argumentativo y narrativo) aparezcan
representados en todos los contenidos y viceversa: todos los contenidos en ambos tipos de
textos.
z Se denomin a la ltima capacidad reflexionar y evaluar para que resultaran ms
claros los aspectos que incluye.
captulo 3
Justificacin sobre las capacidades cognitivas
Ministerio de Cultura y Educacin, 1992. Extrado de: Propuesta de Tablas de Especificaciones. 6 Operativo de
Evaluacin 1998.
6
Ministerio de Educacin. DINIECE, Glosario. 2001.
10
11
MIENTOS.
TOS. Reemplaz a la anterior capacidad
llamada OPERAR USANDO ALGORITMOS
z RECONOCIMIENTO DE CONCEPTOS:
Capacidad cognitiva de identificar conceptos y
principios por medio de ejemplos, casos, atributos o definiciones de los mismos o viceversa:
identificar ejemplos, casos, atributos o definiciones de conceptos y principios dados.
z RECONOCIMIENTO DE HECHOS: Capacidad cognitiva de identificar datos y/o hechos
en un conjunto de informacin mediante la utilizacin de conocimientos que el alumno posee.
z RECONOCIMIENTO DE VALORES: Capacidad cognitiva de elegir conductas de acuerdo con valores en situaciones vinculadas con la
responsabilidad social e identificar valores implcitos o explcitos en discursos y prcticas.
z RESOLUCIN DE PROBLEMAS (en Matemtica): Como capacidad cognitiva general fue definida como Solucin de situaciones nuevas para el alumno, en las que necesita usar los conocimientos matemticos de que
dispone. La resolucin de problemas puede
requerir de los estudiantes: reconocer, relacio-
A modo de conclusin
conclusin, los tres captulos pretenden aportar una explicitacin del marco terico
sobre un recorrido poltico y tcnico-pedaggico en
el proceso de elaboracin, justificacin y validacin
de los criterios de evaluacin para el ONE. Fundamentalmente, se privilegi el trabajo conjunto, la
colaboracin y la participacin con los diferentes
actores del sistema educativo de las Jurisdicciones
y de la Nacin. A nuestro entender, la evaluacin
educativa debe contemplar diseos en los que se
brinden aportes relevantes y significativos, con la
intencin de mejorar la enseanza y el aprendizaje. Se pens que emprender este recorrido, puede
permitir otras y complementarias miradas sobre la
educacin.
12
bibliografa
DINIECE. Plan de Evaluacin de la Calidad Educativa 2003-2007.
Esquivel, Juan M. El diseo de las pruebas para medir logro a acadmico: Referencia
a Normas o a Criterios? Costa Rica.
Esquivel, Juan M. Medicin de la calidad de la enseanza. Costa Rica, 1986.
House, E. R. Evaluacin, tica y poder. Morata, 1994.
IIPE UNESCO. Evaluar las evaluaciones. Una mirada poltica acerca de las
evaluaciones de la calidad educativa. Argentina, 2003.
Martnez Arias, Rosario. Psicometra: Teora de los Test Psicolgicos y Educativos.
Editorial Sntesis. Madrid, 1995.
Meherens, W.A. Medicin basada en Normas y en Criterios. CECSA. Mxico,
1982.
Ministerio de Educacin. DINIECE, Glosario. 2001.
Ministerio de Cultura y Educacin, 1992. Extrado de: Propuesta de Tablas de
Especificaciones. 6 ONE 1998.
Nunnally, Jum C. y Bernstein, Ira J. Teora Psicomtrica. McGraw-Hill/Interamericana
de Mxico, 1995.
Page, Mariano . Elementos de Psicometra. Eudema. Madrid, 1993.
Ravela P.; Wolfe R.; Valverde G. Y Esquivel J.M. Cmo avanzar en la evaluacin
de aprendizajes en Amrica Latina en Formas y reformas de la educacin
Serie Polticas, abril de 2001, ao 2, n 8, Santiago de Chile, PREAL.
Ravela, P. Cmo presentan sus resultados los sistemas nacionales de evaluacin
educativa en Amrica Latina? en Serie Documentos, n 22, marzo, 2002, Santiago
de Chile, PREAL.
Sachs Adams, Georgia. Medicin y evaluacin en educacin, psicologa y guidance. Barcelona, Herder, 1970.
UNAM. La evaluacin referida a un criterio: un modelo en el proceso de formacin.
rea de evaluacin, 1976.
Tenti Fanfani, Emilio (Comp.) El rendimiento escolar en la Argentina. Losada, 2002.