Diez preguntas bsicas sobre los Exmenes de la Calidad y el Logro Educativos (Excale)

Una de las funciones del Instituto Nacional para la Evaluacin de la Educacin (INEE) es evaluar lo que los estudiantes mexicanos aprenden del currculo nacional. El propsito fundamental de la evaluacin del aprendizaje es proporcionar un conocimiento general del rendimiento acadmico de los estudiantes, a nivel estatal y nacional, as como identificar los factores que ayuden a explicar las diferencias entre los niveles de logro. Para lograr este objetivo, el INEE desarroll los Exmenes de la Calidad y el Logro Educativos (Excale).
1. Qu son los Excale? 2. Qu grados y asignaturas evalan los Excale? 3. A quin se aplican los Excale? 4. Cada cundo se aplican los Excale? 5. Pueden los maestros y padres de familia conocer los resultados obtenidos por sus alumnos o hijos en los Excale? 6. Cmo se elaboran los Excale? 7. Una vez elaborados, qu sigue? 8. Qu tipo de informacin relacionada con el contexto en que ocurre el aprendizaje recaba el INEE? 9. Cmo se efecta el anlisis e interpretacin de resultados de los Excale? 10. Cmo se difunden los resultados?

1. Qu son los Excale?

Los Excale son pruebas de aprendizaje de gran escala que miden el logro escolar de los estudiantes de educacin bsica en distintas asignaturas y grados. Estos exmenes tienen tres caractersticas distintivas: son criteriales, estn alineados al currculo y son matriciales. Son criteriales porque se disean para evaluar el dominio que tienen los estudiantes de una disciplina en particular. Su inters central es conocer el nivel de logro que alcanzan los estudiantes como resultado de su escolarizacin formal. Cada contenido temtico se evala a profundidad, procurando incluir todos los conocimientos y habilidades de importancia para la disciplina y grado escolar. Estn alineados al currculo porque su propsito es evaluar los aprendizajes pretendidos por los planes y programas de estudio nacionales. El hecho de contar en Mxico con un currculo nacional para la educacin bsica, libros de textos gratuitos y una formacin magisterial bastante uniforme, facilita identificar lo que aprenden los estudiantes en relacin con lo que se espera de ellos. Puesto que los Excale pretenden evaluar todos los contenidos curriculares importantes, tienen un diseo matricial en el cual los reactivos que conforman una prueba se agrupan en bloques para ser distribuidos entre los alumnos; no todos contestan las mismas preguntas, pero con las repuestas de todos se obtienen resultados del examen en su conjunto. En este tipo de pruebas, la calificacin individual del estudiante no es tan importante como los resultados agregados a nivel de entidad federativa y modalidad educativa, dado que lo que se busca es evaluar al sistema educativo en su conjunto.

2. Qu grados y asignaturas evalan los Excale?

Las

asignaturas

propiamente

instrumentales,

tales

como

Matemticas y Espaol, adems de aquellas que cubren grandes reas curriculares relacionadas con Ciencias Naturales y Ciencias Sociales, realizando en cada caso la seleccin de contenidos conforme el currculo nacional y el grado escolar a evaluar. Los grados a evaluar son los terminales de cada nivel escolar: 3 de preescolar, 6 de primaria y 3 de secundaria. Adicionalmente, se aade 3 de primaria con el fin de evaluar segmentos de tres aos escolares. De este modo, se han establecido las siguientes asignaturas para cada nivel y grado desde el preescolar hasta la secundaria. Niveles, grados y asignaturas que evalan los Excale

NIVEL Preescolar

GRADO 3

ASIGNATURAS Lenguaje y comunicacin Pensamiento matemtico Espaol Matemticas

Primaria

3 y 6 Ciencias Naturales Ciencias Sociales Espaol Matemticas

Secundaria

3 Ciencias Naturales Ciencias Sociales

3. A quin se aplican los Excale? Se aplican a muestras representativas de estudiantes de escuelas pblicas y privadas, de educacin bsica de todo el pas. El nmero de

estudiantes vara de acuerdo con el estado, el grado a evaluar y la modalidad educativa de que se trate. En 2005 se aplicaron ms de 47 mil pruebas a estudiantes de sexto de primaria en 2 mil 770 escuelas y a 52 mil 251 alumnos de tercero de secundaria en 2 mil 397 escuelas. En 2006, la prueba se aplic a casi 55 mil alumnos de tercero de primaria en un poco mas 3 mil escuelas mientras que en 2007 se aplicaron a ms de 10 mil pruebas a estudiantes de tercer ao de preescolar en aproximadamente mil 100 escuelas y a alrededor de 13 mil estudiantes de sexto de primaria en ms de 700 planteles educativos.En 2008, la evaluacin de tercer grado de secundaria abarc a ms de 100 mil estudiantes de aproximadamente 4 mil escuelas. Aunque el porcentaje de estudiantes evaluados en cada grado es pequeo, las estimaciones que hace el INEE son bastante precisas y confiables. Cada escuela tiene la misma probabilidad de ser seleccionada en la muestra; asimismo, al interior de cada escuela y grado escolar, todos los estudiantes tienen la misma probabilidad de ser seleccionados para responder la prueba. Las evaluaciones que realiza el INEE no son voluntarias: todas las escuelas y alumnos del pas tienen la obligacin de participar en las evaluaciones de gran escala que se realizan ao con ao.

4. Cada cundo se aplican los Excale? El plan de evaluacin de los Excale se basa en un programa cuatrianual; es decir, un mismo grado se evaluar cada cuatro aos, tal como se muestra en la siguiente tabla. Plan de Evaluacin por grados y asignaturas escolares

AOS ESCOLARES. GRADOS 3 Preescolar E, M 3 Primaria N, S E, M 6 Primaria E, M E,M N, S E, M 3 Secundaria E, M N, S E,M N, S E, M E,M N, S E,M N, S E, M N, S E, M E,M N, S 2005 2006 2007 2008 L, P E, M 2009 2010 2011 2012 L, P E, M 2013 2014 2015 2016 L, P

Nota: L = Excale-Lenguaje y Comunicacin; P = Excale-Pensamiento Matemtico; Excale-Espaol; M = Excale-Matemticas; N = Excale-Ciencias Naturales; S = ExcaleCiencias Sociales. El sombreado indica muestras nacionales sin representatividad estatal.

Este plan ofrece la posibilidad de evaluar los aprendizajes de los estudiantes del Sistema Educativo Nacional tanto transversal como longitudinalmente ya que, por ejemplo, si en 2006 se evalu a los alumnos de tercero de primaria, tres aos ms tarde, cuando tericamente estn cursando sexto, sern sujetos de una nueva evaluacin y tres aos despus, en 2012, participarn en la evaluacin de tercero de secundaria. Es cierto que no necesariamente estarn siendo evaluados exactamente los mismos alumnos, sin embargo, hay que recordar que el objetivo de los Excale no es evaluar los aprendizajes logrados por cada alumno, sino tener una visin del Sistema Educativo en su conjunto. Las evaluaciones se realizan al final del ao escolar (mayo o junio).

5. Pueden los maestros y padres de familia conocer los resultados obtenidos por sus alumnos o hijos en los Excale?

Si bien no es posible conocer los resultados obtenidos en los Excale por algn estudiante en particular, el INEE publica los resultados obtenidos por todos los alumnos a nivel nacional, estatal y/o por modalidad educativa. La aplicacin de los Excale permite cubrir diversos objetivos: a) proporcionar un conocimiento general del rendimiento acadmico de los estudiantes como resultado de su escolarizacin formal, con distintos grados de desagregacin, entre los que se encuentran los estratos escolares de primaria (escuelas urbanas pblicas, rurales pblicas, cursos comunitarios, educacin indgena, y escuelas privadas) y las modalidades educativas de secundaria (escuelas generales, tcnicas, telesecundarias y escuelas privadas); b) permitir comparaciones del rendimiento escolar entre diversas regiones geogrficas, as como entre distintas modalidades educativas; c) conocer los puntos fuertes y dbiles del aprendizaje de los estudiantes en distintos grados y reas temticas del currculum; d) conocer las tendencias a lo largo del tiempo del aprendizaje de las Matemticas, el Espaol, las Ciencias Naturales y las Ciencias Sociales; e) analizar algunas variables de contexto que influyen de manera importante en el logro escolar; y, f) identificar el crecimiento o estancamiento de los aprendizajes en las disciplinas evaluadas.

6. Cmo se elaboran los Excale?

Cada prueba Excale se elabora con mucho tiempo de anticipacin; su realizacin abarca diferentes etapas, en cada una de las cuales participa no slo el personal tcnico del INEE, sino grupos de profesionales, expertos en currculo, profesores en servicio, autores de libros, entre otros, quienes conforman distintos comits. Las labores de estos comits abarcan diversas tareas: analizar el currculo y seleccionar los contenidos que se evaluarn; definir las caractersticas de los reactivos que conformarn la prueba; formular, revisar y pilotear las preguntas as como ensayar las condiciones reales de aplicacin de los Excale.

7. Una vez elaborados, qu sigue? La prueba se aplica a una muestra nacional de estudiantes. El equipo de personas que aplica la prueba se compone por personal del INEE y por aplicadores contratados y capacitados especialmente para llevar a cabo esta tarea. La informacin se recaba a travs de procedimientos estandarizados y una supervisin eficaz. Todo el proceso est diseado para asegurar que la prueba arroje resultados confiables. Las evaluaciones se realizan al mismo tiempo en todas las escuelas participantes. La informacin que se recaba individualmente de los directores y sus escuelas, de los docentes y sus aulas, as como de los estudiantes y sus familias, es confidencial. Despus de que se reportan los resultados de las evaluaciones, el INEE pone a disposicin de todos los interesados las bases de datos sin los nombres de los estudiantes ni de los planteles, para asegurar que stos no puedan ser identificados.

8. Qu tipo de informacin relacionada con el contexto en que ocurre el aprendizaje recaba el INEE? Los resultados de los Excale nos permiten conocer lo que los estudiantes aprenden del currculo; sin embargo, esta informacin no es suficiente para entender las diferencias que logran en el aprendizaje. Por eso, el INEE recaba informacin de diversas variables de contexto sobre los alumnos y sus familias, los docentes y el aula, y el director y la escuela. Es de especial inters conocer las oportunidades de aprendizaje a las que estn expuestos los estudiantes, a fin de explicar las diferencias en el logro educativo de los distintos tipos de centros escolares. Los cuestionarios tienen el propsito de recabar informacin sobre el estudiante y su familia, los docentes, y el director, sobre aspectos relacionados con caractersticas personales, familiares y escolares; as mismo, se obtiene informacin sobre el saln de clases, el ambiente del aula, la interaccin con los padres, la cobertura curricular y las prcticas pedaggicas; la infraestructura y la organizacin escolar. Las caractersticas y composicin de los distintos cuestionarios varan de acuerdo con el grado escolar al que estn destinados.

9. Cmo se efecta el anlisis e interpretacin de resultados de los Excale? Esta fase se inicia con un anlisis de los resultados con el fin de establecer los niveles de logro de los estudiantes; se realizan los primeros anlisis estadsticos poniendo especial nfasis en el comportamiento

psicomtrico de las pruebas aplicadas. Los niveles de logro que han sido utilizados por el INEE son:

NIVELES DE LOGRO Por debajo del bsico

COMPETENCIAS ACADMICAS Indica carencias importantes en el dominio curricular de los conocimientos, habilidades y destrezas escolares, lo cual expresa una limitacin para progresar satisfactoriamente en la materia. Indica un dominio suficiente o elemental de conocimientos, habilidades y destrezas para poder progresar satisfactoriamente en la materia. Indica un dominio adecuado de conocimientos, habilidades y destrezas que indican un buen aprovechamiento de lo previsto en el currculo. Indica un dominio ptimo de conocimientos, habilidades y destrezas que indican el aprovechamiento mximo de lo previsto en el currculo.

Bsico Medio Avanzado

Estos niveles se definen de acuerdo con la asignatura y grado de que se trate. Finalmente, se realizan los informes sobre los resultados de aprendizaje de los estudiantes evaluados, considerando las variables de contexto y de oportunidades de aprendizaje aportadas en los cuestionarios aplicados a alumnos, docentes y directores. Asimismo, es muy importante para el INEE conocer el logro de aprendizaje de las distintas poblaciones muestreadas (entidades federativas, estratos y modalidades educativas), as como los contenidos del currculo nacional que los estudiantes dominan.

10. Cmo se difunden los resultados? Los resultados de los Excale se dan a conocer a travs de mltiples modalidades: mesas pblicas; conferencias de prensa; libros; folletos, informes, etctera, los cuales pueden ser consultados en el portal de Internet del INEE: http://www.inee.edu.mx/