PRUEBAS INTERNACIONALES MUESTRAN DIFERENCIAS EN EL RENDIMIENTO EN TODOS LOS PASES, CON GRANDES BENEFICIOS PARA EE UU PERJUDICARON A ESTUDIANTES

Publicado 15 de enero 2013 a las 11:48 am por Martin Carnoy y Richard Rothstein En un nuevo informe EPI, Qu es lo realmente muestran las pruebas internacionales sobre el rendimiento de los estudiantes estadounidenses?, que al desvincular las comparaciones internacionales de los estudiantes por clase social, demuestra que la habitual condena al desempeo estudiantil en EE.UU. por los resultados en tales pruebas estn simplificadas, a menudo son engaosas, exageradas, y en muchos casos, con una interpretacin errnea de los hechos. Somos conscientes, de que el nuestro es el primer estudio que compara el rendimiento de los alumnos socioeconmicamente anlogos a travs diferentes naciones. Los reformadores de la educacin invocan usualmente el relativo mal desempeo de los estudiantes estadunidenses para justificar cambios en la poltica escolar Algunos crticos, perturbados por la manera adulterada en la que los polticos y los expertos utilizan pruebas internacionales para condenar el desempeo estudiantil norteamericano, han comentado que los estudiantes estadounidenses en estados relativamente ricos, como Massachusetts o Minnesota, o estudiantes de las escuelas donde pocos estudiantes son de familias de bajos ingresos, funcionan tan bien o mejor que los estudiantes promedio en los pases de mayor puntuacin. Sin embargo, aunque tales comparaciones son bien intencionadas, no nos puede decir mucho, porque una comparacin apropiada sera entre los estados ricos en los EE.UU., y las provincias ricas o prefecturas en otros pases, o entre las escuelas con poca pobreza en los EE.UU. y escuelas con poca pobreza en otros pases. Los crticos no han tenido previamente datos por los cuales estas comparaciones puedan ser hechas correctamente. MORE: Authors response to OECD/PISA reaction to their report (PDF) AUDIO: Authors speak with the press about their report (MP3)

MAS: La respuesta de los autores de la OCDE / PISA reaccin a su informe (PDF) AUDIO: Autores hablar con la prensa sobre su informe (MP3). Sin embargo, las grandes pruebas internacionales -las Tendencias en Matemticas y Ciencias (TIMSS) y el Programa de Evaluacin Internacional de los Alumnos (PISA)-eventualmente publicar no slo los puntajes promedios nacionales, sino una rica base de datos de la que los analistas pueden desglosar los resultados de los estudiantes por caractersticas socioeconmicas, la composicin escolar y otros criterios informativos. El anlisis de los exmenes hecho de esta manera puede conducir a conclusiones ms ajustadas a la realidad, que aquellas que se basan tan solo en los promedios de calificaciones nacionales por s solas. Aunque TIMSS publico los resultados promedio nacional en diciembre, slo tiene previsto liberar su base de datos subyacente de esta semana. Este extrao procedimiento solo asegura interpretaciones rpidas pero mal informadas y estamos seguros a su vez, que los responsables polticos ofrecern a su vez interpretaciones inadecuadas. El anlisis de la base de datos requiere tiempo, y los titulares de la versin inicial se archivan convencionalmente antes de que los eruditos puedan completar un estudio ms cuidadoso. Por ejemplo, hace dos aos cuando PISA public sus ltimos resultados, el Secretario de Educacin Estadounidense, Arne Duncan, afirm que estos resultados mostraron que los estudiantes estadounidenses "estn mal preparados para competir en la economa del conocimiento actual. ... Los estadounidenses necesitan despertar a esta realidad educativa, en lugar de dormir la siesta al volante, mientras que los competidores emergentes preparan a sus estudiantes para el liderazgo econmico". En particular, Duncan hizo hincapi en los resultados de los estudiantes ms desfavorecidos de Estados Unidos: Tan inquietantes son estas tendencias nacionales para Estados Unidos, como lo son las enormes brechas de los logros entre los estudiantes negros e hispanos que presagian ms problemas para los EE.UU. en los prximos aos". Sin embargo, un anlisis cuidadoso de la base de datos de PISA muestra que la brecha en el rendimiento entre los nios desfavorecidos y favorecidos, en realidad es menor en los Estados Unidos que en pases similares. La brecha en el rendimiento en los Estados Unidos es mayor que en los pases de puntuacin ms altos, pero an as, muchas de las diferencias son pequeas. Es ms, un anlisis de las tendencias en la ltima dcada, en mltiples administraciones tanto de TIMSS como de PISA, muestra que el logro de los adolescentes ms desfavorecidos en Estados Unidos se ha incrementado rpidamente, mientras que el logro similar de adolescentes desfavorecidos en algunos pases que tpicamente son

presentados como referentes comparativos para EE UU, por ejemplo, Finlandia, ha estado cayendo con la misma rapidez. As, mientras que el rendimiento en lectura en PISA de los estudiantes de clase social ms baja en los EE.UU. aument en ms de 0,2 desviaciones estndar a partir de 2000 a 2009, este cay en una cantidad an ms grande en Finlandia. En matemticas, las clases sociales ms bajas de estudiantes de Estados Unidos tambin registraron ganancias sustanciales, mientras que las puntuaciones de los estudiantes finlandeses comparables disminuyeron. Esto es sorprendente, ya que la proporcin de estudiantes desfavorecidos en Finlandia tambin cay, y nosotros podramos esperar que esto hiciera la tarea para facilitar destinar ms recursos. Ciertamente, incluso para los estudiantes de clase social ms baja, las puntuaciones de Finlandia siguen siendo ms altas que las nuestras, pero el examen de las tendencias y los niveles de desafo, suponen que simplemente imitando el sistema educativo finlands es una receta para el xito estadounidense. Una vez conscientes de estas tendencias de datos, sera perverso que los responsables polticos hicieran conclusiones de los ensayos de las comparaciones internacionales, que ponen de cabeza la forma en que educamos a los jvenes desfavorecidos. Mientras que las escuelas norteamericanas sin duda se preocupan por hacer algo mejor por los nios desfavorecidos, parece que, donde nuestro sistema educativo pueden tener problemas ms graves es con los alumnos ms aventajados, comparados con sus similares de otras naciones. Desde el ltimo comunicado de PISA en 2010, hemos estado buscando ms profundamente en su base de datos, as como en las bases de datos ms antiguas de TIMSS, y para las dos versiones de nuestra evaluacin interna Nacional del Progreso Educativo (NAEP). Nos concentramos en las puntuaciones de los adolescentes (8 grado en TIMSS y NAEP y jvenes de 15 aos en PISA); en los EE UU, en tres pases de puntuacin superior (Canad, Finlandia y Corea), en tres pases similares postindustriales (Francia, Alemania y Reino Unido), adems de siete estados norteamericanos y tres provincias canadienses, para las cuales las tendencias estn disponibles, debido a que voluntariamente participaron en el TIMSS ms de una vez. La participacin de los estudiantes en desventaja en la muestra estadounidense era ms grande que la participacin similar en cualquiera de los otros pases estudiados. Dado que el puntaje de las prueba en todos los pases se caracterizan por una clase social de estudiantes de nivel ms alto en la escala de clases sociales, por ese slo hecho tienen un mejor rendimiento promedio que los estudiantes en la clase inmediatamente inferior estadounidense; por tanto, los resultados de los estudiantes son ms bajos en promedio, debido

simplemente por la cantidad participante de clase precaria socialmente. Esta distorsin de la clase social ha sido impulsada y agravada por PISA desde 2009, porque sobre-muestreo a los estudiantes de bajos ingresos de Estados Unidos, que adems asisten a escuelas con muy alta proporcin de estudiantes desfavorecidos, reduciendo artificialmente la aparente puntuacin de EE.UU. Mientras que el 40 por ciento de la muestra de PISA se extrajo de las escuelas donde la mitad o ms de los estudiantes que asisten reciben almuerzo gratuito a precio reducido, slo el 23 por ciento de los estudiantes de todo el pas asisten a esas escuelas. Nuestro informe muestra que si hacemos dos ajustes razonables al promedio de estudiantes evaluado estadounidense, nuestra clasificacin internacional se mejora. El primer ajuste es sobre la composicin de la clase social estadounidenses que tomo la prueba, para compararla con la composicin media de pases con calificaciones superior. Otro nuevo ajuste es la distribucin de estudiantes elegibles para el almuerzo en las escuelas. Hacer solo estos ajustes levantan la clasificacin Internacional estadounidense; sobre la prueba de PISA 2009 de 14 a 4 en la lectura, y de 25 a 10 en matemticas. Mientras hay todava espacio para la mejora, estas son acciones bastante respetables. Un aspecto nico de nuestro informe es nuestra consolidacin de los datos de tendencia de las cuatro evaluaciones-PISA, TIMSS y las dos formas de NAEP. Entre 2000 y 2006, los resultados de PISA de matemticas en Estados Unidos se redujeron sustancialmente, causando gran alarma entre las autoridades estadounidenses y expertos. Sin embargo, pocos se dieron cuenta de que durante aproximadamente el mismo perodo, las puntuaciones de matemticas en Estados Unidos suban el TIMSS, como lo hicieron en la NAEP principal. No podemos atribuir esto a una supuesta alineacin superior del TIMSS para el plan de estudios de EE.UU. debido a que en el prximo perodo, el patrn se revirti: de 2006 a 2009, PISA y los resultados de NAEP ambos subieron, mientras que las puntuaciones TIMSS fue ms plana. Para el caso, no somos conscientes de ninguna explicacin razonable para estos patrones errticos, pero estos sugieren que se requiere cautela antes de sacar conclusiones a partir de una sola prueba acerca de las comparaciones internacionales-o sobre cualquier otra. Una amplia investigacin educativa en los Estados Unidos ha demostrado que las familias y la comunidad ejercen una poderosa influencia en el rendimiento escolar de los estudiantes. Los nios cuyos padres les leen en el hogar, su estado de salud es bueno y puede asistir a la escuela regularmente, no viven con el miedo al delito y la violencia, disfrutan de una vivienda estable y la asistencia escolar es

continua, el empleo habitual de los padres crea seguridad, estn ms dispuestos a asistir a los museos, las bibliotecas, la msica y el arte, viajan fuera de sus vecindarios inmediatos, y estn rodeados de adultos modelo de alto rendimiento acadmico; en promedio, alcanzan niveles ms altos que los nios sin estas ventajas educativamente relevantes. Consciente de estas relaciones, los analistas de la educacin en los Estados Unidos prestan mucha atencin al nivel y a las tendencias de calificaciones desglosadas por grupos socioeconmicos. En efecto, un elemento domestico central de la poltica de educacin de los EE.UU. es el requisito de que las puntuaciones medias se informaran por separado a los grupos raciales y tnicos y para los nios que provienen de familias cuyos ingresos son muy bajos para calificar para el programa de almuerzos subvencionados. Entendemos que una escuela con un alto porcentaje de nios desfavorecidos puede ser capaz de producir un gran "valor aadido" para sus alumnos, a pesar de que sus niveles promedio en la calificacin en las pruebas pueden ser bajos. Sabemos mucho menos acerca de la medida en que afectan al logro factores similares en otros pases, pero debemos suponer, a falta de prueba en contrario, que lo hacen. Sera absurdo dejar de aplicar este entendimiento a la comparacin de resultados de las pruebas internacionales. La base de datos de TIMSS 2011 est programada para salir pronto, y en diciembre prximo, dar a conocer los resultados de PISA y hacer disponibles los datos a partir de la administracin de la prueba de 2012. Los estudiosos entonces ser capaces de profundizar en TIMSS 2011 y las bases de datos de PISA 2012 y colocar pblicamente los resultados promedio nacional en el contexto apropiado. Instamos a los polticos y los expertos esperen la comprensin de este contexto, antes de sacar conclusiones acerca de las lecciones de las evaluaciones futuras del TIMSS o PISA. Tenemos previsto realizar nuestros propios anlisis de estos datos cuando estn disponibles, y publicar los suplementos en nuestro informe tan pronto como sea prctico hacerlo, dado el cuidado que se debe tener con estas bases de datos complejas. Nota: En diciembre de 2012, se envi una copia del borrador de nuestro informe sobre la comparacin internacional de calificacin en las pruebas de Andreas Schleicher de la OCDE / PISA, y Hans Wagemaker de IEA / TIMSS. Wagemaker comenta sobre el informe en una conferencia de prensa para anunciar la publicacin del informe. El audio de la conferencia de prensa est disponible aqu. Schleicher present observaciones escritas. Hemos publicado sus comentarios, y nuestra respuesta a ellos, aqu.