Aplicación de las evaluaciones internacionales

PISA y PIRLS

Córdoba, 11 enero 2006

 Evaluar ¿para qué?

RENDIR COMPARAR
CONOCER
CUENTAS

MEJORAR
 Finalidad de la
evaluación

Aumentar la
transparencia Valorar el grado de
del sistema cumplimiento de los
educativo. objetivos propuestos

MEJORAR la calidad y equidad de la

educación.
La evaluación en un sistema educativo
con autonomía territorial y de centros

EXIGE

Definición de
objetivos
Corresponsabilidad Evaluación de
y compromiso de los procesos y
todos los resultados

Recursos
suficientes
 Evaluaciones internacionales

Desde los años 60 (Siglo XX):

IEA: 1964 FIMS (Primer estudio internacional, matemáticas)
1982 SIMS (Segundo estudio internacional, matemáticas)
1991 RLS (Comprensión lectora)
1995, 2003 TIMSS (Tercer estudio internacional, matemáticas)
2006 PIRLS
IAEP, ETS: 1988, 1991 (Estudio internacional, matemáticas y ciencias)

Desde 1994:
OCDE: irrupción en la evaluación internacional
2000, 2003 PISA (Programa internacional de evaluación de los

estudiantes: comprensión lectora,

matemáticas y ciencias)
2006 (Próximo estudio)
¿Qué es
PISA?
PISA es un estudio:

– Del rendimiento educativo de los alumnos

de 15 años

– Orientado a la política educativa,

– Organizado y gestionado por la OCDE.

– Que permite la comparación en el tiempo

(cada tres años) y en el espacio (entre países)
 PISA evalúa:

• Conocimientos y destrezas necesarios para la

vida adulta

• Rendimientos de los alumnos en lectura,

matemáticas y ciencias

• En cada estudio una materia principal:

•PISA 2000: lectura, matemáticas, ciencias
•PISA 2003: lectura, matemáticas, ciencias
•PISA 2006: lectura, matemáticas, ciencias
 Importancia de PISA:
En PISA 2003 han participado 48 países todos los de la UE). Otros 11 se añadirán en 2006.
•
(1/3 de la población y 90% del PIB mundial).

Trata de explicar el rendimiento pero considerando los factores del entorno.

•

Mide competencias básicas

•

PISA es un referente para los objetivos

educativos de la Unión Europea en 2010.
El tipo de prueba :
• Evalúa competencias básicas, no currículos
• Participan alumnos de diferentes cursos: 15
años.

Esta prueba exige:

• Motivar a los alumnos ante una duración

elevada de los ejercicios
• Máximo interés y dedicación de los alumnos.
 Resultados en matemáticas

Matemáticas

1 Hong Kong-China*
Media
550
E.T. S.
(4,5) ^ 21 Eslovaquia
Media
498
E.T. S.
(3,3) - Resultados españoles:
2 Finlandia 544 (1,9) ^ 22 Noruega 495 (2,4) -
(3,2) ^
•
3 Corea 542 Cataluña 494 (4,7) -
4 Holanda 538 (3,1) ^ 23 Luxemburgo 493 (1,0) - Por debajo de la
5 Liechtenstein* 536 (4,1) ^ 24 Polonia 490 (2,5) -
6 Japón 534 (4,0) ^ 25 Hungría 490 (2,8) - media y de países
7 Canadá 532 (1,8) ^ 26 España 485 (2,4) -
8
9
Bélgica
Macao-China*
529
527
(2,3) ^
(2,9) ^
27 Letonia*
28 Estados Unidos
483
483
(3,7) -
(2,9) -
como Francia y
10
11
Suiza
Australia
527
524
(3,4) ^
(2,1) ^
29 Rusia*
30 Portugal
468
466
(4,2) v
(3,4) v
Alemania
12 Nueva Zelanda 523 (2,3) ^ 31 Italia 466 (3,1) v
13
14
República Checa
Islandia
516
515
(3,5) ^
(1,4) ^
32 Grecia
33 Serbia*
445
437
(3,9) v
(3,8) v
• A la altura de
15
16
Dinamarca
Francia
514
511
(2,7) ^
(2,5) ^
34 Turquía
35 Uruguay*
423
422
(6,7) v
(3,3) v
Noruega y Estados
17
18
Suecia
Austria
509
506
(2,6) ^
(3,3) ^
36 Tailandia*
37 México
417
385
(3,0) v
(3,6) v Unidos
Castilla y León 503 (4,0) ^ 38 Indonesia* 360 (3,9) v
19 Alemania 503 (3,3) ^ 39 Túnez* 359 (2,5) v
20 Irlanda 503 (2,4) ^ 40 Brasil* 356 (4,8) v • Por encima de Italia
País Vasco 502 (2,8) ^ Promedio OCDE 500 (0,6)

E.T. Error típico

Grecia y Portugal
S. Significatividad de la diferencia con España ^ más alta
v más baja
Los países con asterisco no son miembros de la OCDE
 300
350
400
450
500
550
600
Hong Kong-China*
Finlandia
Corea
Holanda
Liechtenstein*
Japón 1
Canadá
Bélgica
Macao-China*
Suiza
Australia
Nueva Zelanda
República Checa
Islandia
Dinamarca
Francia
Suecia
Austria
Castilla y León
Alemania
Irlanda
País Vasco
Eslovaquia
Noruega
Cataluña
Luxemburgo
2

Polonia
Hungría
España
Letonia*
Estados Unidos
Rusia*
Portugal
Italia
Grecia
Serbia*
Turquía
Uruguay*
Tailandia*
México
Indonesia*
Túnez*
Resultados en matemáticas

Brasil*
3

España :485
Hong Kong: 550

Media OCDE :500

 Resultados en matemáticas

30%
25%

20%
España
15%
OCDE
10%

5%
0%
<1 1 2 3 4 5 6
Niveles de competencia
 Porcentajes por niveles de competencia:
comparación con Finlandia

Situación figurada:
Situación real (se realiza una traslación a la
derecha equivalente a un nivel)
30 30
25
25
20

Porcentajes
20 España
Porcentajes

15
España Finlandia
15 10
Finlandia
5
10
0
5 <0 1 2 3 4 5 6
Niveles de competencia
0
<0 1 2 3 4 5 6
Niveles de competencia
 Diferencias de género
Ventaja alumnos Ventaja alumnas

Matem áticas -9

Lectura 39

Ciencias -4

Solución de
6
problem as

-10 0 10 20 30 40
Diferencias por titularidad de los centros
Diferencia de los centros privados frente a los públicos
40

32
Si se detrae el
efecto del nivel
30 26 socio-económico y
cultural de alumnos
20 y centros,
los resultados son
10
muy parecidos

1
0
sin detracción detracción del nivel socio- detracción adicional del nivel
económico y cultural del alumno socio-económico y cultural
promedio del centro
Relación entre resultados en
matemáticas y equidad:

650

M ayor equidad
600 El sistema
educativo
Mayor excelencia

español
Finlandia
Holanda Corea
Puntuación media en Matemáticas

550
Japón Canadá
Bélgica
A ustralia

produce una
Islandia
A lemania OCDE Castilla y León
500 Hungría

buena tasa de
Irlanda País Vasco
Cataluña
Italia Es paña
EEUU

450 Grecia Portugal

equidad, pero
Turquía
Uruguay
resultados
pobres
400
México

Brasil

350
29 28 27 26 25 24 23 22 21 20 19 18 17 16 15

Coeficiente de variación en Matemáticas

Resultados en matemáticas en relación con
el nivel socioeconómico y cultural:
600

Hong-Kong
Finlandia
Corea Holanda
Canadá
Macao Japón
Suiza Islandia
Francia Suecia
Puntuación en Matemáticas

500 Alemania
Polonia
Luxemburgo
Noruega
España
Letonia Estados Unidos
Portugal
Italia

Grecia

Serbia y M.
Tailandia Turquía Uruguay

400
Los resultados obtenidos por
México
España superan ligeramente a
Túnez Indonesia
Brasil los esperados en un país con
nuestro nivel
socioeconómico y cultural
300
-1,5 -1,0 -0,5 0,0 0,5 1,0

Indice PISA de estatus socio-económico y cultural

Influencia del entorno socioeconómico y
cultural en los resultados:

Resultados en función del mayor nivel educativo alcanzado por las madres

532
Universidad
514

508
Bachillerato
489 OCDE
España

Estudios 458
obligatorios 471

400 500 600

Influencia del entorno socioeconómico y
cultural en los resultados
Resultados en función del número de libros en la casa

550
526 534
502
500
471

450 436

402
400

350
0-10 11-25 26-100 101- 201- Más de
200 500 500
Influencia de la historia académica del
alumno
Resultados en función de la repetición de curso:

550
512
500

450 433
391
400
355
350

300
No Sólo en Sólo en En Primaria y
Secundaria Primaria en
Secundaria
Influencia de la historia académica del
alumno
Resultados según los alumnos hayan cursado educación infantil:

550

500 491

458
450
Un año o Más de un año
menos
Gasto por alumno y resultados:
600

550
Finland
Korea
Netherlands Japan
Belgium
Resultados en Matemáticas

Canada
Switzerland
Czech republic Australia Iceland
500
Sweden Denmark
Ireland Germany
France Austria
Slovak republic
Hungary Norway
Poland
Spain United States
450
Portugal Italy

Greece

400
El gasto por alumno de los países está correlacionado positivamente con la
puntuación media de sus estudiantes en matemáticas ….. pero no es una
garantía de buenos resultados:
350
Mexico
0 10.000 20.000 30.000 40.000 50.000 60.000 70.000 80.000 90.000 100.000

R2 = 0.28

Gasto acumulado (US$)

Iniciativas y compromisos para mejorar la
educación
Características
Evaluaciones generales
-Colaboración de los profesores.
de diagnóstico en 4º de
primaria y 2º de -Medición de competencias
secundaria básicas y niveles de rendimiento.

-Consideración de los contextos

socioeconómicos y culturales.
Más autonomía
-Evaluación formativa, censal y
anual para que los centros
Más evaluación puedan tomar medidas
correctoras.

-Anónima y muestral para la

Administración educativa.
Competencias clave para un aprendizaje a
lo largo de la vida (Unión Europea)

• Comunicación en lengua materna.

• Comunicación en lengua extranjera.
• Competencia matemática, ciencia y tecnología.
• Competencia digital.
• Aprender a aprender.
• Competencias cívicas.
• Espíritu emprendedor.
• Expresión cultural.
Competencias básicas ÁREAS
C. Naturaleza
Lengua materna
Ed. Física
Lengua extranjera
C. Sociales
Desde los
Ciudadana contenidos de Lengua C. y L.
las distintas
áreas se L. extranjeras
Digital trabajan las
competencias Matemáticas
Aprender a aprender básicas
E. plástica y v.
Matemática, científica y
técnica Música
Espíritu emprendedor
Tecnologías…
Cultural
 Compromisos de toda la
sociedad

Esfuerzo
inversor Autonomía

Apoyo al Evaluación
profesorado

El éxito de todos los

alumnos