Documenti di Didattica
Documenti di Professioni
Documenti di Cultura
ISSN: 1560-6139
dalvarez@correo.ulima.edu.pe
Universidad de Lima
Per
El objetivo de este estudio fue realizar el anlisis psicomtrico del test de Matrices
Progresivas Avanzadas de Raven mediante el modelo de tres parmetros de la
Teora de Respuesta al tem, en una muestra conformada por 2081 estudiantes
universitarios de la ciudad de Lima. La media de la edad de los alumnos
evaluados fue de 21,3 4.28 aos, el 50,9% de sexo femenino y el 49,1% de sexo
masculino. Los alumnos pertenecientes a universidades estatales eran el 63,5% y
los de universidades particulares el 36,5%. Los hallazgos indican que los tems
del test no presentan una adecuada calibracin de acuerdo con el Modelo de Tres
Parmetros. El anlisis comparativo indica que solo existen diferencias
estadsticas significativas por sexo pero no por tipo de universidad.
Teora de Respuesta al tem / ajuste / Modelo de Tres Parmetros /Raven
* El presente estudio fue patrocinado por el Consejo Superior de Investigaciones (CSI) de la Universidad
Nacional Mayor de San Marcos, bajo el cdigo N.o 041801051.
Correo electrnico: lescurra@correo.ulima.edu.pe; aedvdt2@yahoo.com.
72
04-persona13-ESCURRA:revista persona 28/01/2011 03:50 Pgina 73
73
04-persona13-ESCURRA:revista persona 28/01/2011 03:50 Pgina 74
bien los puntajes de los MPA totales aplic el MPA. Se determinaron los
fueron muy confiables en las tres oca- tipos de errores que los participantes
siones, las confiabilidades de la mayo- cometieron, los distractores para cada
ra de los tems fueron sumamente problema del MPA fueron primero
bajas. Adems, reportaron que el mo- codificados como uno de cuatro errores
delo de un solo factor fue un modelo posibles: correlato incompleto (IC),
adecuado, pues explicaba el 20% de la principio mal aplicado (WP), confluen-
varianza total para la matriz de las cia de ideas (CF) y repeticin (RP).
correlaciones inter-tem en las tres oca- Los puntajes de cada tipo de error
siones. Tambin se encontr que el to- fueron calculados para cada participan-
tal de los puntajes del MPA aument te de manera individual y reflej la des-
significativamente en las tres ocasiones viacin de seleccionar por casualidad
(aproximadamente dos tems por cada exclusivamente un tipo de error. Los
ocasin). Los autores reportaron que anlisis realizados compararon tres
las mejoras en el puntaje total por las grupos de edad (joven, medio y adulto)
ocasiones ocurrieron en un contexto en y tres niveles de habilidad (bajo, medio
el cual los sujetos corrigieron las res- y alto). Los resultados indicaron que
puestas incorrectas de la ocasin ante- los adultos de todas las edades come-
rior. El nmero de tems sin contestar tieron tipos similares de errores, pero
no se relacion con ambos MPA en que los adultos de niveles de habilida-
cualquier ocasin dada y la cantidad de des diferentes cometieron distintos
ganancia en el puntaje realizado en las tipos de errores. Tambin se examina-
ocasiones. Estos resultados sugirieron ron la edad y las diferencias de habili-
que las mejoras en el desempeo no dad en los problemas por el tipo de
estuvieron basadas en la adquisicin de reglas requeridas, como lo clasific
un plan estratgico para responder a Carpenter; los resultados permitieron
ms tems o en la retencin de la infor- apreciar que a medida que se incre-
macin de un tem especfico, sino que mentaban la edad y la habilidad se pre-
la mejora reflej un aprendizaje de sentaron diferencias en el nmero de
algn aspecto comn en los tipos de errores cometidos cuando se involucra-
tems encontrados en el MPA. ron diferentes tipos de reglas.
Babcock (2002) realiz un estudio Rushton, Skuy y Fridjhon (2003)
donde examin las diferencias de eda- analizaron si el MPA tena la misma
des adultas en los tipos de errores rea- validez de constructo en los estudiantes
lizados en el test de MPA de Raven
universitarios africanos y en los no
(MPA). La muestra total fue de 818
africanos. Los anlisis fueron realiza-
casos, los cuales fueron compilados en
dos en 294 estudiantes, de entre 17 y
tres estudios mayores en los que se
23 aos, pertenecientes a las facultades
74
04-persona13-ESCURRA:revista persona 28/01/2011 03:50 Pgina 75
75
04-persona13-ESCURRA:revista persona 28/01/2011 03:50 Pgina 76
76
04-persona13-ESCURRA:revista persona 28/01/2011 03:50 Pgina 77
77
04-persona13-ESCURRA:revista persona 28/01/2011 03:50 Pgina 78
78
04-persona13-ESCURRA:revista persona 28/01/2011 03:50 Pgina 79
puede diferenciar entre personas locali- denominan de ajuste; del anlisis de los
zadas a lo largo del continuo. En un desajustes se obtiene la informacin
tem la capacidad de diferenciar entre necesaria para determinar las calibra-
personas reduce su incertidumbre acer- ciones de tems y las medidas conve-
ca de su localizacin. Esta capacidad nientes en cada caso.
para diferenciar entre personas con dis- La TRI (Lord, 1980) propone un
tintas ubicaciones es mayormente una modelo probabilstico que permite
constante que puede variar entre los conocer la informacin proporcionada
tems de un instrumento. por cada tem. De acuerdo con Ham-
Los anlisis del rasgo latente se bleton, Swaminathan y Rogers (1991)
centran en la interaccin de los sujetos el comportamiento de un sujeto evalua-
con los tems y los modelos estadsti- do ante un tem de un test puede expli-
cos que recogen esta relacin, los cua- carse por el rasgo latente. Las relacio-
les se expresan grficamente por las nes entre la respuesta al tem y el rasgo
curvas caractersticas del tem. latente se pueden describir mediante
Existen dos grandes aproximaciones una funcin denominada: Curva Carac-
en la Teora del Rasgo Latente. La dife- terstica del tem (CCI).
rencia entre ambas se refleja en el tipo
de relacin que se establece entre los Supuestos bsicos
datos y el modelo estadstico utilizado. Se consideran hiptesis operativas de
La primera de las aproximaciones trabajo que sern validadas al relacio-
se agrupa alrededor de la TRI; en ella nar los datos con los modelos TRI uti-
se trata de buscar un modelo que se lizados, determinando si son apropia-
ajuste mejor a los datos disponibles dos o no para explicar los datos
mediante la parametrizacin del rasgo (Hambleton, Swaminathan & Rogers,
latente y de las propiedades de los 1991; Muiz, 1997; De Ayala, 2009)
tems. Se les podra considerar mode- tal como se detallan a continuacin:
los de contraste, y como proponen Unidimensionalidad del rasgo
Thissen y Orlando (2001) los modelos latente.- En un modelo TRI solo se
de esta teora miden lo que son los mide un rasgo latente por un con-
tems, no lo que deberan ser. junto de tems del test. El cumpli-
La segunda aproximacin corres- miento de este supuesto puede no
ponde a los modelos de Rasch, en los ser exacto debido a factores tanto
cuales se parte de un modelo determi- cognitivos como de personalidad,
nado que dispone de unas propiedades as como relacionados con la propia
especficas a las que los datos obteni- administracin del test. Si existe un
dos se adecan o no. Estos modelos se componente dominante que influya
79
04-persona13-ESCURRA:revista persona 28/01/2011 03:50 Pgina 80
80
04-persona13-ESCURRA:revista persona 28/01/2011 03:50 Pgina 81
81
04-persona13-ESCURRA:revista persona 28/01/2011 03:50 Pgina 82
Tabla 1
Composicin de la muestra
Frecuencia Porcentaje
Gestin de la universidad
Particular 760 36,5
Estatal 1321 63,5
Ao de estudios
Primer ao 580 27,9
Segundo ao 530 25,5
Tercer ao 501 24,1
Cuarto ao 470 22,5
Sexo
Hombre 1021 49,1
Mujer 1060 50,9
n = 2081
82
04-persona13-ESCURRA:revista persona 28/01/2011 03:50 Pgina 83
83
04-persona13-ESCURRA:revista persona 28/01/2011 03:50 Pgina 84
Tabla 2
Anlisis de la confiabilidad del test de MPA de Raven
* p < .05
.n = 2081
84
04-persona13-ESCURRA:revista persona 28/01/2011 03:50 Pgina 85
Tabla 3
Anlisis de la calibracin de los tems del test de MPA de Raven mediante el modelo
de tres parmetros
tem Parmetros X2 g. l. p
.a .b .c
1 0.462 -4.597 0.029 1.60 8 .9905
2 0.784 -3.023 0.027 2.50 6 .8648
3 0.662 -3.586 0.026 6.70 7 .4619
4 0.510 -2.478 0.027 11.20 9 .2648
5 0.550 -2.581 0.022 9.70 8 .2833
6 0.579 -2.805 0.023 15.90 8 .0439
7 0.499 -2.840 0.025 12.00 9 .2147
8 0.459 -1.860 0.031 4.30 9 .8890
9 0.911 -2.031 0.034 9.50 7 .2215
(contina)
85
04-persona13-ESCURRA:revista persona 28/01/2011 03:50 Pgina 86
(continuacin)
tem Parmetros X2 g. l. p
.a .b .c
10 0.880 -1.668 0.027 17.70 8 .0237
11 0.885 -2.222 0.021 7.30 7 .3991
12 0.573 -2.488 0.023 11.60 8 .1708
13 0.312 -1.785 0.022 11.60 9 .2360
14 0.811 -1.647 0.019 14.30 8 .0754
15 0.603 -1.598 0.018 12.70 9 .1786
16 0.725 -1.282 0.053 13.90 9 .1272
17 0.492 -1.920 0.018 28.20 9 .0009
18 0.355 -0.406 0.019 12.40 9 .1892
19 0.498 -2.042 0.025 10.60 9 .3046
20 0.349 -1.541 0.027 11.70 9 .2280
21 0.548 -0.670 0.016 42.30 9 .0000
22 0.554 0.140 0.021 25.50 9 .0024
23 0.577 0.130 0.021 31.60 9 .0002
24 0.456 1.289 0.015 16.60 9 .0562
25 0.530 0.310 0.010 38.40 8 .0000
26 0.473 1.217 0.036 22.90 9 .0064
27 0.647 1.860 0.021 25.90 8 .0011
28 0.601 2.286 0.030 30.30 8 .0002
29 0.819 1.919 0.045 13.30 8 .1027
30 1.256 1.178 0.073 15.80 9 .0702
31 1.562 1.299 0.063 11.10 9 .2702
32 1.402 1.553 0.044 13.70 9 .1336
33 2.450 1.378 0.069 14.40 9 .1076
34 2.506 1.432 0.046 4.90 9 .8466
35 1.907 1.534 0.030 8.40 8 .3986
36 2.188 2.237 0.005 1.90 4 .7626
M 0.844 -0.703 0.029
D.E. 0.583 1.919 0.015
n = 2081
Tabla 4
Anlisis del ajuste del test de MPA de Raven mediante el modelo de tres parmetros
n = 2081
86
04-persona13-ESCURRA:revista persona 28/01/2011 03:50 Pgina 87
24, 25, 26, 27, 28, los cuales alcanzan McDonald, 2003). En la tabla 5 se inclu-
coeficientes chi-cuadrado que son sig- yen las soluciones para los factores 1, 2,
nificativos al p < .05. 3 y 4; los resultados incluidos permiten
apreciar que los ndices de bondad de
b) Anlisis del ajuste al modelo de la ajuste de Tanaka varan entre 0.923 en el
TRI de tres parmetros factor 1 y 0.989 en el factor 4, notndo-
se adems que la raz cuadrada media de
Con la finalidad de evaluar el ajuste los residuales (RMSR) es menor que el
general del Test de MPA de Raven se valor de 0.0050 en los factores 3 y 4, de
calcul mediante el estadstico G, el manera que los hallazgos indican que
cual alcanz un valor de 542.40 que existen ms de tres factores, lo cual per-
con 299 grados de libertad presenta una mite concluir que el instrumento no es
probabilidad asociada de .00001, por lo unidimensional.
cual se concluye que existen diferen-
cias estadsticas significativas, corro- d) Anlisis de la dependencia local
borando que el instrumento no se ajus- condicional de los tems del Test de
ta adecuadamente al Modelo de Tres MPA de Raven mediante el Modelo de
Parmetros. (tabla 4) Tres Parmetros
Para analizar la dependencia local con-
c) Anlisis de la unidimensionalidad
dicional de los tems del Test de Raven
del Test de MPA de Raven mediante el
se aplic el estadstico Q3 (De Ayala,
Modelo de Tres Parmetros
2009). Debido a que los tems son
El anlisis de la unidimensionalidad del dicotmicos se procedi a usar la meto-
Test de MPA de Raven fue realizado con dologa de los testlets (Wainer, Brad-
base en el anlisis factorial exploratorio low & Wang, 2007), por lo cual se ela-
no lineal, el cual se desarroll aplicando boraron seis agrupamientos aleatorios
el modelo NOHARM (Fraser & de seis tems cada uno, procedindose
Tabla 5
Anlisis de la unidimensionalidad del test de MPA de Raven con el modelo HOHARM
N = 2081
87
04-persona13-ESCURRA:revista persona 28/01/2011 03:50 Pgina 88
Tabla 6
Matriz de correlaciones de los testlets del test de MPA de Raven
n = 2081
Nota: Q32 figura entre parntesis.
88
04-persona13-ESCURRA:revista persona 28/01/2011 03:50 Pgina 89
Grfico 1
Curvas caractersticas de los tems del test de MPA de Raven
Grfico 2
Distribucin de la funcin de informacin y error del test de MPA de Raven
INFORMACIN
Error estndar
89
04-persona13-ESCURRA:revista persona 28/01/2011 03:50 Pgina 90
Tabla 7
Anlisis de la bondad de ajuste a la curva normal de las variables estudiadas
Variables M D. E. Z de Kolmogorov-
Smirnov
Tabla 8
Anlisis del rendimiento en el test de Raven avanzado por sexo
Varn Mujer
Variable n = 1021 n = 1060 U Z
Mr Mr
90
04-persona13-ESCURRA:revista persona 28/01/2011 03:50 Pgina 91
Tabla 9
Anlisis del rendimiento en el test de Raven avanzado por tipo de universidad
Estatal Particular
Variable n = 1321 n = 760 U Z
Mr Mr
miten apreciar que existen diferencias Zagar, Arbit y Friedland (1980), Burke
estadsticas significativas (Z = 47.42 p (1985), Kline (1986), OLeary, Rusch y
< .001), notndose que los varones pre- Guastello (1991), Torres y Cuesta
sentan una media de rangos mayor (Mr (1992), Raven (1999) y por Delgado,
= 1140.30) que las mujeres (Mr = Escurra, Bulnes y Quesada (2001). En
945.36). conclusin, la revisin de estos resulta-
En relacin con la comparacin del dos indica que el test funciona adecua-
Test de Raven avanzado por tipo de damente bajo los requerimientos del
universidad (tabla 9), se puede notar modelo de la TCT (Brown, 1980; Walsh
que no existen diferencias estadsticas & Betz, 1995; Muiz, 1996; Muiz,
significativas (Z = 0.634 p > .05) entre 1997; Anastasi & Urbina, 1998; Mart-
la universidad estatal (Mr = 1123.70) y nez, Hernndez & Hernndez, 2006).
la universidad particular (Mr = Como bien indican Lpez Pina
1014.77). (1995), Embretson y Reise (2000);
Muiz, Fidalgo, Cueto, Martnez y
DISCUSIN Moreno (2005); Boorsboom (2005) y
El estudio ha tenido por finalidad reali- De Ayala (2009), la TCT es un modelo
zar el anlisis psicomtrico del Test de muy laxo en sus suposiciones, de ah
MPA de Raven mediante el Modelo de que cuando se analiza bajo el modelo
Tres Parmetros de la TRI. Por ello, ini- de la TRI mediante el Modelo de Tres
cialmente se hizo el anlisis bajo el Parmetros, los principales hallazgos
modelo de la TCT, y los resultados indi- permiten concluir que el instrumento
caron un adecuado funcionamiento psi- ya no funciona en forma adecuada,
comtrico bajo este modelo, pues el hallazgos coincidentes con los estudios
ndice de confiabilidad es elevado. El de Van der Ven y Ellis (2000);
hallazgo concuerda con los estudios Cikrikci-Demirtasli (2002) y Sisto,
hechos por Jensen y Munro (1979), Marn Rueda y Bartholomeu (2006).
91
04-persona13-ESCURRA:revista persona 28/01/2011 03:50 Pgina 92
92
04-persona13-ESCURRA:revista persona 28/01/2011 03:50 Pgina 93
93
04-persona13-ESCURRA:revista persona 28/01/2011 03:50 Pgina 94
94
04-persona13-ESCURRA:revista persona 28/01/2011 03:50 Pgina 95
95
04-persona13-ESCURRA:revista persona 28/01/2011 03:50 Pgina 96
96
04-persona13-ESCURRA:revista persona 28/01/2011 03:50 Pgina 97
97