Documenti di Didattica
Documenti di Professioni
Documenti di Cultura
Tema 5.2
Evaluación del instrumento de medida:
FIABILIDAD II
TEMA 5.2 : FIABILIDAD II
2
LA FIABILIDAD COMO CONSISTENCIA INTERNA
Distintos procedimientos:
1. Asignar todos los elementos pares a la forma 1 y los impares a la
forma 2. Sin embargo, en muchos test los ítems fáciles suelen
aparecer al principio.
2. Ordenar los ítems por su dificultad: a continuación asignar los
pares a la forma 1 y los impares a la forma 2.
TEMA 5.2 : FIABILIDAD II
2rXX '
R XX'
1 rXX '
RXX ' coeficient e de fiabilidad cuando se ha duplicado su longitud.
rXX' coeficient e de fiabilidad de cada una de las mitades.
5
LA FIABILIDAD COMO CONSISTENCIA INTERNA. División del
test en dos mitades. Spearman-Brown
5 8 7
6 6 6
Total 42 34
6 6 6 36 36 36
Total 42 34 302 202 241 Spearman-Brown.
Obtenemos un valor de
0,52
rX1X2 0,35
2rXX 2 * 0,35
R XX 0,52
1 rXX 1 0,35 7
LA FIABILIDAD COMO CONSISTENCIA INTERNA. División del
test en dos mitades. Rulon
S d2
rX1X2 1 2
Sx
d diferencia entre las puntuaciones pares e impares.
S d2 varianza de las diferencia s entre las puntuaciones
TEMA 5.2 : FIABILIDAD II
pares e impares.
S x2 varianza de las puntuaciones empíricas de los sujetos.
La equivalencia entre Spearman-Brown y Rulon depende
del grado de paralelismo de las formas, de forma que
cuanto más parecidas sean, más se aproximan los
valores. 8
LA FIABILIDAD COMO CONSISTENCIA INTERNA. División del
test en dos mitades. Rulon
F 5 2 3
2 2 ... (12 )
X d 0.17; S 2
d (0.17) 2 1.14
6
S d2 1.14
rXX 1 2 1 0.61
Sx 2.91 10
LA FIABILIDAD COMO CONSISTENCIA INTERNA. División del
test en dos mitades. Guttman-Flanagan
S p2 Si2
rX1X2 21
S 2
x
S p2 y Si2 varianzas de las puntuaciones de los ítems pares
TEMA 5.2 : FIABILIDAD II
e impares respectivamente.
S x2 varianza de las puntuaciones empíricas de los sujetos.
S p2 Si2
rX 1 X 2 21
S 2 Observamos que
x llegamos al mismo
S p2 0.81 resultado, sin
necesidad de calcular
Si2 1.22 las puntuaciones
TEMA 5.2 : FIABILIDAD II
referidas a las
S x2 2.91
diferencias.
0.81 1.22
rX 1 X 2 21 0.61
2.91
12
LA FIABILIDAD COMO CONSISTENCIA INTERNA. Métodos
basados en la covariación de los ítems.
Métodos:
- Coeficiente alpha de Cronbach, y sus casos
particulares: KR20 y KR21 de Kuder-Richardson
(1937). 13
LA FIABILIDAD COMO CONSISTENCIA INTERNA. Métodos
basados en la covariación de los ítems.
Coeficiente alpha de Cronbach.
- Coeficiente alpha de Cronbach: expresa la fiabilidad del test
en función del número de ítems y de la proporción de la
varianza total del test debida a la covariación de los ítems
cuanto más covaríen los ítems, mayor será la fiabilidad del
test.
n
S 2j
n j 1
1
n 1 S x2
TEMA 5.2 : FIABILIDAD II
n número de elementos del test.
n
j 1
Sujeto 1 2 3 4 5
A 3 4 3 3 4
B 2 3 2 4 4
C 4 2 2 3 3
TEMA 5.2 : FIABILIDAD II
D 2 1 1 2 1
E 1 1 1 2 1
F 0 0 1 1 1
15
LA FIABILIDAD COMO CONSISTENCIA INTERNA. Métodos
basados en la covariación de los ítems.
Coeficiente alpha de Cronbach.
Se ha aplicado un test de percepción visual a 6 sujetos.
Calcular el valor del coeficiente de fiabilidad del test.
Sujeto 1 2 3 4 5 X
1. Calcular la varianza de cada ítems
A 3 4 3 3 4 17 (puntuaciones de cada columna)
B 2 3 2 4 4 15
2. También habrá que calcular la
C 4 2 2 3 3 14 varianza de las puntuaciones en el
D 2 1 1 2 1 7 test total (última columna)
E 1 1 1 2 1 6 3. Por último, habrá que obtener el
F 0 0 1 1 1 3 alpha de Cronbach. Que en este caso
TEMA 5.2 : FIABILIDAD II
2 vale .94
3 2
2 2
4 2
2 2
12
0
S12 (2) 2 1.67; S22 1.82;...; S52 1.9
6
17 2 152 14 2 7 2 6 2 32
Sx
2
(10.33) 2 27.29
6
5 1.67 1.82 ... 1.89
1 0.94 16
5 1 27.29
LA FIABILIDAD COMO CONSISTENCIA INTERNA. Métodos basados
en la covariación de los ítems.
Coeficiente alpha de Cronbach. Estimador insesgado
El estimador insesgado: alpha no es más que un estimador o
aproximación al valor real del coeficiente de fiabilidad. Sin
embargo, existe una aproximación más exacta de dicho
valor que se expresa mediante la siguiente fórmula:
( N 3)ˆ 2
N 1
estimador insesgado
ˆ valor de alpha de Cronbach
TEMA 5.2 : FIABILIDAD II
ˆ , cuando N
1
F
1 ˆ
F se distribuye con ( N 1) y (n - 1)(N - 1) grados de libertad
TEMA 5.2 : FIABILIDAD II
1 ˆ1
W
1 ˆ 2
TEMA 5.2 : FIABILIDAD II
20
LA FIABILIDAD COMO CONSISTENCIA INTERNA. Métodos
basados en la covariación de los ítems.
Coeficiente alpha de Cronbach. Inferencias
¿Existen una diferencia significativa entre el valor de alpha de
dos muestras dependientes?
Feldt (1969), propone el estadístico de contraste t basado en
la distribución t con (N-2) g.l
(ˆ1 ˆ 2 ) ( N 2)
t
4(1 ˆ )(1 ˆ )(1 r )
1 2
2
x1 x 2
21
LA FIABILIDAD COMO CONSISTENCIA INTERNA. Métodos basados
en la covariación de los ítems.
Coeficiente alpha de Cronbach. Casos particulares
Casos particulares de Alpha fórmulas de Kuder-Richardson
(1937): hacen referencia a la estimación de la fiabilidad de un
test en el caso de que los ítems sean dicotómicos la
varianza viene determinada por:
S h2 ph qh
Donde ph es la proporción de aciertos; mientras que qh es la de
errores. En tal caso alpha se puede definir mediante KR20 ,o
KR21 (cuando los ítems presentan igual dificultad; es decir, la
misma proporción de aciertos)
TEMA 5.2 : FIABILIDAD II
n pq
2
X
KR20 1 X
n 1 S x2 n n
KR21 1
Donde; n 1 S x2
n= es el número de ítems
p= es la proporción de aciertos
q= es la proporción de errores
S2x= es la varianza total de test. 22
LA FIABILIDAD COMO CONSISTENCIA INTERNA. Métodos basados
en la covariación de los ítems.
Coeficiente alpha de Cronbach. Casos particulares
Supongamos un test compuesto por 6 ítems, y al que responden 6
sujetos
sujetos A B C D E F n pq
1 1 1 1 1 1 1
KR20 1
n 1 2
Sx
2 1 1 1 0 1 1
6 .22 0.25 ... .22
3 1 0 1 0 1 1 1 .82
4 0 1 0 1 0 1
5 4.45
5 0 0 0 0 0 0 2. Y a continuación aplicar
KR20. Se observa que el
TEMA 5.2 : FIABILIDAD II
6 1 0 0 0 0 0
valor obtenido es de .82
p 4/6 3/6 ... ... ... 4/6
n 1
1 1
n h 2j
n 1 1 n 2 r jh
n número de ítems del test n número de ítems del test
1 varianza explicada por
TEMA 5.2 : FIABILIDAD II
k K=número de subtests.
S S
2 2
2
x
j 1
j
Sx=varianza del test total.
2
Sj=varianza de cada subtest.
nj
2
k
S x 1
2
nj=número de ítems de cada subtest.
j 1 n
n= número total de items del test. 25
EL COEFICIENTE BETA () DE RAJU. Ejemplo
Beta
1. A partir de las
4 5 7 9 11 puntuaciones totales
1 0.48 calculamos alpha, y
4 1 50
encontramos que vale
50 (5 7 9 11)
0.50 .48.
TEMA 5.2 : FIABILIDAD II
27
ESTIMACIÓN DE LA PUNTUACIÓN VERDADERA
1. Desigualdad de Chebychev.
2. Estimación basada en la distribución normal de los
errores.
3. Estimación basada en el modelo de regresión.
28
ESTIMACIÓN DE LA PUNTUACIÓN VERDADERA.
Estimación mediante la desigualdad de Chebychev
K P X X KS X 1
1 2
K
TEMA 5.2 : FIABILIDAD II
donde :
1
1 2 nivel de confianza utilizado.
K
Sx desviación típica de la variable aleatoria.
29
ESTIMACIÓN DE LA PUNTUACIÓN VERDADERA.
Estimación mediante la desigualdad de Chebychev
Desigualdad de Chebychev
K P X V KSe 1
1
K2
1. Tendríamos que
sustituir la media, por 2. La desviación
TEMA 5.2 : FIABILIDAD II
30
ESTIMACIÓN DE LA PUNTUACIÓN VERDADERA.
Estimación mediante la desigualdad de Chebychev
1 2. Despejamos y calculamos el
1 2 0.95; K 4.5 valor de K. En este caso es 4.5
TEMA 5.2 : FIABILIDAD II
k
P| X V | KS X 0.95; 3. Sustituimos todos los valores
en la desigualdad. Y
P| 65 V | 4.5 * 3.64 0.95 comprobamos que con una
P 16.38 | V 65 | 16.38 0.95 Prob. del 95% la puntuación
P48.62 V 81.38 0.95 verdadera de un sujeto que ha
obtenido una X=65, se
encuentra entre 48.62 y 81.38
31
(intervalo muy amplio)
ESTIMACIÓN DE LA PUNTUACIÓN VERDADERA. Estimación
basada en la distribución normal de los errores
57.87
4. Finalmente el IC de V. Que para
X=65, estará entre 57.87 y 72.13.
48.62≤ V ≤ 81.38
Este intervalo es menos amplio que
57.87 ≤ V ≤ 72.13 el anterior, debido a que estamos
asumiendo cierta distribución de
probabilidad en los datos, cosa que 33
no ocurría antes.
ESTIMACIÓN DE LA PUNTUACIÓN VERDADERA.
Estimación basada en el modelo de regresión
Sy
Y ` rxy (X X ) Y
Sx
Donde:
rxy es la correlación entre ambas variables.
Sy, Sx son las respectivas desviaciones típicas 34
ESTIMACIÓN DE LA PUNTUACIÓN VERDADERA.
Estimación basada en el modelo de regresión
Sv
V ` rxv (X X ) V 3. Y la Media de Y,
Sx por la de V.
2. La Sy, por la
1. La Y, sería Sv
sustituida por V´
3.Emax Zc * Svx 1.96 * 3.09 6.06 3. El Emax; que es resultado del producto
de los anteriores. 6.06
TEMA 5.2 : FIABILIDAD II
48.62≤ V ≤81.38
Si comparamos este intervalo con los
57.87 ≤V ≤ 72.12 anteriores, es el menos amplio de todos
a la larga los errores de pronóstico serán
55.43 ≤V ≤ 67.55 los mínimos. 37
VALORACIÓN DE LA TEORÍA CLÁSICA DE LOS TEST
VALORACIÓN DE LA TCT
Ventajas:
Parsimonia y enjundia psicológica. Aplica a una amplia
diversidad de situaciones a las que ha sabido dar
soluciones prácticas (Muñiz, 2001).
Limitaciones:
1. Los supuestos no se pueden comprobar empíricamente
2. Concepto de error de medida: a) homogéneo a lo largo
TEMA 5.2 : FIABILIDAD II
39
INTRODUCCIÓN A LA FIABILIDAD EN LOS TESTS
REFERIDOS AL CRITERIO
42
INTRODUCCIÓN A LA FIABILIDAD EN LOS TESTS
REFERIDOS AL CRITERIO. Fiabilidad
43
INTRODUCCIÓN A LA FIABILIDAD EN LOS TESTS
REFERIDOS AL CRITERIO. Fiabilidad. Formas paralelas
Donde; Donde;
Fc= número de personas en la Fc= número de personas en la
que ambos tests coinciden en que ambos tests coinciden en
la clasificación. la clasificación.
N= número total de personas. Fa=coincidencia por azar
N= número total de personas.
44
INTRODUCCIÓN A LA FIABILIDAD EN LOS TESTS
REFERIDOS AL CRITERIO. Fiabilidad. Formas paralelas
Se ha aplicado dos tests paralelos de Psicometría a 20 sujetos. Las
clasificaciones realizadas se muestran en la siguiente tabla.
Calcular la fiabilidad de la clasificación.
1. Aplicando p0 vemos
Test B que los tests coinciden en
Test A Apto No-apto Total (N) clasificar a 2 aptos y 14
no-aptos la fiabilidad es
Apto 2 3 5
0.80
No-apto 1 14 15
2. Aplicando K vemos la
Total (N) 3 17 20 fiabilidad se reduce
TEMA 5.2 : FIABILIDAD II
considerablemente al
Fc 2 14 considerar las clasificaciones
1. p0 0.80
N 20 realizadas por azar.
3 5 17 15
(2 14)
Fc Fa 20 20 16 13.5
2.K 0.38
N Fa 20 13.5 20 13.5
45
OTRAS APROXIMACIONES AL ESTUDIO DE LA FIABILIDAD.
LA FIABLIDAD EN LA METODOLOGÍA OBSERVACIONAL
47
A MODO DE SÍNTESIS
- Desigualdad de Chebychev.
- Método de regresión
48
A MODO DE SÍNTESIS
- P0 de Hambleton y Novick
- Kappa de Cohen.
TEMA 5.2 : FIABILIDAD II
49
50 BIBLIOGRAFÍA COMENTADA
1. Barbero, I., García, E. Vila, E., y Holgado, F.P. (2010). Psicometría:
Problemas resueltos. Madrid: Sanz y Torres.
Se trata de un libro de ejercicios y problemas en el que se incluye el
desarrollo de la solución. El alumno podrá completar desde un punto de
vista aplicado los conceptos y contenidos vistos en la parte teórica; así como
adquirir las destrezas necesarias para la resolución de problemas.
2. Barbero, I. (Coord) , Vila, E. y Holgado, F.P. (2010). Psicometría. Madrid:
Sanz y Torres.
En el capítulo 4 se introduce el modelo lineal clásico y el concepto de tests
paralelos, así como la interpretación del coeficiente de fiabilidad y distintos
TEMA 5.2 : FIABILIDAD II
Universitas.
En el Capítulo 1 se resumen los conceptos fundamentales del modelo lineal clásico y
la definición de paralelismo.
6. Nunnally, J.C. y Bernstein, I.J. (1995). Teoría Psicométrica. México: McGraw Hill.
El Capítulo 6 se presentan aspectos sobre supuestos y deducciones del modelo
clásico. En el Capítulo 7 presentan algunas limitaciones y extensiones del modelo
51
lineal clásico.