UNIDAD 3.

La validez y confiabilidad de los instrumentos de medicin

Profesor Titular Telma Piacente Profesor Adjunto Norma Maglio Jefe Trabajos Prcticos Adriana Luque E-mail: piacente@isis.unlp.edu.ar

La validez, en trminos generales, se refiere al grado en que un instrumento realmente mide la variable que pretende medir. Por ejemplo, un instrumento vlido para medir inteligencia debe medir la inteligencia y no la memoria

Evidencia relacionada con el

contenido.
Evidencia relacionada con el

criterio.
Evidencia relacionada con el

constructo.

1. EVIDENCIA RELACIONADA CON EL CONTENIDO

Se habla en este caso de validez de contenido. Se refiere al grado en el que un instrumento muestrea un dominio especfico del contenido de aquello que se mide.

Dominio de la variable

Conocimientos Aritmticos de las Cuatro operaciones fundamentales

Instrumento con Validez de contenido

Instrumento sin validez De contenido Pruebas de suma y resta

Pruebas de suma, Resta,divisin y multiplicacin

2. EVIDENCIA RELACIONADA CON EL CRITERIO

Se habla en este caso de validez emprica o de criterio. Recibe este nombre porque se comparan lo resultados obtenidos en el test (de todos o algunos de los sujetos incluidos en la muestra de tipificacin) con los resultados obtenidos en una medicin externa al test, denominada criterio, que mide la misma variable

Evidencia relacionada con el criterio

Notas actuales de rendimiento acadmico Puntaje del test Muestra de tipificacin Notas futuras de rendimiento acadmico
Validez concurrente

Validez predictiva

2.1. Si la comparacin con el criterio externo se hace en el presente, se habla de validez concurrente. 2.2. Si en cambio la comparacin con el criterio se hace en un tiempo futuro, se habla de validez predictiva.

Este tipo de validez se expresa en un coeficiente de correlacin. La correlacin indica la fuerza y la direccin de una relacin lineal entre dos variables. Se considera que dos variables cuantitativas estn correlacionadas cuando los valores de una de ellas varan sistemticamente con respecto a los valores homnimos de la otra

Si tenemos dos variables (A y B) existe correlacin si al aumentar los valores de A lo hacen tambin los de B y viceversa. La correlacin entre dos variables no implica, por s misma, ninguna relacin de causalidad. El valor del ndice de correlacin vara en el intervalo [-1 a +1] y se expresa por r

Coeficiente de correlacin

+1 (Positiva)
+ antigedad + sueldo

0 (nula)
+ globos + hojas

- 1(negativa)
+ antigedad - precio

- 1 Perfecta negativa - 0,90 Negativa muy fuerte - 0,75 negativa considerable - 0,50 negativa media - 0,25 Negativa dbil - 0,10 Negativa muy dbil - 0,00 Ausencia + 0.10 Positiva muy dbil + 0.25 Positiva dbil + 0.50 Positiva media + 0.75 Positiva considerable. + 0,90 Positiva muy fuerte + 1,00 Positiva perfecta

No se consideran

r = 0. Figura 3.2a, no existe una tendencia sistemtica que muestre que X e Y estn asociadas. r = +1. Figura 3.2b, existe una tendencia sistemtica que muestre que los valores de X e Y aumentan. Los puntos tienden a alinearse a lo largo de una diagonal creciente. r = -1. Figura 3.2c, existe una tendencia sistemtica que muestre que los valores de X aumentan y los de Y disminuyen. Los puntos tienden a alinearse a lo largo de una diagonal decreciente.

Correlacin perfecta = 1 (no aparece en correlaciones efectuadas en variables de disciplinas empricas) Correlacin alta = >0.90 Buena = >0.80 Aceptable = > 0.60 Baja = < 0.60

3. EVIDENCIA RELACIONADA CON EL CONSTRUCTO Se habla aqu de validez de constructo. Constituye la validez ms importante, en la medida que se refiere al grado en que una medicin se relaciona consistentemente con otras mediciones de acuerdo con hiptesis derivadas tericamente y que conciernen a los conceptos (o constructos) que estn siendo medidos. Un constructo es una variable medida y que tiene lugar dentro de una teora o esquema terico

La validez de constructo requiere del establecimiento de tres etapas: 1. Establecimiento de la relacin terica entre los conceptos, por ejemplo, el rendimiento en lectura se relaciona con el nivel de conciencia fonolgica, a partir del marco terico seleccionado.

2. Constatacin de la correlacin entre ambos conceptos. 3. Interpretacin de la evidencia emprica (alcance y significacin de las correlaciones encontradas). .

Usualmente se realizan 1. Estudios factoriales, que permiten establecer en qu medida el test mide una capacidad comn en un grupo de pruebas similares. 2. Tcnica de diferenciacin por edades, utilizada frecuentemente para validar tests infantiles de inteligencia. Parte del supuesto que es propio de la inteligencia que progrese con la edad. En tal caso se examinan las puntuaciones del test para ver si incrementan a medida que se avanza hacia edades cronolgicas mayores

RESUMEN Validez de criterio = cmo se relacionan los resultados del test con el desempeo de los sujetos en un rea independiente del test. Validez de contenido = cmo se muestrean (estn contenidos) en el test los contenidos que se desean examinar. Validez de constructo = cmo mide el test aquello que intenta medir, es decir el constructo psicolgico que subyace al mismo.

A partir del ao 1985 ya no se habla de tipos de validez sino de categoras de validez.

1.

Una validacin ideal incluye varios tipos de evidencia implicados en los tres tipos tradicionales. Se considera a la validez no ya como un concepto inherente al test sino que lo que se valida corresponde a las inferencias realizadas a partir del mismo.

2.

Dos importantes consecuencias:

1.

El responsable de establecer la validez de un test no es slo el constructor, sino tambin el usuario. La validez no se establece de una vez y para siempre, se trata de un proceso continuo, que finalizara en el momento en el que se encontrara evidencia en contrario, a la manera de la contrastacin popperiana.

2.

El propsito fundamental de los estudios de fiabilidad o confiabilidad es estimar la magnitud de los errores cometidos al medir las variables psicolgicas, dado que en la prctica es casi imposible que una medicin sea perfecta.

Existen diferentes procedimientos para calcular la confiabilidad de una prueba. 1. Formas paralelas. 2. Test-retest. 3. Divisin en dos mitades. 4. Homogeneidad y equivalencia 5. Confiabilidad del puntuador.

Formas paralelas
Coeficiente de estabilidad y equivalencia

Puntuaciones de una de las formas del test

Puntuaciones de la forma equivalente del test

Test retest
Coeficiente de estabilidad

SE CORRELACIONAN DOS SERIES DE PUNTUACIONES, CADA UNA DE LAS CUALES CORRESPONDE A UN PROCEDIDMIENTO DIFERENTE

Puntuaciones de la Puntuaciones de la primera segunda administracin del test administracin del test

Dos mitades (divisin de tems pares e impares)

Coeficiente de consistencia interna

Puntuaciones de la mitad A

Puntuaciones de la mitad B

Homogeneidad y equivalencia
Coeficiente de consistencia interna Confiabilidad del puntuador

Constituye el promedio de todos los coeficientes de divisin en dos mitades que resulte de las diferentes divisiones de un test. Puntuaciones otorgadas por un examinador Puntuaciones proporcionadas por otro puntuador

FORMAS PARALELAS Coeficiente de estabilidad y equivalencia Puntuaciones de una de las Puntuaciones de la forma formas del test equivalente del test

Coeficiente de correlacin

TEST RETEST Coeficiente de estabilidad Puntuaciones de la Puntuaciones de la primera administracin segunda del test administracin del test

Coeficiente de correlacin

DIVISIN EN DOS MITADES (tems pares e impares) Coeficiente de consistencia interna Puntuaciones de la mitad A Puntuaciones de la mitad B

Coeficiente de correlacin

HOMOGENEIDAD Y EQUIVALENCIA Coeficiente de consistencia interna Coeficientes de correlacin entre todas las puntuaciones de cada una de las divisiones posibles en dos mitades de un test.
Promedio de todos los Coeficiente de correlacin

Confiabilidad del puntuador

Puntuaciones proporcionadas por un examinador Puntuaciones proporcionadas por otro/s examinador/es

Coeficiente de correlacin
Su importancia reside no solo en la evaluacin de la idoneidad del puntuador, sino como evidencia de la exactitud de los procedimientos de evaluacin indicados en el Manual del test, cuando se tiene la seguridad de estar en presencia de puntuadores expertos.