Documenti di Didattica
Documenti di Professioni
Documenti di Cultura
Artculo en PDF
Cmo citar el artculo
Nmero completo
Ms informacin del artculo Sistema de Informacin Cientfica
Pgina de la revista en redalyc.org Red de Revistas Cientficas de Amrica Latina y el Caribe, Espaa y Portugal
En el ejercicio de su profesin los psiclogos utilizan con frecuencia los tests para la obtencin de datos. Para que los datos as obte-
nidos sean de calidad y puedan ayudar al psiclogo a tomar las decisiones adecuadas, los tests utilizados han de reunir las propie-
dades tcnicas oportunas. Un medio eficaz para mejorar los tests y su prctica es ofrecer a los usuarios toda la informacin posible
acerca de su calidad y caractersticas. El Colegio Oficial de Psiclogos tiene la intencin de promover un proceso de evaluacin de
los tests ms utilizados en Espaa para proporcionar as una informacin tcnica precisa a los usuarios de las pruebas. En este art-
culo se describen las caractersticas del procedimiento de evaluacin y se presenta un modelo de cuestionario para llevar a cabo la
evaluacin.
A model to evaluate the quality of tests used in Spain. Professional psychologists very frequently use tests to gather information about
human behavior. In order to obtain good quality data which could help psychologists to make the right decisions, tests used to collect
data have to be psychometrically sound. An efficient way to improve tests and testing is to offer the practitioners technical information
about test characteristics. The Spanish Psychological Association is promoting a process of reviewing those tests more frequently used
in Spain, aiming to provide test users with the best information available on tests. In this paper the test review process to be implemen-
ted is described, and a model of questionnaire to evaluate tests presented.
L
os tests psicolgicos constituyen una de las herra- Asociaciones de Psiclogos Profesionales (EFPPA), o la
mientas ms importantes al servicio de la prctica Comisin Internacional de Tests (ITC).
profesional y de la investigacin de los psiclogos. En general, podran seguirse tres vas para mejorar el
Como ocurre con cualquier otra tecnologa cientfica, uso de los tests: (i) restringir el acceso de los usuarios,
los tests pueden ser usados de forma correcta o inco- permitiendo su empleo solamente a profesionales debi-
rrecta. Una exposicin de las actitudes de los psiclo- damente capacitados y acreditados, (ii) incrementar la
gos espaoles hacia los tests, los problemas ms formacin de los usuarios y (iii) fomentar la investigacin
habituales de uso, as como las pruebas ms utilizadas, para desarrollar pruebas eficientes (construccin de nue-
puede consultarse en el reciente trabajo de Muiz y vas pruebas, adaptacin adecuada de las desarrolladas
Fernndez-Hermida (2000), publicado en esta misma en otros pases y revisin peridica de la calidad tcnica
revista. En ese trabajo, los ms de tres mil psiclogos de las ya disponibles). Aunque lo ideal sera actuar en
encuestados ponan de manifiesto la necesidad de me- los tres frentes, en ocasiones la primera va no est exen-
jorar el uso que se hace de los tests en nuestro pas. Es- ta de dificultades, puesto que las asociaciones profesio-
te objetivo es compartido por buena parte de las nales no disponen de las armas legales para introducir
asociaciones profesionales de psiclogos, tanto nacio- fuertes restricciones al uso de los instrumentos. Por ello,
nales como internacionales. El Colegio Oficial de Psic- parece ms viable mejorar la prctica profesional a tra-
logos (COP) no ha sido ajeno a esta corriente, y en vs de la formacin de los usuarios, puesto que las defi-
ao 1995 se puso en marcha una Comisin de Tests in- ciencias en los conocimientos tcnicos requeridos son
tegrada por psiclogos procedentes del mbito acad- consideradas como la principal causa de las prcticas
mico, de las editoras de tests y del propio COP (vase inadecuadas (Anastasi, 1987; Kaufman, 1982; Muiz et
http://www.cop.es/tests/). La Comisin de Tests fue al., 1999; Muiz y Fernndez-Hermida, 2000). Ade-
creada para tratar de promocionar y potenciar el uso ms, la mejora de la formacin favorece la tercera de
adecuado de los tests en nuestro pas. Para llevar a ca- las vas antes mencionadas.
bo esta tarea, la Comisin funciona de forma coordi- En algunos pases de nuestro entorno se ha seguido el
nada con otros grupos de trabajo internacionales con principio de que facilitar informacin a los usuarios
fines similares, tales como la Federacin Europea de acerca de la calidad tcnica de los tests disponibles es
uno de los principales recursos formativos. As lo han
Correspondencia: Gerardo Prieto. Facultad de Psicologa. Uni-
versidad de Salamanca. Avda. de la Merced, 109-131. 37005 Sa- entendido, por ejemplo, las asociaciones profesionales
lamanca. Espaa. E-mail: gprieto@gugu.usal.es de psiclogos de Holanda y del Reino Unido. Ambas
65
http://www.redalyc.org/html/778/77807709/ 1/7
8/7/2017 Un modelo para evaluar la calidad de los tests utilizados en Espaa
Seccin Abierta UN MODELO PARA EVALUAR LA CALIDAD DE LOS TESTS UTILIZADOS EN ESPAA
66
los baremos, etc. Para lograr este objetivo, se han in- portantes contribuciones al desarrollo del cuestionario.
cluido 32 tems cerrados y 6 abiertos. En la mayor parte Nuestro agradecimiento ms sincero a: Mara Teresa
de los tems cerrados se propone un sistema de cinco ca- Anguera, Roco Fernndez Ballesteros, Manuel Mart-
tegoras ordenadas en funcin de la calidad de la carac- nez, Rosario Martnez Arias, Eduardo Montes, Carlos
terstica evaluada. Este sistema de cinco estrellas es Rodrguez Sutil, Nicols Seisdedos y Manuel Garca
similar al empleado por el Colegio de Psiclogos del Rei- Prez.
no Unido (Bartram et al., 1997). Muchas gracias tambin a las personas que se citan a
En los tems abiertos se solicita una justificacin razo- continuacin por sus enriquecedores comentarios acerca
nada de las respuestas a los tems cerrados y una eva- del cuestionario, que sin duda han contribuido a mejo-
luacin de cada caracterstica. rarlo: Alejandro vila Espada, Antoni Andrs Pueyo, Pi-
En ltimo apartado, se solicita una valoracin global del lar Snchez Lpez, Roberto Colom Maran, Gloria
test y un resumen de los dos primeros apartados, al ob- Seoane, Miguel Angel Verdugo, Mara Jos Navas, Jos
http://www.redalyc.org/html/778/77807709/ 2/7
8/7/2017 Un modelo para evaluar la calidad de los tests utilizados en Espaa
test y un resumen de los dos primeros apartados, al ob- Seoane, Miguel Angel Verdugo, Mara Jos Navas, Jos
jeto de resumir toda la informacin en una ficha tcnica. Antonio Lpez Pina, Pere Joan Ferrando, Salvador Alga-
A continuacin, tras unas breves conclusiones, se pre- rabel, Isabel Barbero, Alfredo Fierro, Concha Fernn-
senta el cuestionario completo. dez, Jordi Renom, Vicente Gonzlez Rom, Julio Olea,
Pedro Hontangas, Vicente Ponsoda y Antonio Pamos.
CONCLUSIONES Gracias a todos por su colaboracin y ayuda, las defi-
La mayora de los expertos, as como las organizaciones ciencias que an se observen en el trabajo slo son im-
profesionales nacionales e internacionales coinciden en putables a los autores.
sealar que una de las medidas ms eficaces para mejo-
rar la utilizacin que se hace de los tests es la de propor- REFERENCIAS
cionar una buena informacin y formacin a los Anastasi, A. (1987). What test users should know about
usuarios. Un profesional con una buena informacin so- the interpretation os test scores . Keynote address at
bre las pruebas y una formacin adecuada difcilmente Joint Committee on Testing Practices Second Test Pu-
utilizar de forma incorrecta los tests. Enmarcado en esa blishers Conference, Rockville, Maryland. (Citado de
filosofa, en 1995 el Colegio Oficial de Psiclogos (COP) Fremer, 1996).
cre una Comisin de Tests con el fin de analizar los Bartram, D., Lindley, P.A.y Foster, J.M. (1992a) . A Re-
problemas implicados en el uso de los tests. En el pre- view of Psychometric Tests for Assessment in Vocatio-
sente trabajo se describe el proceso diseado por la Co- nal Training . Leicester: BPS Books.
misin de Tests del COP para llevar a cabo la revisin Bartram, D., Lindley, P.A.y Marshall, L. (1992b) . Update
de los tests editados en Espaa. Tambin se presenta el to the Review of Psychometric Tests for Assessment in
cuestionario elaborado a tal efecto. En lneas generales, Vocational Training . Leicester: BPS Books.
el procedimiento de evaluacin propuesto consiste en re- Bartram, D., Anderson, N., Kellett, D., Lindley, P.A.& Ro-
visar los tests de forma sistemtica por parte de expertos, bertson, I. (Eds.). (1995). Review of Personality As-
utilizando el cuestionario de recogida de datos diseado sessment Instruments (Level B) for use in ocuppational
a tal efecto, inspirado en los modelos holands e ingls settings. Leicester: BPS Books.
actualmente en funcionamiento. Cabe esperar que la pu- Bartram, D., Burke, E., Kandola, R., Lindley, P., Mars-
blicacin de los resultados de las revisiones de los tests hall, L. & Rasch, P. (Eds.). (1997). Review of Tests of
ayude a los profesionales a elegir y evaluar las pruebas Ability and Aptitude (Level A) for use in ocuppational
que tienen a su disposicin en el mercado, al menos se settings. Leicester: BPS Books.
ha sido el objetivo que ha guiado a la comisin de tests Evers, A. (1996). Regulations concerning test qualifica-
del COP parra llevar a cabo esta iniciativa. Sealar, fi- tions and test use in The Netherlands. European Jour-
nalmente, que cualquier sugerencia que pueda mejorar nal of Psychological Assessment, 12, 153-159.
el proceso de evaluacin expuesto ser bien recibida Kauffman, A.S. (1982). Psicometra razonada con el
por los autores, que la elevarn a la comisin de tests WISC-R. Mxico: El Manual Moderno.
del COP. Muiz, J., Prieto, G., Almeida, L. y Bartram, D. (1999).
Test use in Spain, Portugal and Latin American coun-
AGRADECIMIENTOS tries. European Journal of Psychological Assessment,
Los autores desean expresar su agradecimiento al Co- 15 , 151-157.
legio Oficial de Psiclogos (COP) por su inestimable Muiz, J. y Fernndez-Hermida, J.R. (2000). La utiliza-
apoyo en la realizacin de este trabajo, as como a los cin de los tests en Espaa. Papeles del Psiclogo, 76,
miembros de la Comisin de Tests del COP por sus im- 41-49.
67
Seccin Abierta UN MODELO PARA EVALUAR LA CALIDAD DE LOS TESTS UTILIZADOS EN ESPAA
( ) Servicios sociales
CUESTIONARIO PARA LA ( ) Psicologa del Trfico
( ) Otros (Indique cul:. ........................................... )
EVALUACIN DE LOS TESTS (CET)
1.13. Formato de los tems 4:
( ) Respuesta libre
1. Descripcin general del test 1 ( ) Respuesta dicotmica (si/no, verdadero/falso, etc)
1.1. Nombre del test: ( ) Eleccin mltiple
( ) Tipo Likert
1.2. Nombre del test en su versin original (si la versin espaola es una ( ) Adjetivos bipolares
adaptacin): ( ) Otro (Indique cul:. ........................................... )
1.14. Nmero de tems 5:
1.3. Autor/es del test original:
1.15. Soporte 6:
1.4. Autor/es de la adaptacin espaola: ( ) Administracin oral
( ) Papel y lpiz
1.5. Editor del test en su versin original: ( ) Manipulativo
( ) Informatizado
1.6.Editor de la adaptacin espaola: ( ) Otro (Indique cul:. ........................................... )
1.7. Fecha de publicacin del test original: 1.16. Cualificacin requerida para el uso del test de acuerdo con la do-
cumentacin aportada:
1.8. Fecha de publicacin del test en su adaptacin espaola: ( ) Ninguna
( ) Entrenamiento y Acreditacin especifica*
1.9. Fecha de la ltima revisin del test en su adaptacin espaola: ( ) Nivel A 7
( ) Nivel B
1.10. Clasifique el rea general de la o las variables que pretende medir ( ) Nivel C
el test2 ( ) Otra (Indique cul:. ........................................... )
( ) Inteligencia *Indique el nombre de la institucin que lleva a cabo la acreditacin:
( ) Aptitudes
( ) Habilidades y Rendimiento acadmico 1.17. Descripcin de las poblaciones a las que el test es aplicable (espe-
( ) Psicomotricidad cifique el rango de edad, nivel educativo, etc., y si el test es apli-
( ) Alteraciones neuropsicolgicas cable en ciertas poblaciones especificas: minoras tnicas,
http://www.redalyc.org/html/778/77807709/ 3/7
8/7/2017 Un modelo para evaluar la calidad de los tests utilizados en Espaa
( ) Alteraciones neuropsicolgicas cable en ciertas poblaciones especificas: minoras tnicas,
( ) Personalidad discapacitados, grupos clnicos, etc.):
( ) Motivacin
( ) Actitudes 1.18. Indique si existen diferentes formas del test y sus caractersticas
( ) Intereses (formas paralelas, versiones abreviadas, versiones informatizadas
( ) Valores o impresas, etc). En el caso de que existan versiones informatiza-
( ) Otros (Indique cul:. ...........................................) das, describa los requisitos mnimos del hardware y software.
1.11. Breve descripcin de la variable o variables que pretende medir el
test: 1.19. Procedimiento de correccin:
( ) Manual mediante plantilla
1.12. rea de aplicacin 3 ( ) Lectora ptica
( ) Psicologa clnica ( ) Automatizada por ordenador
( ) Psicologa educativa ( ) Efectuado exclusivamente por la empresa suministradora
( ) Neuropsicologa ( ) Mediante expertos
( ) Psicologa forense ( ) Otro (Indique cul:............................................ ).
( ) Psicologa del trabajo y las organizaciones
( ) Psicologa del deporte 1.20. Puntuaciones: (Describa el procedimiento para obtener las puntua-
.............................
ciones directas).
1
Si el test est compuesto de subtests heterogneos en su formato y caractersticas,
1.21. Transformacin de las puntuaciones:
rellene un cuestionario para cada subtest.
( ) Caracterstica no aplicable para este instrumento
2
Puede marcar ms de una opcin.
3
Puede marcar ms de una opcin.
( ) Normalizada
4
Puede marcar ms de una opcin. ( ) No normalizada
5
Si el test tiene varias escalas, indique el nmero de tems de cada una.
6
Puede marcar ms de una opcin. 1.22. Escalas utilizadas:
7
Algunos pases han adoptado sistemas para la clasificacin de los tests en distintas ( ) Centiles
categoras, en funcin de la cualificacin requerida por los usuarios. Estos sistemas ( ) Puntuaciones tpicas
de clasificacin proporcionan a los editores de tests un medio para decidir a quin ( ) Cocientes de desviacin
pueden vender los tests. Un sistema muy utilizado es el que divide los tests en tres ( ) Eneatipos
categoras: Nivel A (tests de rendimiento y conocimientos), Nivel B (tests colecti- ( ) Decatipos
vos de aptitudes e inteligencia) y Nivel C (tests de aplicacin individual de inteli- ( )T
gencia, personalidad y otros instrumentos complejos). ( ) Otra (Indique cul:............................................ )
68
1.23. Posibilidad de obtener informes automatizados: 2.4. Adaptacin del test (si el test ha sido traducido y adaptado para su
( ) No aplicacin en Espaa):
( ) Si* ( ) Caracterstica no aplicable para este instrumento
*Breve descripcin: ( ) No se aporta informacin en la documentacin
*( ) Inadecuada
1.24. El editor ofrece un servicio para la correccin y/o elaboracin de ** ( ) Adecuada pero con algunas carencias
informes: *** ( ) Adecuada
( ) No **** ( ) Buena
( ) Si ***** ( ) Excelente (Descripcin precisa del procedimiento de
traduccin, de la adaptacin de los tems a la cultura
1.25. Tiempo estimado para la aplicacin del test (instrucciones, ejem- espaola, de los estudios de equivalencia con la ver-
plos y respuestas a los tems). sin original, utilizacin de la normativa de la Inter-
En aplicacin individual:........................... national Test Commission, etc.).
En aplicacin colectiva:............................
2.5. Calidad de las instrucciones:
1.26. Documentacin aportada por el editor: *( ) Inadecuada
( ) Manual ** ( ) Adecuada pero con algunas carencias
( ) Libros o artculos complementarios *** ( ) Adecuada
( ) Disketes/CD **** ( ) Buena
( ) Otra (Indique cul:. ........................................... ) ***** ( ) Excelente (Claras y precisas. Muy adecuadas para las
poblaciones a las que va dirigido el test).
1.27. Precio de un juego completo de la prueba (documentacin, test,
plantillas de correccin; en el caso de tests informatizados no se 2.6. Facilidad para comprender la tarea:
incluye el costo del hardware): *( ) Inadecuada
** ( ) Adecuada pero con algunas carencias
1.28. Precio y nmero de ejemplares del paquete de cuadernillos (tests *** ( ) Suficiente
de papel y lpiz): **** ( ) Buena
***** ( ) Excelente (Los sujetos de las poblaciones a las que va
1.29. Precio y nmero de ejemplares del paquete de hojas de respuesta dirigido el test pueden comprender fcilmente la tarea
(tests de papel y lpiz): a realizar).
1.30. Precio de la correccin y/o elaboracin de informes por parte del 2.7. Facilidad para registrar las respuestas :
editor: *( ) Inadecuada
** ( ) Adecuada pero con algunas carencias
1.31. Bibliografa bsica acerca del test aportada en la documentacin: *** ( ) Adecuada
**** ( ) Buena
2. Valoracin de las caractersticas del test ***** ( ) Excelente (El procedimiento para emitir o registrar
2.1. Calidad de los materiales del test (objetos, material impreso o soft- las respuestas es muy simple por lo que se evitan los
ware): errores en la anotacin).
*( ) Inadecuada
** ( ) Adecuada pero con algunas carencias 2.8. Calidad de los tems (aspectos formales):
*** ( ) Adecuada *( ) Inadecuada
**** ( ) Buena ** ( ) Adecuada pero con algunas carencias
***** ( ) Excelente (Impresin y presentacin de gran calidad, *** ( ) Adecuada
software muy atractivo y eficiente, etc.) **** ( ) Buena
****** ( ) Excelente (La redaccin y el diseo son muy apropia-
2.2. Calidad de la documentacin aportada: dos)
*( ) Inadecuada
** ( ) Adecuada pero con algunas carencias 2.9. Anlisis de los tems
69
Seccin Abierta UN MODELO PARA EVALUAR LA CALIDAD DE LOS TESTS UTILIZADOS EN ESPAA
70
http://www.redalyc.org/html/778/77807709/ 5/7
8/7/2017 Un modelo para evaluar la calidad de los tests utilizados en Espaa
*** ( ) Un estudio con una muestra grande (N>500) ( ) No se aporta informacin en la documentacin
**** ( ) Varios estudios con muestras de tamao moderado *( ) Pequeo (N<150)
***** ( ) Varios estudios con muestras grandes ** ( ) Suficiente (150<N<300)
*** ( ) Moderado (300<N<600)
2.11.2.2. Mediana de los coeficientes de equivalencia: **** ( ) Grande (600<N<1000)
( ) No se aporta informacin en la documentacin ***** ( ) Muy grande (N>1000)
*( ) Inadecuada (r<0.50)
** ( ) Adecuada pero con algunas carencias (0.50< r<0.60)
2.12.3. Procedimiento de seleccin de las muestras*:
*** ( ) Adecuada (0.60<r<0.70)
( ) No se aporta informacin en la documentacin
**** ( ) Buena (0.70<r<0.80)
( ) Incidental
***** ( ) Excelente (r>0.80)
( ) Aleatorio
2.11.3. Consistencia interna
*Describa brevemente el procedimiento de seleccin.
2.11.3.1. Tamao de las muestras en los estudios de consistencia:
( ) No se aporta informacin en la documentacin
*( ) Un estudio con una muestra pequea (N<200) 2.12.4. Comentarios sobre las normas
** ( ) Un estudio con una muestra moderada (200<N<500)
*** ( ) Un estudio con una muestra grande (N> 500) 3. Valoracin global del test
**** ( ) Varios estudios con muestras de tamao moderado 3.1. Con una extensin mxima de 1000 palabras, exprese su valoracin
***** ( ) Varios estudios con muestras grandes del test resaltando sus aspectos positivos y negativos, as como recomen-
daciones acerca de su uso en diversas reas profesionales. Indique asimis-
2.11.3.2. Mediana de los coeficientes de consistencia: mo cules son las caractersticas de la prueba que podran ser mejoradas,
( ) No se aporta informacin en la documentacin carencias de informacin en la documentacin, etc. 3.2. A modo de resu-
*( ) Inadecuada (r<0.60) men, rellene las Tablas 1 y 2. La Tabla 1 incluye algunos datos descripti-
** ( ) Adecuada pero con algunas carencias (0.60< r<0.70) vos del test. En la Tabla 2 se resume la valoracin de las caractersticas
*** ( ) Adecuada (0.70<r<0.80) generales del test. Tome en consideracin el promedio de las calificacio-
**** ( ) Buena (0.80<r<0.85)
nes emitidas en los apartados que figuran en la segunda columna de la Ta-
***** ( ) Excelente (r>0.85)
bla 2.
71
1
palmente en su vertiente aplicada y profesional.
Son de especial inters para Papeles del Psiclogo
b) Para captulos de libros colectivos: Autor (es);
ao; ttulo del trabajo que se cita y, a continuacin,
tor de Papeles del Psiclogo. Colegio Oficial de
Psiclogos. C/ Claudio Coello 46 2 Dcha. 28001
artculos que aborden temas referidos al desarrollo introducido por En las iniciales del nombre y ape- Madrid. Espaa, secop@correo.cop.es.
FE DE ERRATAS
Papeles del Psiclogo N 76: En el artculo La utilizacin de los tests en Espaa de Jos Muiz y Jos Ramn Fernndez Hermida
publicado en el nmero anterior de Papeles del Psiclogo se desliz una errata en la Tabla 6 que pasamos a rectificar:
Tabla 6
Tests ms utilizados en Espaa
Test Frecuencia %
16PF 16PF-5 900 26,53
WISC WISC-R WPPSI 791 23,32
WAIS 605 17,84
MMPI MMPI-II 511 15,06
Inventario de Depresin de Beck (BDI) 310 9,14
STAI 267 7,87
RORSCHACH 219 6,46
TEST DE RAVEN 170 5,01
TEST DE BENDER 146 4,30
ISRA 129 3,80
72
http://www.redalyc.org/html/778/77807709/ 7/7