Documenti di Didattica
Documenti di Professioni
Documenti di Cultura
2014
Bogotá D.C.
Tabla de Contenidos
Introducción ............................................................................................................ 4
Procedimiento ......................................................................................................... 6
Referencias ........................................................................................................... 39
4
Introducción
Referente Teórico
Procedimiento
A continuación se describen los pasos que se deben seguir para obtener la hoja
de cálculo y los datos necesarios para análisis posterior. Le recomendamos que las siga
en estricto orden y compare los resultados obtenidos con cada una de las imágenes de
apoyo que acompañan el proceso.
En este taller vamos a trabajar un libro de Excel para 20 preguntas y que fue
respondido por 50 estudiantes. Para su caso, ajústelo a las condiciones en las cuales
diseñó, elaboró y aplicó su prueba.
Primer Paso. Abrir un libro de Excel en blanco. Recuerde que ese archivo tiene
tres hojas marcadas abajo como “Hoja 1”, “Hoja 2” y “Hoja 3”. Esto para que lo tenga
presente en trabajo posterior porque vamos a utilizar todo el libro. La Figura 3 muestra
la hoja de Excel en blanco.
7
Cuarto Paso. Ahora vamos a trabajar en la Hoja 2 del archivo en Excel. Para
ello con el puntero del mouse seleccionamos en el extremo inferior izquierdo del libro la
Hoja 2. Al hacerlo, se encuentra una hoja en blanco semejante a la Hoja 1 cuando se
abrió el libro, sólo que en la parte inferior esta resaltada la Hoja 2, como lo muestra la
Figura 6.
Sexto Paso. Ahora nos ubicamos en la celda B4, es decir, una fila de por medio
de la zona de las respuestas y una columna del borde izquierdo de la Hoja 2, ahora
procedemos a “programar” la celda para que haga la conversión de la primera respuesta
seleccionada por el primer estudiante y compararla con la celda correspondiente a la
primera pregunta de la zona de las respuestas. Lo que se hace acá es ubicarnos en la
barra de funciones, ubicar todas y seleccionar la Función SI. Esta nos permite hacer una
comparación de Falso–Verdadero entre dos valores alfanuméricos; acá vamos a
comparar la respuesta del estudiante con la verdadera, si ambas son iguales se dice que
es verdadero y se asigna un valor de uno (1) –un punto– y si no son iguales, entonces es
falso y se asigna un valor de cero (0) –no tiene punto– Esto nos permite pasar las letras
a números para poder hacer los cálculos posteriores. La Figura 8 muestra este proceso.
Todavía no terminamos porque tenemos que escribir los números que nos va a
devolver la hoja de cálculo al hacer la comparación. Pasamos a la segunda celda
llamada Valor_si_verdadero y escribimos el uno (1) porque si son iguales el estudiante
ha “atinado” a la respuesta verdadera. Luego bajamos a la última celda llamada
Valor_si_falso y escribimos el cero (0). La Figura 12 presenta ya la ventana
diligenciada y sólo queda aceptar. Al hacerlo la celda B4 de la Hoja 2 tiene un valor de
uno (1) porque tenemos un blanco en la Hoja 1 y un blanco en la Hoja 2, al ser
verdaderos reporta ese valor, siendo la prueba de que nuestro proceso está correcto.
Séptimo Paso. Ahora lo que tenemos que hacer es la activación de las otras
celdas, para ello recurrimos a la propiedad que tiene el Excel de poder copiar el valor de
una celda a las demás.
En este caso lo que hacemos es ubicarnos en la celda B4. Sin embargo debemos
primero “fijar” el valor de la celda B2 porque si no lo hacemos, al aplicar esa
característica de copiado del Excel lo que hace es hacerlo flotante, es decir que “cree”
que también debe mover esa celda y termina comparando otros valores escritos en las
otras celdas de la Hoja 2. Para evitarnos ese “dolor de cabeza” lo que hacemos es irnos a
la barra de funciones de la hoja, y ubicarnos en la escritura de la Función SI indicada
arriba, =SI(Hoja1!=Hoja2!B2;1;0), con el cursor seleccionamos antes de la letra B y se
escribe el signo pesos ($), luego nos vamos delante de la letra B y volvemos y
escribimos el signo pesos ($) en esta forma esta celda queda inmovilizada y no
tendremos errores en la comparación. La escritura de la Función SI quedará finalmente
=SI(Hoja1!=Hoja2$B$2;1;0), como lo muestra la Figura 13.
séptimo pero cambiando las celdas de respuesta. La Figura 15 muestra cómo debe
quedar la Hoja 2 luego de “llenar” las celdas P2 a P20.
Ejercicio de Aplicación
Ahora, vamos a hacer una utilización de nuestra plantilla, para ello se adjuntan
dos archivos en txt (bloc de notas) el primero tiene las respuestas de 50 estudiantes (se
llama RESPUESTAS) y el segundo las respuestas (se llama CLAVES) para que las
digite en su plantilla y luego compare los resultados que se encuentran más adelante en
la Tabla 1.
Primer paso. Abra su plantilla de calificaciones y verifique que está en la Hoja
1, es decir, debe estar completamente en blanco salvo las identificaciones de código y
de cada una de las respuestas. Debe tener el aspecto indicado en la Figura 5. Abra el
archivo RESPUESTAS.txt y proceda a copiar en cada celda las letras de la respuesta del
estudiante con código 1 hasta llenar la fila con sus veinte respuestas. Continúe con las
otras respuestas hasta llenar la Hoja 1 como lo muestra la Figura 16.
15
Esta es la Tabla que se le sugiere que complete con base en los resultados
encontrados.
18
Tabla 2
Balance de los Resultados de la Prueba Aplicada
Nº Criterio Cantidad
1 Exámenes Aprobados.
2 Exámenes No Aprobados.
3 Exámenes en el Criterio Mínimo de Aprobación.
La Medición Educativa
cualquier persona tiene la más alta probabilidad de responder un ítem fácil que uno
difícil. La habilidad de una persona se debe estimar independiente de los demás
parámetros del test. El puntaje es una suma simple de respuestas correctas.
La evaluación implica la comparación inter e intraindividual conforme a los
resultados del test para hacer inferencias. Esto determinó la necesidad de referirse a una
norma o a un criterio para hacerlo y de determinar índices que ayudaran a esa tarea.
Como todo examen busca efectuar una clasificación de los sujetos que lo han
respondido, es necesario establecer cuál es el comportamiento que tuvo el instrumento
en la población de estudiantes que lo resolvieron. Por esta razón Charles Edward
Spearman, un psicólogo inglés a comienzos del siglo XX hizo una propuesta sobre el
problema del error que acompaña a cualquier medición, hasta que en el año de 1950
Harold Gulliksen la consolidó cuando publicó su texto Theory of mental tests (Teoría de
los Test Mentales). A continuación se hará una breve presentación de sus fundamentos
para poder comprender el tratamiento matemático que se harán a las respuestas de los
estudiantes que se hizo en el primer taller Apéndice A).
Se basa en la posibilidad de construir formas paralelas de la prueba para medir el
mismo objeto o fenómeno psicológico; los ítems son diferentes pero su dificultad y
capacidad de discriminación son iguales ya que son elaborados con ese propósito.
Deben tener los mismos promedios, varianzas y covarianzas; si no, son pruebas
diferentes y no comparables. El desempeño de quien responde es universal y por ello
conlleva un grado de error dependiendo de las formas que tiene, las condiciones del
evaluado, las condiciones de aplicación y otros factores desconocidos. Si se aplicara
varias veces la misma prueba, los puntajes son diferentes y se podría determinar el error
asociado ya que correspondería a la diferencia entre el puntaje observado y el
verdadero. Acá se tiene una varianza de error para cada examinado cuya raíz cuadrada
es el error estándar de medición o la variabilidad de la distribución que tiene los
puntajes. Los supuestos básicos son: (a) el puntaje individual contiene al puntaje
verdadero y un margen de error, (b) el valor esperado del margen de error es cero, (c) la
correlación entre el puntaje individual y el verdadero es cero, (d) el promedio del
puntaje individual corresponde al del puntaje verdadero, (e) la varianza del puntaje
individual es igual a la del puntaje verdadero más la del error, (f) la regresión del valor
del error en el puntaje verdadero siempre vale cero. Se cumple para la misma población.
21
Se consideran como debilidades: (a) las estadísticas de los ítem y del test
dependen de la muestra, (b) la comparación de examinados es posible al aplicar el
mismo test o uno paralelo, (c) la confiabilidad del test depende de las formas paralelas
del test, (d) asigna la misma varianza para el error para todos los puntajes y (e) no
soluciona el problema del diseño de la prueba, la identificación de ítems diferenciales y
la comparabilidad de los puntajes.
La teoría clásica del test tiene tres parámetros: (a) Dificultad del ítem, es el
grado en que la población lo responde correctamente; varía de 0 a 1 y permite inferir al
desempeño del grupo de personas que lo aplicaron. (b) Discriminación del ítem,
corresponde a la proporción de personas que resolvieron incorrectamente el ítem
determinando una varianza y, (c) validez del ítem, una correlación entre la respuesta
dada y el puntaje obtenido en la prueba, excluyendo el puntaje que aporta al total; se
calcula mediante el coeficiente de correlación de Pearson. Para el test, se tiene el índice
de confiabilidad, la relación entre las varianzas del puntaje individual y la verdadera. Se
determina calculando el alfa de Cronbach que la hace sobre el mismo test dividiendo la
población en mitades simulando el test–retest el caso más puro de las pruebas paralelas.
Para calcular los Índices de Calidad de la Prueba, se debe recurrir a las fórmulas
ya explicadas anteriormente. Para los Índices de Calidad de cada Ítem recurrimos a una
hoja de cálculo programada en Excel de la siguiente manera:
Primer Paso. Se debe abrir un nuevo libro en Excel, esta vez le recomendamos
salvarlo. Un nombre sugerido para este es “Plantilla-TCT”. Como lo puede observar en
la Figura 1, el libro está abierto en la Hoja 1.
24
Tercer Paso. Ahora nos vamos a la celda B53 para comenzar a “programarla”
de modo que cuando le incluyamos los datos numéricos (ceros y unos) que logramos de
la plantilla de calificación a la que le hemos cambiado el nombre para mantenerla para
trabajos posteriores. Esa es la finalidad de una “plantilla”. Como se presenta que
algunos estudiantes dejan de responder alguna de las preguntas, la plantilla debe tener
una función de verificación de la cantidad de espacios “en blanco” provenientes de
respuestas no completadas. Nos colocamos en la celda V1 y escribimos la palabra
“FALTANTES”. Bajamos a la celda V2 y buscamos en la barra de funciones la función
CONTAR:BLANCO, como se muestra en la Figura 3.
Al dar clic en “Aceptar” aparece una ventana que se debe completar así: en la
celda de Rango, ubicamos en cursor en la celda B3 mantenemos pulsada la tecla
MAYÚSCULAS (↑) hasta la celda U3 como se muestra en la Figura 4:
26
Es posible que indique al lado izquierdo de la celda que existe un error, por
favor omítalo o no lo tenga en cuenta. En este ejercicio se omitió de cada celda
individualmente.
28
Cuarto Paso. Ahora se procede a activar el cálculo del puntaje que obtuvo el
estudiante en el examen. Para ello nos vamos a la celda W1 y escribimos la palabra
“PUNTAJES”. Luego procedemos a activar la función SUMA dándole el rango de B2
hasta U2 y nos debe aparecer el número que muestra la Figura 7. Si usa el cursor, debe
sumar desde P1 hasta P20 sin incluir la celda de “FALTANTES”.
Figura 7. Aspecto de la celda de suma del puntaje luego de aplicar la Función SUMA.
Quinto Paso. Ahora se va a calcular el Grado de Dificultad (GD) que tiene cada
ítem. Para ello vamos a la celda A53 y escribimos la sigla G.D. Luego pasamos a la
celda B53 para escribir una función del cálculo (SUMA) y un factor. Primero incluimos
la función SUMA como se hizo con el PUNTAJE. La Figura 9 muestra esta parte.
Figura 10. Expresión de la fórmula de cálculo del grado de dificultad del ítem.
30
Ahora, copiamos esta fórmula para los ítems P2 hasta P20 con eso se tendrán los
valores de G.D., para cada uno de las preguntas. La Figura 11 muestra el aspecto de la
plantilla con esta función.
Figura 12. Incorporando la función PEARSON para calcular índice de dificultad del
ítem.
31
Se da clic en aceptar. Como tenemos que copiar la fórmula a las celdas contiguas
es necesario “fijar” los valores de la Matriz 2 para ello vamos a la barra de función,
ubicamos la fórmula y colocamos el cursor antes de la letra W y se escribe el símbolo $,
pasamos al frente de la letra y volvemos a escribir el mismo signo. Posteriormente
vamos a la siguiente letra W y repetimos el proceso, en esta forma hemos
“inmovilizado” el rango de comparación que corresponde a la columna de PUNTAJES.
La Figura 14 presenta el resultado con la fórmula:
Al dar clic en aceptar aparece otra ventana para definir el rango de cálculo.
Como estamos con la pregunta 1 vamos a la celda B2 la seleccionamos con el mouse,
mantenemos presionado el botón izquierdo y bajamos hasta la celda B51, damos clic en
aceptar y queda lista para hacer el cálculo como se muestra en la Figura 17:
Como en el caso anterior, la celda marca un error, éste lo debemos omitir por las
mismas razones de la función de Pearson, hay divisiones por cero que “molestan” al
programa. Ahora la copiamos a las demás celdas de la fila como lo hemos venido
haciendo (desde P2 hasta P20). Sin embargo necesitamos la varianza del puntaje,
entonces podemos copiar la fórmula de varianza o generarla para esa columna. Cosa
curiosa, el resultado que señala es cero. Es decir el problema del error se elimina al
tener las celdas datos, como las del puntaje están sumando ceros o vacíos, da ese
resultado.
Finalmente se va a generar la fórmula de cálculo del alfa de Cronbach. Para ello
vamos a la celda A58 y escribimos la palabra “ALFA”, pasamos a la celda B58 para
comenzar a escribir la fórmula. Para ello ubicados en la celda escribimos: “=(20/19)”
esta primera parte corresponde al número de ítems de la prueba (20) dividido por los
grados de libertad del análisis; como estamos analizando preguntas, los grados de
libertad1 corresponde a 20 – 1 que da 19. Después de esta fracción se escribe: “*(1-(” y
haciendo uso de la función suma incorporamos el rango de la suma de las varianzas por
ítem seleccionado de B56 hasta U56, como se muestra en la Figura 18:
Al dar clic marca un error por no tener unos paréntesis cerrados, se da omitir el
error y regresamos nuevamente a la barra de funciones y escribimos “/” y con el mouse
seleccionamos la celda W56 que tiene la varianza de los PUNTAJES. Nuevamente en la
barra de funciones escribimos al final “)” que nos hace falta y damos “enter”. Así
1
Los grados de libertad siempre corresponde al número total de variables menos una: GL = (V – 1).
35
quedará lista la fórmula de cálculo del coeficiente alfa, la celda muestra un error por las
divisiones por cero que le “preocupan”. Como en los casos anteriores omitimos el error.
Guardamos nuevamente el archivo salvando los cambios.
Octavo Paso. Ahora se procede a construir la fórmula de cálculo para valorar el
error estándar de medida (Error de M). Nos ubicamos en la celda A60 y escribimos
“ERROR DE M”, luego pasamos a la celda B60 para escribir la fórmula de cálculo.
Vamos a la barra de funciones para buscar la función RAIZ, damos clic y ubicamos con
el cursor la celda W56 seleccionándola como muestra la Figura 19:
Al dar clic queda incorporada la primera parte de la fórmula, por eso vamos
nuevamente a la barra de funciones y lo colocamos al final de la expresión de la raíz
cuadrada para escribir “*” nuevamente damos clic en la barra de funciones para
seleccionar nuevamente la función RAIZ. La Figura 20 muestra este proceso.
Ejercicio de Aplicación
Si recuerda, usted hizo un ejercicio al finalizar el trabajo del Taller 1 donde hizo
una calificación. Se sugirió que llamara al libro “EJERCICIO1”. Si lo tiene ya ubicado
por favor ábralo y seleccione la “Hoja2” donde usted tiene valores de ceros y unos.
Seleccione únicamente estos valores; es decir, no seleccione la primera fila ni la primera
columna. Para ello ubíquese en la primera celda y con el botón izquierdo del mouse
seleccione toda esa fila hasta la pregunta 20 y comience a bajar hasta la fila 50. En la
Figura 21 encuentra una imagen del proceso realizado.
Hacemos esta “variación” del cortar y pegar porque recuerda que los datos del
ejercicio 1 fueron generados con fórmulas, al copiarlas se “van” conjuntamente con los
datos, si pegáramos simplemente no nos saldría sino errores complicándonos la vida,
por eso le decimos al Excel que sólo copie los valores y el obedientemente lo hace y nos
hace alegre la vida.
Una vez usted ha pegado los valores, la hoja 1 del libro de Excel hace los
cálculos en milisegundos. Ahora se debe proceder a la interpretación de los datos. Esta
es la tercera parte del Taller.
Tabla 1
Índice de Calidad para el examen o prueba
Indicador Valor
Índice de Confiabilidad (α de Cronbach).
Error Típico.
Índice de Discriminación de la Prueba.
Índice de Dificultad de la Prueba.
Tabla 2
Índice de Calidad del Ítem
Ítem
Índice de Dificultad Índice de Discriminación
Nº
1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
17
18
19
20
39
Referencias