Documenti di Didattica
Documenti di Professioni
Documenti di Cultura
DOCUMENTO DE TRABAJO)
ELABORACIN Y VALIDACIN
DE INSTRUMENTOS DE
EVALUACIN DE
COMPETENCIAS
PROFESIONALES
2012
1
Documento de trabajo DEC-CONEAU Prohibida su reproduccin
El presente documento es la sntesis de los aspectos importantes que
comprende el documento de trabajo titulado elaboracin y validacin de
instrumentos de evaluacin de competencias profesionales, elaborado por la
DEC-CONEAU en el 2012 con la finalidad de servir de soporte de aprendizaje a
los que se forman como evaluadores de competencias profesionales.
2
Documento de trabajo DEC-CONEAU Prohibida su reproduccin
SISTEMA NACIONAL DE EVALUACIN, ACREDITACIN Y CERTIFICACIN DE
LA CALIDAD EDUCATIVA - S.I.N.E.A.C.E
Consejo Superior:
Directorio:
Lima-Per
3
Documento de trabajo DEC-CONEAU Prohibida su reproduccin
INTRODUCCIN
4
Documento de trabajo DEC-CONEAU Prohibida su reproduccin
NDICE
5. VALIDEZ DE UN INSTRUMENTO.
5.2 Confiabilidad
5.2.1 Confiabilidad de un instrumento
5.2.2 Enfoques y mtodos en el clculo de la fiabilidad
ANEXOS
5
Documento de trabajo DEC-CONEAU Prohibida su reproduccin
3. METODOLOGA PARA LA ELABORACIN DE INSTRUMENTOS DE
EVALUACIN DE COMPETENCIAS PROFESIONALES
7) Establecer las tcnicas y los instrumentos en la parte final de las columnas que
corresponde a los indicadores segn evidencias. Ejemplo: para recoger
evidencias de conocimiento la tcnica es formulacin de preguntas y el
instrumente el cuestionario. Para el recojo de evidencias de desempeo la
tcnica de evaluacin es observacin y su instrumento la lista de chequeo de
desempeo, la tcnica para el recojo de evidencias de producto es la
valoracin de producto y su instrumento la lista de chequeo de producto.
3 RANGO
CONOCIMIENTOS Y COMPRENSIN
4 ESENCIALES
FORMULACIN DE INDICADORES DE
EVALUACION SEGN EVIDENCIAS DE
5
DESEMPEO CONOCIMIENTO Y PRODUCTO
7
Documento de trabajo DEC-CONEAU Prohibida su reproduccin
MATRIZ DE CONSISTENCIA PARA LA ELABORACIN DE INSTRUMENTOS DE EVALUACIN DE
COMPETENCIAS PROFESIONALES
ELEMEN CRITERIOS DE RANGO CONOCIMIENTOS INDICADORES DE EVALUACIN SEGN EVIDENCIAS
NORMA DE TOS DESEMPEO Y COMPRENSIN
COMPETENCIA ESENCIALES
CONOCIMIENTO DESEMPEO PRODUCT
O
a) El postulante 1. Identifica las normas de competencia a evaluar, 1.Orienta al
es orientado 1. Normas de segn priorizacin de la Entidad certificadora. postulante
sobre la competencias en 2. Identifica la comunicacin asertiva como habilidad sobre la
evaluacin, segn que se evaluar al social del evaluador. evaluacin
tipos de postulante 3. Diferencia las tcnicas de evaluacin de segn
evidencias a priorizadas por la competencias segn gua de participantes del evidencia a
recoger y pautas entidad curso de evaluadores recoger y
establecidas. certificadora. (a, b, 4. Identifica los tipos, caractersticas y condiciones de pautas
c, d) instrumentos de evaluacin de competencias a establecidas
aplicar segn gua de evaluacin CONEAU.
2.Habilidades 5. Analiza los tipos de evidencias para la evaluacin
sociales del de competencias segn directrices de
1. evaluador de normalizacin CONEAU.
Recoger competencias (Gua 6. Analiza la actuacin tica del evaluador en un
evidenci del participante del caso.
as de las Tcnicas de curso de 7. Identifica los procedimientos para la aplicacin de
compete evaluacin: evaluadores) (a) los instrumentos de evaluacin de competencias.
ncias del b) Los Observacin 1. Identifica las evidencias de conocimiento de 2. Aplica Registros
postulan instrumentos de en ambiente 3.Tcnicas de las normas de competencia a evaluar. instrumentos de
te segn evaluacin de real evaluacin de 2. Describe el procedimiento del uso de de instrument
pautas conocimiento se Simulacin competencias instrumentos de recojo de evidencias de conocimiento os de
estableci aplican de Valoracin de segn Gua de conocimiento, segn tcnica. segn conocimien
das por acuerdo a las productos evaluacin 3. Identifica evidencias de conocimiento para evidencia a to
Ejecutar la la evidencias a Formulacin CONEAU ( a, b, c, la evaluacin de competencias recoger y aplicados
evaluacin de las entidad recoger y pautas de preguntas d) 4. Analiza la actuacin tica del evaluador en pautas
competencias de certifica establecidas. casos de aplicacin de instrumentos de evaluacin establecidas.
los postulantes, dora y Tipos de 4.Tipos de de conocimiento.
segn las normas y CONEA evidencias: evidencias para la 5. Analiza un caso de aplicacin de un
procedimientos U. Conocimiento evaluacin de cuestionario.
establecidos por la Desempeo competencias 6. Analiza un caso de registro de evidencias de
entidad Producto segn Gua de conocimiento.
8
Documento de trabajo DEC-CONEAU Prohibida su reproduccin
certificadora. c) Los evaluacin 1. Analiza las evidencias de desempeo de las 3. Aplica Registro
instrumentos de Tipos de CONEAU (a, b, c, normas de competencia a evaluar en un caso instrumentos de
evaluacin de instrumentos: d) 2. Relaciona el instrumento de evaluacin de de desempeo instrument
desempeo se Cuestionario desempeo con a tcnica correspondiente a la segn o de
aplican de Lista de 5.Pautas ticas de evidencia a recoger evidencia a desempe
acuerdo a las chequeo la evaluacin de 3. Describe las caractersticas, condiciones y recoger o
evidencias a competencias procedimientos del uso del instrumento de
recoger y pautas segn cdigo de evaluacin de desempeo.
establecidas. tica del evaluador 4. Analiza la actuacin tica del evaluador en casos
CONEAU(a, b, c, d de aplicacin de instrumentos de evaluacin de
y e) desempeo.
5. Analiza la aplicacin de una lista de verificacin de
6. Procedimientos desempeo en un caso.
para la aplicacin 6. Describe el procedimiento para el registro de
de los instrumentos evidencias.
d) Los de evaluacin de 1. Identifica las evidencias de producto de las 4. Aplica Registro
instrumentos de competencias normas de competencia a evaluar. instrumentos de
evaluacin de segn Gua de 2. Relaciona el instrumento de evaluacin de de producto instrument
producto se evaluacin de producto con la tcnica correspondiente a la segn o de
aplican de CONEAU (a, b, c, evidencia a recoger evidencia a producto
acuerdo a las d). 3. Describe las caractersticas, condiciones y recoger
evidencias a procedimientos del uso del instrumento de
recoger y pautas 7. Procedimiento evaluacin de producto.
establecidas. para el registro de 4. Analiza la actuacin tica del evaluador en
evidencias segn casos de aplicacin de instrumentos de evaluacin
Gua de evaluacin de producto.
CONEAU (b, c, d, 5. Describe los procedimientos para la
e). aplicacin del instrumento de evaluacin de
producto.
8. Pautas para la 6. Describe el procedimiento para el registro de
determinacin del evidencias de producto
e) La logro de las 1. Reconoce los principios ticos en la 5. Registra el Registro
determinacin del competencias determinacin del logro de las competencias y su logro de la de logro de
logro de la segn Gua de registro. competencia competenc
competencia es evaluacin 2. Analiza los procedimientos para la en los ia
registrada en los CONEAU (e). determinacin del logro de las competencias. formatos
formatos 3. Describe el procedimiento para el registro del logro establecidos
establecidos de las competencias.
segn pautas
establecidas.
9
Documento de trabajo DEC-CONEAU Prohibida su reproduccin
a) Los Actores 1.Organizacin del 1. Reconoce la organizacin del expediente del 1.Revisa y Registro
2. expedientes Involucrados expediente del evaluado para el informe final de la evaluacin. organiza de
Comunic de los .Postulante evaluado para el 2. Analiza la tica del evaluador en relacin a la expedientes verificacin
ar a los postulantes evaluado informe final de la revisin y organizacin de los expedientes de los de evaluados y
actores evaluados son .Responsables evaluacin (en postulantes evaluados. segn pautas expediente
involucra revisados y de Gua de EC s
dos los organizados evaluacin/ges Procedimientos organizado
resultado de acuerdo a tin para la s
s de la pautas de la - Evaluacin de
evaluaci entidad Resultado de Competencias
n, segn certificadora. la evaluacin con fines de
normas b) La -Demostr la certificacin 1. Diferencia la comunicacin individual, emptica, 2. Comunica al
estableci comunicacin Competencia profesional- asertiva, y respetuosa de los resultados de la postulante los
das de los - no demostr CONEAU) (a) evaluacin. resultados de
resultados de la 2. Pautas para la 2. Analiza las formas de comunicacin de los la evaluacin
la evaluacin competencia comunicacin de resultados en un caso. de manera
es realizada los resultados a emptica,
de manera los postulantes asertiva,
individual, evaluados (en respetuosa
emptica, Gua de siguiendo
asertiva y evaluacin pautas
respetuosa CONEAU)(b). establecidas.
con el 3. Pautas de
postulante elaboracin del
segn pautas informe (en Gua
establecidas. Procedimientos
c) La redaccin para la 1. Reconoce las recomendaciones para la elaboracin 3.Redacta el Informe
del informe Evaluacin de del informe final de resultados de la evaluacin. informe final a final
final a la EC Competencias la EC con consolidad
es realizada con fines de participacin o de
con la certificacin del equipo resultados
participacin profesional- evaluador de
del equipo CONEAU) (c, d, evaluacin
evaluador. e). de
4. Pautas para la competenc
entrega del ias
informe (en Gua
d) El informe de Procedimientos 1. Identifica las partes del informe final de la 4. Redacta el
la evaluacin para la evaluacin. informe final
de evaluacin de 3. Analiza las pautas ticas del evaluador de cumpliendo
10
Documento de trabajo DEC-CONEAU Prohibida su reproduccin
competencias competencias competencia en la redaccin del informe. recomendacio
es redactado CONEAU) (e) nes
cumpliendo 6. Pautas de establecida
las manejo de por la EC
recomendacio contingencias en
nes la evaluacin y
establecidas elaboracin del
por la entidad informe de la EC.
certificadora. (e)
7. Pautas de tica
e) La del evaluador de 1. Analiza las pautas para la presentacin del 5. Realiza la
presentacin del competencias. informe final de la evaluacin de competencias en
presentacin
informe se realiza (a, e, d) un caso. del informe
considerando su 8. Contingencias en 2. Identifica los principios ticos en la presentacin
considerando
integridad, la elaboracin del informe final de la evaluacin su integridad,
seguridad y del informe seguridad y
confidencialidad segn EC(f) confidencialida
de acuerdo a lo d de acuerdo a
establecido por la lo establecido
EC. por la EC.
f) Las 1. Reconoce pautas para el manejo de contingencias 6. Maneja
contingencias en la elaboracin del informe a la EC. contingencias
durante la 2. Analiza las pautas ticas del evaluador de durante la
elaboracin del competencias en el manejo de contingencias en la elaboracin
informe son elaboracin del informe a la EC. del informe de
manejadas de acuerdo a
acuerdo a pautas pautas
establecidas por establecidas
la EC. por la EC.
TECNICAS E INSTRUMENTOS SEGN EVIDENCIAS
Formulacin de Observacin-Lista Anlisis de producto-Lista de chequeo de
peguntas- de chequeo de producto
Cuestionario desempeo
11
Documento de trabajo DEC-CONEAU Prohibida su reproduccin
3.2. CRITERIOS DE DESEMPEO
La evaluacin por competencias se basa en criterios que son juicios tcnicos y ticos
que orientan el desempeo profesional.
Los criterios de desempeo son la base para poder evaluar si un profesional alcanza
el resultado esperado del desempeo establecido en el elemento de competencia,
expresan lo que se espera del desempeo y el cmo se espera que sea el resultado.
Por lo tanto los criterios describen la calidad de los resultados de los desempeos,
identifican los aspectos esenciales o crticos para el desempeo del elemento de
competencia.
Expresin
Los criterios de desempeo se deben expresar con oraciones en las que se identifique
claramente el:
Enunciado evaluativo.
Estructura gramatical
EJEMPLOS DE CRITERIOS
12
Documento de trabajo DEC-CONEAU Prohibida su reproduccin
3.3 INDICADORES DE EVALUACIN
3.3.1 Definiciones
Son definidos como medidas objetivas de los sucesos del proceso que a su vez
permiten evaluar si se est cumpliendo o no, o en qu medida, los criterios de
evaluacin que se han elaborado.
3.3.2 Ventajas
Los indicadores de evaluacin describen las habilidades, conocimientos, y
actitudes, destrezas que se desean evaluar. Hacen observable a los criterios del
elemento de competencia permitiendo valorar el desempeo del profesional con
objetividad al recoger las evidencias.
Permite la elaboracin de instrumentos pertinentes.
Permiten verificar el cumplimiento de los criterios de evaluacin (condiciones de
desempeo).
Ejemplo:
3.3.5. Recomendaciones
14
Documento de trabajo DEC-CONEAU Prohibida su reproduccin
argumentos.
Sintetiza Enuncia brevemente lo esencial de un tema,
organizndolo de un modo personal.
Identifica supuestos Descubre por inferencia algo que funciona como
fundamento y cuya verdad no ha sido probada.
Clasifica Distribuye objetos o ideas en clases o conjuntos,
segn un criterio de clasificacin.
CRITERIOS INDICADORES
a) El postulante es orientado 1. Identifica las normas de competencia a evaluar, segn
sobre la evaluacin, segn priorizacin de la Entidad certificadora.
tipos de evidencias a recoger 2. Identifica la comunicacin asertiva como habilidad social
y pautas establecidas. del evaluador.
3. Diferencia las tcnicas de evaluacin de competencias
segn gua de participantes del curso de evaluadores
4. Identifica los tipos, caractersticas y condiciones de
instrumentos de evaluacin de competencias a aplicar
segn gua de evaluacin CONEAU.
5. Analiza los tipos de evidencias para la evaluacin de
competencias segn directrices de normalizacin
CONEAU.
6. Analiza la actuacin tica del evaluador en un caso.
2 Ver CASAS, Luis. Evaluacin de capacidades y valores en la sociedad del conocimiento. 2007. Editorial Norma
(fundamentos de la Taxonoma D HAINAUT como herramienta til para evaluacin de capacidades. Pg. 63-71)
15
Documento de trabajo DEC-CONEAU Prohibida su reproduccin
El reactivo debe ser cuidadosamente construido, como base para conocer el logro de
la competencia.
Tipos de reactivos:
3.5.1 Definiciones:
Las evidencias son pruebas claras y objetivas, elementos tangibles que permiten
demostrar que se ha logrado cubrir de manera satisfactoria un requerimiento o un
criterio especfico de desempeo.3
Evidencia significa demostrar o poner de manifiesto algo. Las evidencias como parte
de los componentes de la competencia, refieren de manera precisa si el evaluado es
capaz de realizar la funcin referida en la competencia de manera consistente.
3
Directrices para la identificacin y normalizacin de competencias con fines de certificacin
profesional. CONEAU-2da versin 2011
16
Documento de trabajo DEC-CONEAU Prohibida su reproduccin
1. De desempeo
2. De Producto
3. De Conocimiento
Para ello se debe aplicar tcnicas y contar con instrumentos de evaluacin elaborados
especficamente, que sean vlidos y confiables.
4
Adaptado de Tobn, S. Competencias, calidad y educacin superior. Cooperativa Editorial, Magisterio,
Bogot, Colombia 2006:143.
17
Documento de trabajo DEC-CONEAU Prohibida su reproduccin
Las evidencias de producto, son pruebas o productos especficos que dan cuenta de
las finalidades de la competencia evaluada (resultado inmediato) en los que hay que
considerar sus requerimientos de calidad.i5
Dado que es indispensable recoger de manera eficaz las evidencias se hace necesaria
la seleccin del instrumento en coherencia a la tcnica.
Existen diversas tcnicas para evaluar competencias. Las tcnicas son herramientas
metodolgicas que permiten obtener las evidencias requeridas por la norma de
competencia durante el proceso de evaluacin de desempeo de una persona. Es
conveniente definir la tcnica que permita recoger el mayor nmero de evidencias
requeridas en la norma con el fin de reducir costos y hacer ms eficiente el proceso de
evaluacin. (SENA, Colombia. 20036)
1. Tcnica de observacin
La observacin directa en ambiente real de trabajo es la tcnica por excelencia
para recoger evidencias7. A travs de esta tcnica se obtiene informacin sobre el
comportamiento o la conducta espontnea del profesional. Esta tcnica es
aplicable en cualquier momento de la evaluacin continua, aunque su mayor
utilidad est en el recojo de datos para valorar el dominio de procedimientos y el
desarrollo de actitudes durante el trabajo diario (relacin consigo mismo, con sus
compaeros de trabajo, comprobar su ndice de autoestima, capacidad autocrtica,
autonoma, colaboracin, respeto, etc.).8
Para facilitar la observacin y reducir las omisiones, sesgos y otros aspectos
subjetivos asociados al observador es imperativo la elaboracin y uso de
instrumentos: listas de chequeo.
2. Simulacin de Situaciones
La simulacin de situaciones (SS) es una tcnica a travs de la cual se generan
condiciones similares a las reales de un ambiente o escenario laboral profesional,
pero teniendo bajo control diferentes variables complejas, como riesgo,
temperatura, situaciones atpicas que afectan el resultado esperado entre otras.
Se debe usar cuando no es posible la observacin directa en el ambiente real de
trabajo, por razones de costos, riesgos, seguridad del paciente y del evaluado,
5
Idem. Tobn 2006
6
Gua para seleccionar tcnicas y elaborar instrumentos de evaluacin de competencias laborales. SENA-
Colombia, 2003.
7
Idem. SENA, Colombia. 2003
8
Adaptado de Canales, Isaac. 180?
18
Documento de trabajo DEC-CONEAU Prohibida su reproduccin
baja frecuencia de la actividad, procurando una representacin autntica del
desempeo a evaluar.
3. Valoracin de productos
Tcnica utilizada cuando son observables los productos que genera la funcin
productiva; el producto refleja evidencias esenciales sobre el desempeo.
Los productos pueden ser registros, formatos, reportes, planes, informes, diseo
de procesos, maquetas, , entre otros, segn la profesin.
Siempre la evaluacin del producto debe hacerse con el rigor establecido para as
efectivamente determinar la competencia del evaluado.
19
Documento de trabajo DEC-CONEAU Prohibida su reproduccin
Identificando en la matriz de consistencia para la elaboracin de instrumentos de
evaluacin, la tcnica de evaluacin y el tipo de instrumento segn la evidencia a
recoger.
Procedimiento de elaboracin
20
Documento de trabajo DEC-CONEAU Prohibida su reproduccin
LISTA DE CHEQUEO DEL DESEMPEO
I. INFORMACIN GENERAL PARA EL PROCESO DE EVALUACIN
FECHA DE EVALUACIN
II. INTRODUCCIN
Usted encontrar la tabla de aplicacin o cuerpo del instrumento que contiene los reactivos a aplicar, su
numeracin o cdigo, un espacio de registro de cumplimiento (SI/NO) y otro para el registro de
observaciones que como evaluador considere conveniente realizar.
Marque SI, cuando el candidato cumpla con el desempeo o muestre las evidencias correspondientes y
NO cuando no cumpla con los aspectos sealados.
21
Documento de trabajo DEC-CONEAU Prohibida su reproduccin
IV. TABLA DE APLICACIN O CUERPO DEL INSTRUMENTO DE EVALUACIN
Si todos los reactivos son afirmativos el resultado es que cumple lo solicitado por la norma de
competencia y si hay algn reactivo con respuesta negativa el resultado es que No Cumple. No puede
haber tem sin marcar.
VII. RESULTADO DE LA EVALUACIN
CUMPLE NO CUMPLE
.
FIRMA DEL EVALUADOR FIRMA DEL EVALUADOR FIRMA DEL EVALUADO
22
Documento de trabajo DEC-CONEAU Prohibida su reproduccin
LISTA DE CHEQUEO DEL PRODUCTO
FECHA DE EVALUACIN
II. INTRODUCCIN
Este documento presenta el instrumento de evaluacin de los productos correspondientes del elemento de
competencia 3.1. Aplicar instrumentos de evaluacin para recopilar las evidencias de las competencias del
postulante, segn las normas de competencia a evaluar y los procedimientos establecidos por la entidad
certificadora, perteneciente a la Norma de Competencia de Ejecutar la evaluacin de las competencias de los
postulantes, segn las normas y procedimientos establecidos por la entidad certificadora, que una persona debe
demostrar para ser considerada competente.
El presente instrumento de evaluacin de producto est diseado para evaluar la competencia profesional de las
personas que se desempean como EVALUADORES DE COMPETENCIAS PROFESIONALES y contiene las
instrucciones que debe seguir para su aplicacin.
Posteriormente se presentan las instrucciones de calificacin del instrumento de evaluacin, as como para la
emisin del resultado de la evaluacin.
El instrumento contiene seis (8) reactivos.
III. INSTRUCCIONES DE APLICACIN DEL INSTRUMENTO DE EVALUACIN
Usted encontrar la tabla de aplicacin o cuerpo del instrumento que contiene los reactivos a evaluar, su
numeracin o cdigo, un espacio de registro de cumplimiento (SI/NO) y otro para el registro de observaciones que
como evaluador considere conveniente realizar.
Marque SI, cuando el producto cumpla con el criterio o tem (reactivo) correspondiente y NO cuando no cumpla con
los aspectos sealados.
23
Documento de trabajo DEC-CONEAU Prohibida su reproduccin
IV. TABLA DE APLICACIN O CUERPO DEL INSTRUMENTO DE EVALUACIN
3. Todos los tems de la tabla de aplicacin estn marcados segn el contenido del
portafolio de aplicacin del instrumento.
4. El resultado de la evaluacin es coherente con las instrucciones del mismo para la
emisin del resultado.
5. La sumatoria de los puntajes por rubros y el puntaje total son correctos .
VIII. RETROALIMENTACIN AL CANDIDATO IDENTIFICACIN DE ASPECTOS PARA MEJORA (Anote el nmero del
reactivo que debe mejorar)
.
FIRMA DEL EVALUADOR FIRMA DEL EVALUADOR FIRMA DEL EVALUADO
24
Documento de trabajo DEC-CONEAU Prohibida su reproduccin
4.1.4. INSTRUMENTO DE EVALUACIN DE CONOCIMIENTOS. CUESTIONARIO
A) PRUEBAS DE DESARROLLO
Son aquellas en las que se solicita, a travs de preguntas, el desarrollo por
escrito de un discurso que evidencie el desarrollo de determinadas
capacidades. Pueden ser de respuesta libre u orientada.
1.- El diseo
Es la planeacin del instrumento.
a. Perfil de referencia:
Es el fundamento de la prueba y objeto de medida de la prueba relacionado a la
competencia a evaluar expresado en indicadores que responden a los criterios de la
competencia.
b. Tabla de Especificaciones
Presenta la organizacin lgica de los componentes definidos operacionalmente
Establece el nivel y tipo cognoscitivo con que debern ser medidos en la prueba
(descrito en los indicadores).
2.-Elaboracin
Es la construccin de la prueba o cuestionario con base en el diseo y en la tabla de
especificaciones de la matriz de consistencia.
Se debe partir de los indicadores descritos en la matriz de consistencia de la norma a
evaluar.
Se parte de la evaluacin de la capacidad (reconocer, describir, comparar, seleccionar,
analizar, sintetizar, evaluar, aplicar, etc) a los diferentes niveles de dominio (bajo,
medio, alto)por medio de reactivos de opcin mltiple, o de puntuaciones asignadas a
tipo de respuesta en relacin con los criterios. Ver anexo 2 cuadros de capacidades y
procesos cognitivos.
26
Documento de trabajo DEC-CONEAU Prohibida su reproduccin
Debe abarcar todos los aspectos contemplados en la descripcin de la norma de
competencia, el perfil de referencia y la tabla de especificaciones.
Los instrumentos de conocimientos, puede estar formado por:
Preguntas de opcin mltiple: completamiento, apareamiento, solucin
problemas, jerarquizacin, identificacin de graficas o diagramas y cuestionario
directo.
Preguntas abiertas
Situaciones prcticas, etc.
3.- Piloteo
Monitorear la confiabilidad y validez de los exmenes.
Vigilar el nivel de dificultad y la capacidad de discriminacin de los tems.
Generar bancos de reactivos o items suficientemente amplios.
Realizar pilotajes de los exmenes.
4.- Validacin
Consiste en analizar la construccin de los reactivos que realmente
representen al criterio a evaluar y analizar los resultados de aplicaciones
preliminares de la prueba para confirmar estadsticamente su validez y su
confiabilidad as como establecer las condiciones definitivas para el manejo y
administracin del instrumento con los usuarios.
5.-Calificacin
Es el mecanismo de ponderacin y valoracin de los resultados obtenidos
Utilizar un criterio de calificacin y explicarlo.
En el caso de prueba objetiva: Analizar la dificultad de reactivos, considerando
para la calificacin los que se encuentren en el rango de aceptables, mejorar
los reactivos que no estn en ese rango. Analizar la discriminacin de estos, en
caso de que no discriminen, revisar redaccin del reactivo y los distractores
para plantearlo de manera diferente.
Establecer con base a lo anterior los puntos de corte.
En el caso de la evaluacin del desempeo, establecer el puntaje aprobatorio.
27
Documento de trabajo DEC-CONEAU Prohibida su reproduccin
Para la elaboracin de este tipo de pruebas y potenciar sus beneficios podemos seguir
las Evitar
siguientes recomendaciones:
aseveraciones muy generales.
Evitar aseveraciones negativas
Evitar oraciones demasiado largas y complejas.
Evitar incluir dos ideas en una aseveracin, a menos que se trate de apreciar una
relacin de causa a efecto.
Si en la aseveracin se incluye una opinin, debe indicarse a quin corresponde
Calcular que las aseveraciones ciertas y las expresiones falsas tengan ms o
menos la misma longitud
Ejemplo:
En relacin a los procedimientos generales para la aplicacin de los instrumentos de
evaluacin, segn la gua de evaluacin CONEAU, identifique las afirmaciones
verdaderas y las falsas y marque la respuesta correcta.
a. V F F V b. V V V F c. V F V V d. V V F V
DE CORRESPONDENCIA
Este tipo de reactivos exigen al evaluado establecer relaciones entre dos columnas
paralelas, de tal manera que cada palabra, nmero o smbolo de una de ellas
corresponda con una palabra, oracin o frase de la otra columna.
Ejemplo: Relacione las tcnicas de evaluacin con sus respectivos enunciados.
a. A B C D b. D B A C c. C A D B d. B C D A
28
Documento de trabajo DEC-CONEAU Prohibida su reproduccin
DE SELECCIN MLTIPLE
Para elaborar pruebas o preguntas de seleccin mltiple debemos tomar en cuenta las
siguientes recomendaciones:
29
Documento de trabajo DEC-CONEAU Prohibida su reproduccin
Cuidar que el problema o aseveracin que se exponga se encuentre claramente
definido e incluya slo la informacin necesaria para que su lectura sea gil.
Expresar la aseveracin en forma negativa slo cuando sea absolutamente
necesario.
Formular las posibles respuestas cuidando que stas guarden congruencia
gramatical con la aseveracin (si la aseveracin termina en ...es la:_______" no
pueden ponerse artculos masculinos entre las respuestas).
Cuidar que todas las respuestas sean de posible aceptacin aunque una sola sea
correcta.
Plantear la aseveracin de modo que sta no sugiera la respuesta.
La respuesta correcta de un reactivo debe colocarse en una ubicacin diferente
respecto a los dems reactivos.
DE ORDENAMIENTO
30
Documento de trabajo DEC-CONEAU Prohibida su reproduccin
competencias del postulante aplicando los instrumentos de evaluacin de la entidad
certificadora
Cantidad
Conocimientos Nmero
ELEMENTO DE PESO de
y comprensin CRITERIOS Indicador de
COMPETENCIA (%) preguntas
pregunta
esenciales /
31
Documento de trabajo DEC-CONEAU Prohibida su reproduccin
5. Analiza un caso de
aplicacin de un cuestionario. 4 1 12
7. Procedimientos 6. Analiza un caso de registro
para la aplicacin de de evidencias de conocimiento 4 1 13
los instrumentos de 1.-Analiza las evidencias de
evaluacin de desempeo de las normas de 4
competencias (a, b, competencia a evaluar en un 1 14
c, d). caso.
2. Relaciona el instrumento de
evaluacin de desempeo con 4
a tcnica correspondiente a la 1 15
8. Procedimiento evidencia a recoger
C) Los
para el registro de 3Describe las caractersticas,
instrumentos de
evidencias (b, c, d, condiciones y procedimientos 4
evaluacin de
e). del uso del instrumento de 1 16
desempeo se
aplican de evaluacin de desempeo.
acuerdo a las 4. Analiza la actuacin tica
del evaluador en casos de 4
9. Pautas para la evidencias a
recoger. aplicacin de instrumentos de 1 17
determinacin del
evaluacin de desempeo.
logro de la
5. Analiza un caso de
competencia (e). 4
aplicacin de una lista de 1 18
verificacin de desempeo.
4
6. Describe el procedimiento
para el registro de evidencias 1 19
32
Documento de trabajo DEC-CONEAU Prohibida su reproduccin
c) Eleccin de la escala de medicin. Se debe determinar si la escala ser
decimal, vigesimal, centesimal u otra. Para el ejemplo la escala es centesimal.
e) Asignacin de pesos a los reactivos o tems. El puntaje total del criterio sirve de
parmetro para asignar pesos a los reactivos o tems de la prueba en funcin de las
capacidades y conocimientos a evaluar. En el ejemplo, los reactivos de menor peso
(2,5) corresponden al criterio A El postulante es orientado sobre la evaluacin, segn
tipos de evidencias a recoger proceso bsico de describir o explicar.
Las capacidades que se pretenden medir deben estar identificadas en forma clara y
precisa. En este caso, se ha considerado la Taxonoma propuesta por L.DHainaut
(reproduccin, conceptualizacin, aplicacin, exploracin, movilizacin y resolucin de
problemas), de esta taxonoma para el ejemplo slo se ha considerado a tres
capacidades.
33
Documento de trabajo DEC-CONEAU Prohibida su reproduccin
Tabla de estructura de la prueba
Por ejemplo, uno de los instrumentos que utilizaremos para medir competencias
profesionales es una prueba de conocimientos (cuestionario) donde elaboraremos
preferentemente reactivos de opcin mltiple.
34
Documento de trabajo DEC-CONEAU Prohibida su reproduccin
Tabla de criterios, indicadores y reactivos del elemento de Competencia
Recoger evidencias de las competencias del postulante aplicando los
instrumentos de evaluacin de la entidad certificadora
35
Documento de trabajo DEC-CONEAU Prohibida su reproduccin
6. Analiza la actuacin f) Falta elaborar i. El equipo evaluador debe
tica del evaluador estar conformado por un
en un caso. mnimo de dos evaluadores.
( )
7. Identifica los g) En relacin a los ii. II.-Todos los instrumen- tos
procedimientos procedimientos generales deben ser firmados por el
para la aplicacin para la aplicacin de los postulante y al menos uno
de los instrumentos de evaluacin, de los evaluadores. ( )
instrumentos de segn la gua de evaluacin iii. III-La firma del postulante en
evaluacin de CONEAU, identifique las el instrumento de evaluacin
competencias. afirmaciones verdaderas y las es requisito para la
falsas y marque la respuesta apelacin a que hubiere
correcta. lugar. ( )
iv. IV.Antes de comunicar los
resultados interme-dios y el
resultado final de la
evaluacin, el equipo
evaluador debe realizar una
verificacin de todo lo
actuado. ( )
a. VFFV b. VVVF c.
VFVV d. VVFV
36
Documento de trabajo DEC-CONEAU Prohibida su reproduccin
EJEMPLO DE CUESTIONARIO
NOMBRES Y APELLIDOS DE
EVALUADOR (A):
LUGAR DE EVALUACIN
FECHA DE EVALUACIN
ELEMENTOS DE
COMPETENCIA
II. INTRODUCCIN
Este documento presenta el instrumento de evaluacin de los productos correspondientes del elemento de
competencia 3.1, perteneciente a la Norma de Competencia de.., que una persona
debe demostrar para ser considerada competente.
El presente instrumento de evaluacin est diseado para evaluar la competencia profesional de las personas que
se desempean como y contiene las instrucciones que debe seguir para su aplicacin.
Posteriormente se presentan las instrucciones de calificacin del instrumento de evaluacin, as como para la
emisin del resultado de la evaluacin.
37
Documento de trabajo DEC-CONEAU Prohibida su reproduccin
III. INSTRUCCIONES DE APLICACIN DEL INSTRUMENTO DE EVALUACIN
1 En la evaluacin del dolor abdominal uno de los siguientes aspectos es menos relevante:
a) Tiempo de inicio
b) Ubicacin y caractersticas
c) Tiempo de duracin
d) Mejora con analgsico
2.
3.
ETC.
Todas las ..
CUMPLE NO CUMPLE
38
Documento de trabajo DEC-CONEAU Prohibida su reproduccin
HOJA DE RESPUESTAS
FECHA DE
DA: 30 MES: MAYO AO:
INSCRIPCIN
ENTIDAD
COLEGIO
CERTIFICADORA
NOMBRES Y APELLIDOS
XXXXXX
DE EVALUADOR (A):
ELEMENTOS DE
COMPETENCIA
RESPUESTAS
A B C D A B C D A B C D
1 X 11 X 21
2 X 12 X 22
39
Documento de trabajo DEC-CONEAU Prohibida su reproduccin
3 X 13 X 23
4 X 14 X 24
5 X 15 X 25
6 X 16 X 26
7 X 17 X 27
8 X 18 28
9 X 19 28
10 D C B A 20 30
40
Documento de trabajo DEC-CONEAU Prohibida su reproduccin
5. VALIDEZ DE UN INSTRUMENTO
41
Documento de trabajo DEC-CONEAU Prohibida su reproduccin
expertos quienes evalan la representatividad de los indicadores relevantes de los
criterios de los elementos de la competencia.
La validez de contenido establece la relacin del instrumento con los criterios de los
elementos de la competencia que pretende medir. Siendo indispensable elaborar la
tabla de especificaciones, elaborar la prueba que se ajusta a la tabla de
especificaciones y determinar si los tems de una prueba son representativos de los
indicadores del criterio a evaluar. ( capacidad del instrumento).
Nos permite expresar el grado de eficacia con el que se puede predecir o pronosticar
un criterio a partir de las puntuaciones del instrumento.
Se define como el grado en que una prueba mide la construccin terica elaborada
respecto a los conocimientos o conducta que se mide.
1.- Cuando no sabemos las respuestas que nos van a dar las unidades de estudio hay
una aproximacin a la poblacin y las interrogantes deben ser abiertas y con ellas se
proceder a construir una lista de tems.
3.-La revisin del conocimiento disponible cuando existe la teora suficiente para
poder construir un instrumento.
Esta validez se refiere a si el cuestionario elaborado, y por tanto si los tems elegidos,
son evidencias de lo que se pretende medir.
El objetivo de este tipo de estudios es obtener evidencias para determinar si los tems
del instrumento representan adecuadamente el constructo que se pretende medir. No
olvidemos que los tems son el estmulo necesario para obtener las muestras de
conducta indicadoras del constructo. Este tipo de estudio examina si los tems pueden
hacer bien su papel (GONZALES, 2006: 16)
2 A continuacin indique que tan bien considera usted que el tem o reactivo sea
parte del, indicador, del criterio de desempeo y de la unidad de competencia que se
aborda a continuacin:
3 Juzgue cada tem o reactivo de manera individual comparando el contenido del tem
con el contenido de la dimensin de estudio. (Analice la tabla de especificaciones de la
prueba con la tabla de criterios, indicadores y reactivos)
Cantidad Nmero
ELEMENTO DE PESO
Conocimiento CRITERIOS Indicador de de
COMPETENCIA (%)
preguntas pregunta
44
Documento de trabajo DEC-CONEAU Prohibida su reproduccin
5. Analiza los tipos de 4
4.Tipos, evidencias para la
caractersticas y evaluacin de
1 5
condiciones de competencias segn
instrumentos de directrices de normalizacin
evaluacin de CONEAU.
competencias (a, b, 6. Analiza la actuacin tica 4
c, d) 1 6
del evaluador en un caso.
7. Identifica los procedimien- 4
5.Tipos de tos para la aplicacin de los
evidencias para la 1 7
instrumentos de evaluacin
evaluacin de de competencias
competencias (a, b, 1. Identifica las evidencias de 2.5
c, d) conocimiento de las normas 1 8
de competencia a evaluar.
6.Pautas ticas de 2. Describe el procedimiento 4
la evaluacin de del uso de instrumentos de
competencias (a, b, recojo de evidencias de 1 9
c, d y e) conocimiento, segn
tcnica.
7. Procedimientos B) Los
3. Identifica evidencias de 2.5
para la aplicacin de instrumentos de
conocimiento para la
los instrumentos de evaluacin de 1 10
evaluacin de
evaluacin de conocimiento se
competencias
competencias (a, b, aplican de
4. Analiza la actuacin tica 4
c, d). acuerdo a las
del evaluador en casos de
8. Procedimiento evidencias a
aplicacin de instrumentos 1 11
para el registro de recoger
de evaluacin de
evidencias (b, c, d,
conocimiento.
e).
5.Analiza un caso de 4
aplicacin de un 1 12
9. Pautas para la
cuestionario.
determinacin del
6. Analiza un caso de registro 4
logro de la
de evidencias de 1 13
competencia (e).
conocimiento
1.-Analiza las evidencias de 4
desempeo de las normas de
1 14
competencia a evaluar en un
caso.
2. Relaciona el instrumento de 4
evaluacin de desempeo con
C) Los 1 15
a tcnica correspondiente a la
instrumentos de
evidencia a recoger
evaluacin de
3Describe las caractersticas, 4
desempeo se
condiciones y procedimientos
aplican de 1 16
del uso del instrumento de
acuerdo a las
evaluacin de desempeo.
evidencias a
4. Analiza la actuacin tica 4
recoger.
del evaluador en casos de
1 17
aplicacin de instrumentos de
evaluacin de desempeo.
5. Analiza un caso de 4
aplicacin de una lista de 1 18
verificacin de desempeo.
6. Describe el procedimiento 4
1 19
para el registro de evidencias
D) Los 1.Identifica las evidencias de 2.5
1 20
instrumentos de producto de las normas de
evaluacin de competencia a evaluar.
producto se 2.Relaciona el instrumento de 4
aplican de evaluacin de producto con la 1 21
acuerdo a las tcnica correspondiente a la
evidencias a evidencia a recoger
recoger. 3. Describe las caractersticas, 2.5 1 22
condiciones y procedimientos
45
Documento de trabajo DEC-CONEAU Prohibida su reproduccin
del uso del instrumento de
evaluacin de producto.
4. Analiza la actuacin tica 4
del evaluador en casos de 1 23
aplicacin de instrumentos de
evaluacin de producto.
5. Describe los procedimientos 4
para la aplicacin del 1 24
instrumento de evaluacin de
producto.
6.-.Describe el procedimiento 4
1 25
para el registro de evidencias
de producto
1.-Reconoce los principios 2.5
E) La ticos en la determinacin del 1 26
determinacin logro de las competencias y su
del logro de la registro.
competencia es 2.Analiza los procedimientos 4
1 27
registrada en los para la determinacin del logro
formatos de las competencias.
establecidos 3. Describe el procedimiento 4
1 28
para el registro del logro de las
competencias
TOTAL 100 28
46
Documento de trabajo DEC-CONEAU Prohibida su reproduccin
TABLA DE CRITERIOS, INDICADORES Y REACTIVOS
6.-Falta elaborar 0
1
2
7.-En relacin a los procedimientos generales 3
para la aplicacin de los instrumentos de
evaluacin, segn la gua de evaluacin
CONEAU, identifique las afirmaciones 0
verdaderas y las falsas y marque la respuesta
correcta. 1
I.-El equipo evaluador debe estar conformado
por un mnimo de dos evaluadores. ( )
2
II.-Todos los instrumentos deben ser firmados 3
por el postulante y al menos uno de los
47
Documento de trabajo DEC-CONEAU Prohibida su reproduccin
evaluadores. ( )
III-La firma del postulante en el instrumento de
evaluacin es requisito para la apelacin a
que hubiere lugar. ( )
IV.Antes de comunicar los resultados
intermedios y el resultado final de la
evaluacin, el equipo evaluador debe realizar
una verificacin de todo lo actuado. ( )
Total (S)
Experto Experto Experto Experto Experto Experto sumatoria de media
tem ESCALA
1 2 3 4 5 6 acuerdos T/6
1 0 2 3 1 2 3 11 1,8 dbil
validez
2 3 3 1 2 2 3 14 2.3 validez
aceptable
3
4
5
6
7
total
Con los tems restantes se obtiene una media general de cada criterio que lo
compone y el resultado se interpreta con la siguiente escala:
Intervalos Escalas
1,6 a 2 Dbil validez
2,1 a 2,5 Validez aceptable
2,6 en adelante Validez fuerte
48
Documento de trabajo DEC-CONEAU Prohibida su reproduccin
Tabla de validez de contenido de tems
Los instrumentos de evaluacin deben ser vlidos y confiables: Son vlidos cuando el
instrumento se refiere realmente a la variable que pretende medir. Son confiables en
la medida que la aplicacin repetida del instrumento al mismo sujeto, bajo situaciones
similares, produce iguales resultados (HERNNDEZ, 1997).
Donde:
tem Experto Experto Experto Experto Experto Experto Total (S) V ESCALA
1 2 3 4 5 6
sumatoria de Aiken:
acuerdos s/ (n (c-1))
1 0 2 3 1 2 3 11 11/6(3) = 0,6 dbil validez
2 3 3 1 2 2 3 14 14/6(3) = 0.77 dbil validez
aprox 0,8
3 3 3 3 3 3 3 18 18/6(3) = 1 validez fuerte
4 3 2 3 3 3 3 17 17/6(3)= 0,94 validez fuerte
5 3 3 1 2 2 3 14 0,8 Validez dbil
6 3 3 1 3 3 3 16 0,88 validez
aceptable
7 3 3 3 3 3 3 18 1 validez fuerte
N=7 Validez
5,99/ 7 = 0,85 aceptable
9
Adaptado de Separata: Programa de maestra en educacin. PAME- Callao .(2009)
49
Documento de trabajo DEC-CONEAU Prohibida su reproduccin
Para que el tem sea aceptado o vlido debe alcanzar un coeficiente V igual
o superior a 0.81.
BIBLIOGRAFA
MORALES, Pedro. ( 2007) La fiabilidad de los test y escalas. Universidad Pontificia Comillas,
Madrid.
SALINAS Dino. 2002. Maana examen! La evaluacin entre la teora y la realidad. Barcelona
GRAO.
SOSA ESPINOZA, Myriam Janett. Evaluacin del aprendizaje. 2009 ICE. USMP. Lima, Per.
Evaluacin de competencias en la educacin universitaria. 2011 UCA. UNALM.
50
Documento de trabajo DEC-CONEAU Prohibida su reproduccin
VELA DAMONTE, Jorge. Gua Metodolgica de Programacin Curricular Modular para la
Educacin Superior Tecnolgica
ANEXOS
CAPACIDADES CARACTERSTICAS
reproduccin memoria, discriminacin y generalizacin
conceptualizacin define, describe, define caractersticas,
caracteriza una situacin
10
Ver CASAS, Luis. Evaluacin de capacidades y valores en la sociedad del conocimiento. 2007.
Editorial Norma (fundamentos de la Taxonoma D HAINAUT como herramienta til para evaluacin de
capacidades. Pg. 63-71)
51
Documento de trabajo DEC-CONEAU Prohibida su reproduccin
ANEXO 2 CUADRO DE CAPACIDADES Y PROCESOS COGNITIVOS
CAPACID.ESPEC.
PROCESOS COGNITIVOS
CAPACIDAD Q TIENEN
DEFINICIN FORMA DE EVIDENCIA
ESPECFICA PROCESOS COGNITIVOS / PROCESOS
CARACTERSTICA DEL PROCESO SIMILARES
MOTORES
Capacidad para ubicar Proceso mediante el cual se lleva la
Recepcin de informacin. El estudiante
en el tiempo, en el informacin a las estructuras mentales.
identifica cuando
espacio o en algn Proceso mediante el cual se encuentra
Caracterizacin seala algo, hace
medio fsico elementos, caractersticas y referencias
IDENTIFICAR RECONOCER marcas, subraya,
partes, caractersticas, Proceso mediante el cual se contrasta las
resalta expresiones,
personajes, Reconocimiento y caractersticas reales del objeto de
hace listas, registra
indicaciones u otros expresin. reconocimiento con las caractersticas
lo que observa, etc.
aspectos. existentes en las estructuras mentales.
Proceso mediante el cual se lleva la El estudiante
Recepcin de informacin discrimina cuando
Capacidad para informacin a las estructuras mentales.
Identificacin y Proceso mediante el cual se identifica elabora cuadros de
encontrar las
contrastacin de caractersticas de cada elemento y se doble entrada,
diferencias esenciales
DISCRIMINAR caractersticas compara con las caractersticas de otros explica diferencias,
entre dos o ms
elige algo
elementos, procesos o
Manifestacin de las Proceso mediante el cual se manifiesta las sustancial de un
fenmenos.
diferencias diferencias entre uno y otro elemento conjunto de
elementos.
Proceso mediante el cual se lleva la
Recepcin de informacin
informacin a las estructuras mentales.
Identificacin de las El estudiante
Proceso mediante el cual se identifica o compara cuando
caractersticas
Capacidad para seala referentes de cada elemento encuentra
cotejar dos o ms
individuales elementos comunes
elementos, objetos, Proceso mediante el cual se contrasta las o aspectos distintos
COMPARAR procesos o fenmenos caractersticas de dos o ms elementos entre los
con la finalidad de fenmenos que
encontrar semejanzas contrastacin de observa, hace
o diferencias. caractersticas de dos o cuadros
mas objetos de estudio comparativos,
paralelos
52
Documento de trabajo DEC-CONEAU Prohibida su reproduccin
Proceso mediante el cual se busca
Bsqueda y recepcin de
informacin en contextos o fuentes
informacin El estudiante
diversas.
selecciona cuando
Proceso mediante el cual se establecen
Determinacin de criterios separa objetos,
Capacidad que permite criterios o especificaciones que servirn de
o especificaciones caractersticas,
escoger los elementos referente para la seleccin.
cuando registra
de un todo, de acuerdo Identificacin y
SELECCIONAR Proceso mediante el cual se identifica informacin de su
con determinados contrastacin de criterios
caractersticas de elementos y se contrasta inters, cuando
criterios y con un o especificaciones con
con los criterios o especificaciones. hace elecciones,
propsito definido. prototipos
etc.
Eleccin del modelo Proceso mediante el cual se elige el
elemento.
53
Documento de trabajo DEC-CONEAU Prohibida su reproduccin
Proceso mediante el cual se lleva la El estudiante infiere
Recepcin de informacin
informacin a las estructuras mentales. cuando hace
Proceso mediante el cual se identifica deducciones,
Identificacin de premisas informacin que se utilizar como base otorga significado a
para la inferencia las expresiones a
Contrastacin de las Proceso mediante el cual se contrastan las partir del contexto,
Capacidad para premisas con el contexto. premisas o supuestos con el contexto determina el
obtener informacin mensaje de
INFERIR. nueva a partir de los DEDUCIR eslganes, otorga
datos explcitos o de significado a los
otras evidencias. recursos no
Proceso mediante el cual se obtienen verbales y al
Formulacin de
deducciones a partir de las premisas o comportamiento de
deducciones
supuestos. las personas,
determina causas o
posibles
consecuencias.
Recepcin de informacin Proceso mediante el cual se lleva la
Capacidad para informacin a las estructuras mentales.
cuestionar el estado de El estudiante
un fenmeno, la Formulacin de criterios Proceso mediante el cual se establecen enjuicia cuando
produccin de un criterios que permitan emitir un juicio emite una
acontecimiento, el apreciacin
pensamiento de los Contrastacin de los Proceso mediante el cual se compara los personal, hace
JUZGAR ENJUICIAR
dems, las formas de criterios con el referente criterios establecidos con el referente, con comentarios, platea
organizacin, tratando la finalidad de encontrar las virtudes y argumentos a favor
de encontrar sus deficiencias. o en contra,
virtudes y deficiencias expresa puntos de
y asumiendo una Emisin de la opinin o Proceso mediante el cual se emite y vista.
posicin al respecto.
juicio. asume una posicin
54
Documento de trabajo DEC-CONEAU Prohibida su reproduccin
Recepcin de la Proceso mediante el cual se lleva la El estudiante aplica
EMPLEAR.
informacin. informacin a las estructuras mentales. cuando emplea,
Identificacin del proceso, Proceso mediante el cual se identifica y se administra o pone
principio o concepto que comprende el proceso, principio o concepto en prctica un
Capacidad que permite se aplicar que se pretende aplicar conocimiento, un
la puesta en prctica de Secuenciacin de Proceso mediante el cual se establecen principio, una
APLICAR principios o procesos y eleccin de secuencias, un orden y estrategias para los UTILIZAR. frmula o un
conocimientos en estrategias procedimientos que realizar proceso con el fin
actividades concretas de obtener un
Proceso mediante el cual se pone en determinado efecto,
Ejecucin de los procesos un resultado o un
practica los procesos y estrategias
y estrategias. rendimiento en
establecidos
alguien o algo.
Recepcin de la Proceso mediante el cual se lleva la
informacin. informacin a las estructuras mentales. El estudiante
formula cuando
Proceso mediante el cual se identifican los
expresa mediante
Capacidad que permite Identificacin de elementos que se deben relacionar para
signos matemticos,
establecer relaciones elementos obtener resultados o generar nuevas
las relaciones entre
entre elementos para construcciones
FORMULAR PLANTEAR diferentes
presentar resultados, Interrelacin de los Proceso mediante el cual se establecen
magnitudes que
nuevas construcciones elementos relaciones entre los elementos.
permitirn obtener
o solucionar problemas Proceso mediante el cual se pone en un resultado;
Presentacin de las prctica las relaciones entre elementos cuando plantea un
interrelaciones obtenindose los resultados o la nuevas proyecto, etc.
construcciones
DIAGRAMA
Observacin del objeto o Proceso mediante el cual se observa con
R
situacin que se atencin el objeto o situacin que se
ESQUEMAT
representar representar
IZAR
El estudiante
Proceso mediante el cual se toma
Capacidad que permite Descripcin de la forma / representa cuando
conciencia de la forma y de los elementos
representar objetos situacin y ubicacin de DISEAR dibuja un objeto,
REPRESENTA que conforman el objeto o situacin que se
mediante dibujos, sus elementos acta en una obra
R representar
esquemas, diagramas, teatral, elabora un
Generacin de un orden y Proceso mediante el cual se establece un
etc plano, croquis,
secuenciacin de la orden y secuencia para realizar la GRAFICAR
plano o diagrama
representacin representacin
Representacin de la
Proceso mediante el cual se representa la
forma o situacin externa DIBUJAR
forma o situacin externa e interna
e interna
55
Documento de trabajo DEC-CONEAU Prohibida su reproduccin
Proceso mediante el cual se lleva o El estudiante
Recepcin de la
recupera la informacin de las estructuras argumenta cuando
informacin
mentales. sustenta con
Capacidad que permite Observacin selectiva de Proceso mediante el cual se identifican la fundamentos
ARGUMENTAR sustentar o sostener la informacin que informacin que se utilizarn para determinados temas
puntos de vista permitir fundamentar fundamentar los argumentos. o puntos de vista en
una exposicin,
Presentacin de los Proceso mediante el cual se presenta los
discusin, alegato,
argumentos argumentos en forma escrita u oral.
etc.
Proceso mediante el cual se recepciona
Recepcin de la
informacin sobre el qu se va a realizar y el OPERAR
informacin del qu hacer,
cmo se va a realizar. En algunos casos se El estudiante realiza
por qu hacer y cmo
requiere incorporar imgenes visuales del ELABORAR cuando lleva a cabo
hacer (imgenes )
cmo se va a realizar un procedimiento
Capacidad que permite Identificacin y secuenciacin de
Proceso mediante el cual se identifica y secuencia los para la produccin
REALIZAR ejecutar un proceso, los procedimientos que involucra
procedimientos que se pretenden realizar de un bien, un
tarea u operacin la realizacin
movimiento fsico,
Proceso mediante el cual se pone en prctica los
procedimientos de la realizacin . En una primera
un paso de una
Ejecucin de los procedimientos danza, etc.
instancia controlados por el pensamiento y en una EJECUTAR
controlados por el pensamiento
segunda instancia es la puesta en prctica de los
procedimientos de manera automtica
56
Documento de trabajo DEC-CONEAU Prohibida su reproduccin
ANEXO 3
Qu es un tem
Un tem es una pregunta, que en conjunto con otras dan forma a una prueba, pueden ser de
distintos tipos y clases de acuerdo con lo que se pretende medir.
La prueba escrita est conformada por dos tipos de tems: los objetivos y los de desarrollo.
ITEMS OBJETIVOS
Los tems objetivos son aquellos que el evaluado soluciona marcando una respuesta a
elegir entre varias opciones dadas, o bien completando una respuesta. En ambos casos
todas las respuestas aceptables han sido previstas y especificadas en una clave de
respuestas o una plantilla de correccin. El trmino objetivo se refiere al procedimiento
empleado para la asignacin de la puntuacin y no a las caractersticas de la respuesta.
Entre los tipos de tems objetivos estn: seleccin nica, respuesta corta,
correspondencia o apareamiento e identificacin.
1. Seleccin nica
Consta de un enunciado, base o pie que hace referencia a una situacin y varias opciones
de respuesta, entre las cuales solo hay una que es correcta, las dems funcionan como
distractores.
Ejemplo:
57
Documento de trabajo DEC-CONEAU Prohibida su reproduccin
D.Analizar sus fortalezas y debilidades para relacionarse.
REGLAS GENERALES
Verificar que el tem corresponda con los propsitos de la evaluacin, la estructura
de la prueba y con las dimensiones disciplinares Todas las preguntas de una
prueba deben ser independientes entre s.
La informacin de un tem no debe servir de pauta para contestar otra, ni la
respuesta a un tem debe depender de haber encontrado primero la de otra
anterior.
Evitar los tems que pueden contestarse por sentido comn y aquellos cuya
respuesta dependa nicamente de recordar un trmino, un smbolo, un dato o la
fecha en que ocurri un evento.
Evitar expresiones rebuscadas que puedan confundir. Se recomienda emplear un
lenguaje directo, sencillo y comprensible.
Los tems no deben tener juicios de valores explcitos o implcitos.
58
Documento de trabajo DEC-CONEAU Prohibida su reproduccin
CONTEXTO
Es la informacin que sita conceptualmente al evaluado. Provee elementos necesarios y
suficientes para focalizar la tarea de evaluacin. En un sentido amplio, el contexto abarca
todo el saber previo del evaluado sobre el objeto de evaluacin; no obstante, en el
proceso de elaboracin de un tem, es usual que el evaluador encuentre pertinente y
necesario presentar un texto u otro tipo de informacin que contribuya a precisar las
condiciones del problema, las variables que es prudente considerar, o para ubicar en el
tiempo y en el espacio la problemtica, etc.
ENUNCIADO
Es el planteamiento, propiamente dicho, de la problemtica que se espera sea resuelta
por el evaluado. En el enunciado se hace explcita la tarea de evaluacin y, por tanto,
dirige el esfuerzo del evaluado para generar o seleccionar una respuesta, por lo cual es
fundamental que est escrito en lenguaje claro y preciso.
Tradicionalmente los enunciados de tems de seleccin mltiple se plantean en forma de
pregunta, o como una proposicin. En el primer caso, las opciones se redactan como
respuestas a la pregunta; en el segundo caso, el enunciado constituye la primera parte de
una proposicin y cada una de las opciones debe completar coherentemente el
enunciado.
La utilizacin de una u otra forma de plantear el enunciado es decisin del evaluador y
generalmente tiene que ver con la facilidad para redactar, tanto el enunciado como las
opciones.
OPCIONES DE RESPUESTA
Las opciones son posibles respuestas a la problemtica planteada en el enunciado. En el
formato de seleccin mltiple con nica respuesta, como su nombre lo indica, slo una de
estas opciones es verdaderamente pertinente y completa para solucionar el problema
tarea de evaluacin-; las dems opciones, aunque pueden ser vistas como respuestas
plausibles por los evaluados que no dominan la tarea de evaluacin, no responden en
forma completa o pertinente a la problemtica formulada.
59
Documento de trabajo DEC-CONEAU Prohibida su reproduccin
Un buen tem, por lo general, ha experimentado toda una metamorfosis desde su versin
original. Durante la fase de elaboracin de los tems, realice sesiones de socializacin o
anlisis conjunto de los tems elaborados por cada miembro del equipo, con el fin de
que cada uno tenga oportunidad de hacer aportes a la cualificacin de todos los tems
(tanto en lo que refiere a la forma como al contenido).
Evite usar eufemismos y prefiera un lenguaje directo, sin sacrificar el nivel tcnico y
acadmico del proceso. La claridad y concrecin en el lenguaje debe ser una
consideracin permanente; utilice dibujos, grficos o tablas slo si estos en realidad
aportan a la comprensin de la tarea de evaluacin; tenga en cuenta el tiempo que el
evaluado debe emplear para leer instrucciones, contextos, enunciados y opciones, y el
tiempo total del cual dispone para responder.
Asegrese de que en ninguna parte del instrumento (portada, textos, instrucciones,
tems, etc.) haya errores de ortografa, de gramtica o de puntuacin, que no se incluya
incorrectamente abreviaciones, citas, nombres, cifras, fechas, etc.
60
Documento de trabajo DEC-CONEAU Prohibida su reproduccin
Si plantea el enunciado en forma de proposicin incompleta asegrese de usar
conjugaciones verbales, gnero y nmero adecuados para las opciones de respuesta
que plantear. Si lo escribe en forma de pregunta asegrese de usar adecuadamente
signos de interrogacin y la estructura gramatical de una pregunta.
Presente en el enunciado la tarea de evaluacin.
Escriba con claridad.
Evite texto excesivo.
Redacte el enunciado en forma positiva; es decir, evite negaciones.
61
Documento de trabajo DEC-CONEAU Prohibida su reproduccin
PERFIL DEL ITEM
Cada tem debe analizarse particularmente a los efectos de determinar sus caractersticas
y facilitar su ubicacin en una base de datos.
Una posibilidad es realizar el siguiente cuadro (perfil del tem) adaptado del Programa
de Evaluacin de Aprendizajes de ANEP, ao 2002.
FICHA DE TEM
1. NORMA DE COMPETENCIA
2. ELEMENTOS DE COMPETENCIA
3. NIVEL DE
CONOCIMIENTO Reproductivo Comprensin Aplicacin
5. ITEM:
5.1. Enunciado del tem:
a.
b.
c.
d.
5.3 Respuesta
62
Documento de trabajo DEC-CONEAU Prohibida su reproduccin
8.5 Referencia Bibliogrfica
Ttulo
Apellidos y Nombres del
Autor
Pginas de referencia
Telfono
Correo electrnico
10. COORDINADOR
ASESOR
Apellidos y Nombres
Telfono
Correo electrnico
Firma
63
Documento de trabajo DEC-CONEAU Prohibida su reproduccin
ANEXO 4
2 A continuacin indique que tan bien considera usted que el tem o reactivo sea parte
del, indicador, del criterio de desempeo y de la unidad de competencia que se
aborda.(analice la matriz ).
3 Juzgue cada tem o reactivo de manera individual comparando el contenido del tem
con el contenido de la dimensin de estudio.
64
Documento de trabajo DEC-CONEAU Prohibida su reproduccin
EJEMPLO: TECNLOGO MDICO TERAPIA FISICA
ENTIDAD CERTIFICADORA
NOMBRES Y APELLIDOS
DE EVALUADOR (A):
LUGAR DE EVALUACIN
FECHA DE EVALUACIN
II. INTRODUCCIN
65
Documento de trabajo DEC-CONEAU Prohibida su reproduccin
Usted encontrar la tabla de aplicacin o cuerpo del instrumento que contiene los reactivos a aplicar, su
numeracin o cdigo, un espacio de registro de cumplimiento (SI/NO) y otro para el registro de observaciones
que como evaluador considere conveniente realizar.
Marque SI, cuando el candidato cumpla con el desempeo o muestre las evidencias correspondientes y NO
cuando no cumpla con los aspectos sealados.
IV. TABLA DE APLICACIN O CUERPO DEL INSTRUMENTO DE EVALUACIN
Si todos los reactivos son afirmativos el resultado es que cumple lo solicitado por la norma de competencia y
si hay algn reactivo con respuesta negativa el resultado es que No Cumple. No puede haber tem sin marcar.
VII. RESULTADO DE LA EVALUACIN
CUMPLE NO CUMPLE
.. .
FIRMA DEL EVALUADOR FIRMA DEL EVALUADO
66
Documento de trabajo DEC-CONEAU Prohibida su reproduccin
TABLA DE RESULTADOS OBTENIDOS
Experto 1 Total V Aiken:
Experto 2
Experto 3
Experto 4
Experto 5
Experto 6
S/ (n (c-1))
TEM
(S) Validez
sumatoria de
acuerdos
1
7
N=7
Coeficiente V de Aiken
Donde:
S: sumatoria de las respuestas o acuerdos de los expertos por cada tem
n: nmero de expertos
N: Nmero de tem
c: nmero de valores en la escala de valoracin ( 2 si se trata de acuerdo y
desacuerdo) ( 4 si se trata de escala: 0,1,2,3)
Observaciones y /o recomendaciones
Conclusiones finales
67
Documento de trabajo DEC-CONEAU Prohibida su reproduccin
EJEMPLO: TECNLOGO MDICO DE TERAPIA FISICA
68
Documento de trabajo DEC-CONEAU Prohibida su reproduccin
69
Documento de trabajo DEC-CONEAU Prohibida su reproduccin