Cognition">
03 Guia Elaboracion Instrumentos Evaluacion
03 Guia Elaboracion Instrumentos Evaluacion
03 Guia Elaboracion Instrumentos Evaluacion
DOCUMENTO DE TRABAJO)
ELABORACIÓN Y VALIDACIÓN
DE INSTRUMENTOS DE
EVALUACIÓN DE
COMPETENCIAS
PROFESIONALES
2012
1
Documento de trabajo DEC-CONEAU – Prohibida su reproducción
El presente documento es la síntesis de los aspectos importantes que
comprende el documento de trabajo titulado elaboración y validación de
instrumentos de evaluación de competencias profesionales, elaborado por la
DEC-CONEAU en el 2012 con la finalidad de servir de soporte de aprendizaje a
los que se forman como evaluadores de competencias profesionales.
2
Documento de trabajo DEC-CONEAU – Prohibida su reproducción
SISTEMA NACIONAL DE EVALUACIÓN, ACREDITACIÓN Y CERTIFICACIÓN DE
LA CALIDAD EDUCATIVA - S.I.N.E.A.C.E
Consejo Superior:
Directorio:
Lima-Perú
3
Documento de trabajo DEC-CONEAU – Prohibida su reproducción
INTRODUCCIÓN
La Certificación profesional en el Perú es una realidad aún incipiente y débil. Tres años
de trabajo conjunto, CONEAU-Colegios Profesionales, es poco tiempo para los logros
alcanzados a la fecha. Sin embargo, ello no nos desvía del convencimiento de que hay
muchos aspectos a mejorar.
4
Documento de trabajo DEC-CONEAU – Prohibida su reproducción
ÍNDICE
5. VALIDEZ DE UN INSTRUMENTO.
5.2 Confiabilidad
5.2.1 Confiabilidad de un instrumento
5.2.2 Enfoques y métodos en el cálculo de la fiabilidad
ANEXOS
5
Documento de trabajo DEC-CONEAU – Prohibida su reproducción
3. METODOLOGÍA PARA LA ELABORACIÓN DE INSTRUMENTOS DE
EVALUACIÓN DE COMPETENCIAS PROFESIONALES
6
Documento de trabajo DEC-CONEAU – Prohibida su reproducción
indicadores. Es bueno también revisar el rango que debe ser cubierto o estar
relacionado con los criterios y conocimientos. En la construcción de los
indicadores de conocimientos se debe considerar los niveles de complejidad
del pensamiento: baja, media y alta, utilizando para ello una taxonomía en
coherencia al criterio requerido en la norma y la experticia del profesional. Los
niveles de complejidad de los indicadores formulados determinaran los pesos
para colocar el puntaje de las preguntas.
Para formular los indicadores de desempeño se analiza el criterio
correspondiente y se redacta en acción de desempeño observable, ejemplo:
Orienta al postulante sobre la evaluación según evidencia a recoger y pautas
establecidas.
Los indicadores de producto se formulan analizando cada criterio, según lo
que indica el criterio, ejemplo: registro de instrumento de desempeño.
7) Establecer las técnicas y los instrumentos en la parte final de las columnas que
corresponde a los indicadores según evidencias. Ejemplo: para recoger
evidencias de conocimiento la técnica es formulación de preguntas y el
instrumente el cuestionario. Para el recojo de evidencias de desempeño la
técnica de evaluación es observación y su instrumento la lista de chequeo de
desempeño, la técnica para el recojo de evidencias de producto es la
valoración de producto y su instrumento la lista de chequeo de producto.
3 RANGO
CONOCIMIENTOS Y COMPRENSIÓN
4 ESENCIALES
FORMULACIÓN DE INDICADORES DE
5 EVALUACION SEGÚN EVIDENCIAS DE
DESEMPEÑO CONOCIMIENTO Y PRODUCTO
7
Documento de trabajo DEC-CONEAU – Prohibida su reproducción
MATRIZ DE CONSISTENCIA PARA LA ELABORACIÓN DE INSTRUMENTOS DE EVALUACIÓN DE
COMPETENCIAS PROFESIONALES
ELEMEN CRITERIOS DE RANGO CONOCIMIENTOS INDICADORES DE EVALUACIÓN SEGÙN EVIDENCIAS
NORMA DE TOS DESEMPEÑO Y COMPRENSIÓN
COMPETENCIA ESENCIALES
CONOCIMIENTO DESEMPEÑO PRODUCT
O
a) El postulante 1. Identifica las normas de competencia a evaluar, 1.Orienta al
es orientado 1. Normas de según priorización de la Entidad certificadora. postulante
sobre la competencias en 2. Identifica la comunicación asertiva como habilidad sobre la
evaluación, según que se evaluará al social del evaluador. evaluación
tipos de postulante 3. Diferencia las técnicas de evaluación de según
evidencias a priorizadas por la competencias según guía de participantes del evidencia a
recoger y pautas entidad curso de evaluadores recoger y
establecidas. certificadora. (a, b, 4. Identifica los tipos, características y condiciones de pautas
c, d) instrumentos de evaluación de competencias a establecidas
aplicar según guía de evaluación CONEAU.
2.Habilidades 5. Analiza los tipos de evidencias para la evaluación
sociales del de competencias según directrices de
1. evaluador de normalización CONEAU.
Recoger competencias (Guía 6. Analiza la actuación ética del evaluador en un
evidenci del participante del caso.
as de las Técnicas de curso de 7. Identifica los procedimientos para la aplicación de
compete evaluación: evaluadores) (a) los instrumentos de evaluación de competencias.
ncias del b) Los Observación 1. Identifica las evidencias de conocimiento de 2. Aplica Registros
postulan instrumentos de en ambiente 3.Técnicas de las normas de competencia a evaluar. instrumentos de
te según evaluación de real evaluación de 2. Describe el procedimiento del uso de de instrument
pautas conocimiento se Simulación competencias instrumentos de recojo de evidencias de conocimiento os de
estableci aplican de Valoración de según Guía de conocimiento, según técnica. según conocimien
das por acuerdo a las productos evaluación 3. Identifica evidencias de conocimiento para evidencia a to
Ejecutar la la evidencias a Formulación CONEAU ( a, b, c, la evaluación de competencias recoger y aplicados
evaluación de las entidad recoger y pautas de preguntas d) 4. Analiza la actuación ética del evaluador en pautas
competencias de certifica establecidas. casos de aplicación de instrumentos de evaluación establecidas.
los postulantes, dora y Tipos de 4.Tipos de de conocimiento.
según las normas y CONEA evidencias: evidencias para la 5. Analiza un caso de aplicación de un
procedimientos U. Conocimiento evaluación de cuestionario.
establecidos por la Desempeño competencias 6. Analiza un caso de registro de evidencias de
entidad Producto según Guía de conocimiento.
8
Documento de trabajo DEC-CONEAU – Prohibida su reproducción
certificadora. c) Los evaluación 1. Analiza las evidencias de desempeño de las 3. Aplica Registro de
instrumentos de Tipos de CONEAU (a, b, c, normas de competencia a evaluar en un caso instrumentos instrument
evaluación de instrumentos d) 2. Relaciona el instrumento de evaluación de de desempeño o de
desempeño se : desempeño con a técnica correspondiente a la según desempeñ
aplican de Cuestionario 5.Pautas éticas de evidencia a recoger evidencia a o
acuerdo a las Lista de la evaluación de 3. Describe las características, condiciones y recoger
evidencias a chequeo competencias procedimientos del uso del instrumento de
recoger y pautas según código de evaluación de desempeño.
establecidas. ética del evaluador 4. Analiza la actuación ética del evaluador en casos
CONEAU(a, b, c, d de aplicación de instrumentos de evaluación de
y e) desempeño.
5. Analiza la aplicación de una lista de verificación de
6. Procedimientos desempeño en un caso.
para la aplicación 6. Describe el procedimiento para el registro de
de los instrumentos evidencias.
d) Los de evaluación de 1. Identifica las evidencias de producto de las 4. Aplica Registro de
instrumentos de competencias normas de competencia a evaluar. instrumentos instrument
evaluación de según Guía de 2. Relaciona el instrumento de evaluación de de producto o de
producto se evaluación de producto con la técnica correspondiente a la según producto
aplican de CONEAU (a, b, c, evidencia a recoger evidencia a
acuerdo a las d). 3. Describe las características, condiciones y recoger
evidencias a procedimientos del uso del instrumento de
recoger y pautas 7. Procedimiento evaluación de producto.
establecidas. para el registro de 4. Analiza la actuación ética del evaluador en
evidencias según casos de aplicación de instrumentos de evaluación
Guía de evaluación de producto.
CONEAU (b, c, d, 5. Describe los procedimientos para la
e). aplicación del instrumento de evaluación de
producto.
8. Pautas para la 6. Describe el procedimiento para el registro de
determinación del evidencias de producto
e) La logro de las 1. Reconoce los principios éticos en la 5. Registra el Registro de
determinación del competencias determinación del logro de las competencias y su logro de la logro de
logro de la según Guía de registro. competencia competenci
competencia es evaluación 2. Analiza los procedimientos para la en los a
registrada en los CONEAU (e). determinación del logro de las competencias. formatos
formatos 3. Describe el procedimiento para el registro del logro establecidos
establecidos de las competencias.
según pautas
establecidas.
9
Documento de trabajo DEC-CONEAU – Prohibida su reproducción
a) Los Actores 1.Organización del 1. Reconoce la organización del expediente del 1.Revisa y Registro de
2. expedientes Involucrados expediente del evaluado para el informe final de la evaluación. organiza verificación
Comunic de los .Postulante evaluado para el 2. Analiza la ética del evaluador en relación a la expedientes y
ar a los postulantes evaluado informe final de la revisión y organización de los expedientes de los de evaluados expediente
actores evaluados son .Responsables evaluación (en postulantes evaluados. según pautas s
involucra revisados y de Guía de EC organizado
dos los organizados evaluación/ge Procedimientos s
resultado de acuerdo a stión para la
s de la pautas de la - Evaluación de
evaluació entidad Resultado de Competencias
n, según certificadora. la evaluación con fines de
normas b) La -Demostró la certificación 1. Diferencia la comunicación individual, empática, 2. Comunica
estableci comunicación Competencia profesional- asertiva, y respetuosa de los resultados de la al postulante
das de los - no demostró CONEAU) (a) evaluación. los resultados
resultados de la 2. Pautas para la 2. Analiza las formas de comunicación de los de la
la evaluación competencia comunicación de resultados en un caso. evaluación de
es realizada los resultados a manera
de manera los postulantes empática,
individual, evaluados (en asertiva,
empática, Guía de respetuosa
asertiva y evaluación siguiendo
respetuosa CONEAU)(b). pautas
con el 3. Pautas de establecidas.
postulante elaboración del
según pautas informe (en Guía
establecidas. Procedimientos
c) La redacción para la 1. Reconoce las recomendaciones para la 3.Redacta el Informe
del informe Evaluación de elaboración del informe final de resultados de la informe final a final
final a la EC Competencias evaluación. la EC con consolidad
es realizada con fines de participación o de
con la certificación del equipo resultados
participación profesional- evaluador de
del equipo CONEAU) (c, d, evaluación
evaluador. e). de
4. Pautas para la competenci
entrega del as
informe (en Guía
d) El informe de Procedimientos 1. Identifica las partes del informe final de la 4. Redacta el
la evaluación para la evaluación. informe final
de evaluación de 3. Analiza las pautas éticas del evaluador de cumpliendo
10
Documento de trabajo DEC-CONEAU – Prohibida su reproducción
competencias competencias – competencia en la redacción del informe. recomendacio
es redactado CONEAU) (e) nes
cumpliendo 6. Pautas de establecida
las manejo de por la EC
recomendacio contingencias en
nes la evaluación y
establecidas elaboración del
por la entidad informe de la EC.
certificadora. (e)
7. Pautas de ética
e) La del evaluador de 1. Analiza las pautas para la presentación del 5. Realiza la
presentación del competencias. informe final de la evaluación de competencias en
presentación
informe se realiza (a, e, d) un caso. del informe
considerando su 8. Contingencias en 2. Identifica los principios éticos en la presentación
considerando
integridad, la elaboración del informe final de la evaluación su integridad,
seguridad y del informe seguridad y
confidencialidad según EC(f) confidencialida
de acuerdo a lo d de acuerdo
establecido por la a lo
EC. establecido
por la EC.
f) Las 1. Reconoce pautas para el manejo de contingencias 6. Maneja
contingencias en la elaboración del informe a la EC. contingencias
durante la 2. Analiza las pautas éticas del evaluador de durante la
elaboración del competencias en el manejo de contingencias en la elaboración
informe son elaboración del informe a la EC. del informe de
manejadas de acuerdo a
acuerdo a pautas pautas
establecidas por establecidas
la EC. por la EC.
TECNICAS E INSTRUMENTOS SEGÙN EVIDENCIAS
Formulación de Observación-Lista Análisis de producto-Lista de chequeo de
peguntas- de chequeo de producto
Cuestionario desempeño
11
Documento de trabajo DEC-CONEAU – Prohibida su reproducción
3.2. CRITERIOS DE DESEMPEÑO
La evaluación por competencias se basa en criterios que son juicios técnicos y éticos
que orientan el desempeño profesional.
Los criterios de desempeño son la base para poder evaluar si un profesional alcanza
el resultado esperado del desempeño establecido en el elemento de competencia,
expresan lo que se espera del desempeño y el cómo se espera que sea el resultado.
Por lo tanto los criterios describen la calidad de los resultados de los desempeños,
identifican los aspectos esenciales o críticos para el desempeño del elemento de
competencia.
Expresión
Los criterios de desempeño se deben expresar con oraciones en las que se identifique
claramente el:
Enunciado evaluativo.
Estructura gramatical
EJEMPLOS DE CRITERIOS
12
Documento de trabajo DEC-CONEAU – Prohibida su reproducción
3.3 INDICADORES DE EVALUACIÓN
3.3.1 Definiciones
Son definidos como medidas objetivas de los sucesos del proceso que a su vez
permiten evaluar si se está cumpliendo o no, o en qué medida, los criterios de
evaluación que se han elaborado.
3.3.2 Ventajas
Los indicadores de evaluación describen las habilidades, conocimientos, y
actitudes, destrezas que se desean evaluar. Hacen observable a los criterios del
elemento de competencia permitiendo valorar el desempeño del profesional con
objetividad al recoger las evidencias.
Deben ser comprensibles para que puedan ser interpretados por todos los
involucrados en el proceso.
Ejemplo:
3.3.5. Recomendaciones
Los criterios de evaluación son confundidos con los Indicadores y por lo tanto
tiene mala aplicación. Al elaborarlos se tendrá en cuenta que los criterios
representen lo sustantivo de los propósitos del elemento de competencia, y que
las medidas de los Indicadores permitan evaluar si se están cumpliendo esos
criterios de desempeño.
Para establecer los indicadores de conocimiento es necesario considerar los
niveles de complejidad del pensamiento: bajo, medio y alto, de esa forma los
reactivos o preguntas medirán todos los niveles según taxonomía.
14
Documento de trabajo DEC-CONEAU – Prohibida su reproducción
Infiere Extrae conclusión/es (“ir más allá”) a partir de la
interpretación.
Interpreta Identifica los aspectos fundamentales y comprende el
significado.
Juzga Apoya o rechaza una inferencia, con el respaldo de
argumentos.
Sintetiza Enuncia brevemente lo esencial de un tema,
organizándolo de un modo personal.
Identifica supuestos Descubre por inferencia algo que funciona como
fundamento y cuya verdad no ha sido probada.
Clasifica Distribuye objetos o ideas en clases o conjuntos,
según un criterio de clasificación.
CRITERIOS INDICADORES
a) El postulante es orientado 1. Identifica las normas de competencia a evaluar, según
sobre la evaluación, según priorización de la Entidad certificadora.
tipos de evidencias a recoger 2. Identifica la comunicación asertiva como habilidad social
y pautas establecidas. del evaluador.
3. Diferencia las técnicas de evaluación de competencias
según guía de participantes del curso de evaluadores
4. Identifica los tipos, características y condiciones de
instrumentos de evaluación de competencias a aplicar
según guía de evaluación CONEAU.
5. Analiza los tipos de evidencias para la evaluación de
competencias según directrices de normalización
CONEAU.
6. Analiza la actuación ética del evaluador en un caso.
El reactivo debe ser cuidadosamente construido, como base para conocer el logro de
la competencia.
Tipos de reactivos:
3.5.1 Definiciones:
“Las evidencias son pruebas claras y objetivas, elementos tangibles que permiten
demostrar que se ha logrado cubrir de manera satisfactoria un requerimiento o un
criterio específico de desempeño”.3
Evidencia significa demostrar o poner de manifiesto algo. Las evidencias como parte
de los componentes de la competencia, refieren de manera precisa si el evaluado es
capaz de realizar la función referida en la competencia de manera consistente.
3
Directrices para la identificación y normalización de competencias con fines de certificación
profesional. CONEAU-2da versión 2011
16
Documento de trabajo DEC-CONEAU – Prohibida su reproducción
Los tipos de evidencias son:
1. De desempeño
2. De Producto
3. De Conocimiento
Son los conocimientos que fundamentan la práctica; es el saber qué, por qué y
para qué. Son teorías, principios, conceptos e información relevante que una
persona aplica para lograr resultados en su desempeño laboral.
Para ello se debe aplicar técnicas y contar con instrumentos de evaluación elaborados
específicamente, que sean válidos y confiables.
4
Adaptado de Tobón, S. Competencias, calidad y educación superior. Cooperativa Editorial, Magisterio,
Bogotá, Colombia 2006:143.
17
Documento de trabajo DEC-CONEAU – Prohibida su reproducción
Las evidencias de producto, son pruebas o productos específicos que dan cuenta de
las finalidades de la competencia evaluada (resultado inmediato) en los que hay que
considerar sus requerimientos de calidad.i5
Dado que es indispensable recoger de manera eficaz las evidencias se hace necesaria
la selección del instrumento en coherencia a la técnica.
Existen diversas técnicas para evaluar competencias. Las técnicas son herramientas
metodológicas que permiten obtener las evidencias requeridas por la norma de
competencia durante el proceso de evaluación de desempeño de una persona. Es
conveniente definir la técnica que permita recoger el mayor número de evidencias
requeridas en la norma con el fin de reducir costos y hacer más eficiente el proceso de
evaluación. (SENA, Colombia. 20036)
1. Técnica de observación
La observación directa en ambiente real de trabajo es la técnica por excelencia
para recoger evidencias7. A través de esta técnica se obtiene información sobre el
comportamiento o la conducta espontánea del profesional. Esta técnica es
aplicable en cualquier momento de la evaluación continua, aunque su mayor
utilidad está en el recojo de datos para valorar el dominio de procedimientos y el
desarrollo de actitudes durante el trabajo diario (relación consigo mismo, con sus
compañeros de trabajo, comprobar su índice de autoestima, capacidad autocrítica,
autonomía, colaboración, respeto, etc.).8
Para facilitar la observación y reducir las omisiones, sesgos y otros aspectos
subjetivos asociados al observador es imperativo la elaboración y uso de
instrumentos: listas de chequeo.
2. Simulación de Situaciones
La simulación de situaciones (SS) es una técnica a través de la cual se generan
condiciones similares a las reales de un ambiente o escenario laboral profesional,
pero teniendo bajo control diferentes variables complejas, como riesgo,
temperatura, situaciones atípicas que afectan el resultado esperado entre otras.
Se debe usar cuando no es posible la observación directa en el ambiente real de
trabajo, por razones de costos, riesgos, seguridad del paciente y del evaluado,
5
Idem. Tobón 2006
6
Guía para seleccionar técnicas y elaborar instrumentos de evaluación de competencias laborales. SENA-
Colombia, 2003.
7
Idem. SENA, Colombia. 2003
8
Adaptado de Canales, Isaac. …180?
18
Documento de trabajo DEC-CONEAU – Prohibida su reproducción
baja frecuencia de la actividad, procurando una representación auténtica del
desempeño a evaluar.
3. Valoración de productos
Técnica utilizada cuando son observables los productos que genera la función
productiva; el producto refleja evidencias esenciales sobre el desempeño.
Los productos pueden ser registros, formatos, reportes, planes, informes, diseño
de procesos, maquetas, , entre otros, según la profesión.
Siempre la evaluación del producto debe hacerse con el rigor establecido para así
efectivamente determinar la competencia del evaluado.
19
Documento de trabajo DEC-CONEAU – Prohibida su reproducción
Identificando en la matriz de consistencia para la elaboración de instrumentos de
evaluación, la técnica de evaluación y el tipo de instrumento según la evidencia a
recoger.
Procedimiento de elaboración
20
Documento de trabajo DEC-CONEAU – Prohibida su reproducción
LISTA DE CHEQUEO DEL DESEMPEÑO
I. INFORMACIÓN GENERAL PARA EL PROCESO DE EVALUACIÓN
FECHA DE
DÍA: MES: AÑO:
INSCRIPCIÓN
ENTIDAD
CONEAU
CERTIFICADORA
NOMBRES Y APELLIDOS
DE EVALUADOR (A):
LUGAR DE EVALUACIÓN
FECHA DE EVALUACIÓN
II. INTRODUCCIÓN
Usted encontrará la tabla de aplicación o cuerpo del instrumento que contiene los reactivos a aplicar, su
numeración o código, un espacio de registro de cumplimiento (SI/NO) y otro para el registro de
observaciones que como evaluador considere conveniente realizar.
Marque SI, cuando el candidato cumpla con el desempeño o muestre las evidencias correspondientes y
NO cuando no cumpla con los aspectos señalados.
21
Documento de trabajo DEC-CONEAU – Prohibida su reproducción
IV. TABLA DE APLICACIÓN O CUERPO DEL INSTRUMENTO DE EVALUACIÓN
Si todos los reactivos son afirmativos el resultado es que cumple lo solicitado por la norma de
competencia y si hay algún reactivo con respuesta negativa el resultado es que No Cumple. No puede
haber ítem sin marcar.
VII. RESULTADO DE LA EVALUACIÒN
CUMPLE NO CUMPLE
22
Documento de trabajo DEC-CONEAU – Prohibida su reproducción
LISTA DE CHEQUEO DEL PRODUCTO
FECHA DE EVALUACIÓN
II. INTRODUCCIÓN
Este documento presenta el instrumento de evaluación de los productos correspondientes del elemento de
competencia 3.1. “Aplicar instrumentos de evaluación para recopilar las evidencias de las competencias del
postulante, según las normas de competencia a evaluar y los procedimientos establecidos por la entidad
certificadora”, perteneciente a la Norma de Competencia de Ejecutar la evaluación de las competencias de los
postulantes, según las normas y procedimientos establecidos por la entidad certificadora, que una persona debe
demostrar para ser considerada competente.
El presente instrumento de evaluación de producto está diseñado para evaluar la competencia profesional de las
personas que se desempeñan como EVALUADORES DE COMPETENCIAS PROFESIONALES y contiene las
instrucciones que debe seguir para su aplicación.
Posteriormente se presentan las instrucciones de calificación del instrumento de evaluación, así como para la
emisión del resultado de la evaluación.
El instrumento contiene seis (8) reactivos.
III. INSTRUCCIONES DE APLICACIÓN DEL INSTRUMENTO DE EVALUACIÓN
Usted encontrará la tabla de aplicación o cuerpo del instrumento que contiene los reactivos a evaluar, su
numeración o código, un espacio de registro de cumplimiento (SI/NO) y otro para el registro de observaciones que
como evaluador considere conveniente realizar.
Marque SI, cuando el producto cumpla con el criterio o ítem (reactivo) correspondiente y NO cuando no cumpla con
los aspectos señalados.
23
Documento de trabajo DEC-CONEAU – Prohibida su reproducción
IV. TABLA DE APLICACIÓN O CUERPO DEL INSTRUMENTO DE EVALUACIÓN
3. Todos los ítems de la tabla de aplicación están marcados según el contenido del
portafolio de aplicación del instrumento.
4. El resultado de la evaluación es coherente con las instrucciones del mismo para la
emisión del resultado.
5. La sumatoria de los puntajes por rubros y el puntaje total son correctos .
VIII. RETROALIMENTACIÓN AL CANDIDATO – IDENTIFICACIÓN DE ASPECTOS PARA MEJORA (Anote el número del
reactivo que debe mejorar)
24
Documento de trabajo DEC-CONEAU – Prohibida su reproducción
4.1.4. INSTRUMENTO DE EVALUACIÓN DE CONOCIMIENTOS. CUESTIONARIO
A) PRUEBAS DE DESARROLLO
Son aquellas en las que se solicita, a través de preguntas, el desarrollo por
escrito de un discurso que evidencie el desarrollo de determinadas
capacidades. Pueden ser de respuesta libre u orientada.
1.- El diseño
Es la planeación del instrumento.
a. Perfil de referencia:
Es el fundamento de la prueba y objeto de medida de la prueba relacionado a la
competencia a evaluar expresado en indicadores que responden a los criterios de la
competencia.
b. Tabla de Especificaciones
Presenta la organización lógica de los componentes definidos operacionalmente
Establece el nivel y tipo cognoscitivo con que deberán ser medidos en la prueba
(descrito en los indicadores).
2.-Elaboración
Es la construcción de la prueba o cuestionario con base en el diseño y en la tabla de
especificaciones de la matriz de consistencia.
Se debe partir de los indicadores descritos en la matriz de consistencia de la norma a
evaluar.
Se parte de la evaluación de la capacidad (reconocer, describir, comparar, seleccionar,
analizar, sintetizar, evaluar, aplicar, etc) a los diferentes niveles de dominio (bajo,
medio, alto)por medio de reactivos de opción múltiple, o de puntuaciones asignadas a
tipo de respuesta en relación con los criterios. Ver anexo 2 cuadros de capacidades y
procesos cognitivos.
26
Documento de trabajo DEC-CONEAU – Prohibida su reproducción
Debe abarcar todos los aspectos contemplados en la descripción de la norma de
competencia, el perfil de referencia y la tabla de especificaciones.
Los instrumentos de conocimientos, puede estar formado por:
Preguntas de opción múltiple: completamiento, apareamiento, solución
problemas, jerarquización, identificación de graficas o diagramas y cuestionario
directo.
Preguntas abiertas
Situaciones prácticas, etc.
3.- Piloteo
Monitorear la confiabilidad y validez de los exámenes.
Vigilar el nivel de dificultad y la capacidad de discriminación de los ítems.
Generar bancos de reactivos o items suficientemente amplios.
Realizar pilotajes de los exámenes.
4.- Validación
Consiste en analizar la construcción de los reactivos que realmente
representen al criterio a evaluar y analizar los resultados de aplicaciones
preliminares de la prueba para confirmar estadísticamente su validez y su
confiabilidad así como establecer las condiciones definitivas para el manejo y
administración del instrumento con los usuarios.
5.-Calificación
Es el mecanismo de ponderación y valoración de los resultados obtenidos
Utilizar un criterio de calificación y explicarlo.
En el caso de prueba objetiva: Analizar la dificultad de reactivos, considerando
para la calificación los que se encuentren en el rango de aceptables, mejorar
los reactivos que no estén en ese rango. Analizar la discriminación de estos, en
caso de que no discriminen, revisar redacción del reactivo y los distractores
para plantearlo de manera diferente.
Establecer con base a lo anterior los puntos de corte.
En el caso de la evaluación del desempeño, establecer el puntaje aprobatorio.
27
Documento de trabajo DEC-CONEAU – Prohibida su reproducción
Para la elaboración de este tipo de pruebas y potenciar sus beneficios podemos seguir
las Evitar
siguientes recomendaciones:
aseveraciones muy generales.
Evitar aseveraciones negativas
Evitar oraciones demasiado largas y complejas.
Evitar incluir dos ideas en una aseveración, a menos que se trate de apreciar una
relación de causa a efecto.
Si en la aseveración se incluye una opinión, debe indicarse a quién corresponde
Calcular que las aseveraciones ciertas y las expresiones falsas tengan más o
menos la misma longitud
Ejemplo:
En relación a los procedimientos generales para la aplicación de los instrumentos de
evaluación, según la guía de evaluación CONEAU, identifique las afirmaciones
verdaderas y las falsas y marque la respuesta correcta.
a. V F F V b. V V V F c. V F V V d. V V F V
DE CORRESPONDENCIA
Este tipo de reactivos exigen al evaluado establecer relaciones entre dos columnas
paralelas, de tal manera que cada palabra, número o símbolo de una de ellas
corresponda con una palabra, oración o frase de la otra columna.
Ejemplo: Relacione las técnicas de evaluación con sus respectivos enunciados.
a. A B C D b. D B A C c. C A D B d. B C D A
28
Documento de trabajo DEC-CONEAU – Prohibida su reproducción
DE SELECCIÓN MÚLTIPLE
Para elaborar pruebas o preguntas de selección múltiple debemos tomar en cuenta las
siguientes recomendaciones:
29
Documento de trabajo DEC-CONEAU – Prohibida su reproducción
Cuidar que el problema o aseveración que se exponga se encuentre claramente
definido e incluya sólo la información necesaria para que su lectura sea ágil.
Expresar la aseveración en forma negativa sólo cuando sea absolutamente
necesario.
Formular las posibles respuestas cuidando que éstas guarden congruencia
gramatical con la aseveración (si la aseveración termina en “...es la:_______" no
pueden ponerse artículos masculinos entre las respuestas).
Cuidar que todas las respuestas sean de posible aceptación aunque una sola sea
correcta.
Plantear la aseveración de modo que ésta no sugiera la respuesta.
La respuesta correcta de un reactivo debe colocarse en una ubicación diferente
DE ORDENAMIENTO
30
Documento de trabajo DEC-CONEAU – Prohibida su reproducción
competencias del postulante aplicando los instrumentos de evaluación de la entidad
certificadora”
Cantidad
Conocimientos Número
ELEMENTO DE PESO de
y comprensión CRITERIOS Indicador de
COMPETENCIA (%) preguntas
pregunta
esenciales /
31
Documento de trabajo DEC-CONEAU – Prohibida su reproducción
7. Procedimientos 6. Analiza un caso de registro
para la aplicación de de evidencias de conocimiento 4 1 13
los instrumentos de 1.-Analiza las evidencias de
evaluación de desempeño de las normas de 4
competencias (a, b, competencia a evaluar en un 1 14
c, d). caso.
2. Relaciona el instrumento de
evaluación de desempeño con 4
a técnica correspondiente a la 1 15
8. Procedimiento evidencia a recoger
C) Los
para el registro de 3Describe las características,
instrumentos de 4
evidencias (b, c, d, condiciones y procedimientos
evaluación de 1 16
e). del uso del instrumento de
desempeño se
evaluación de desempeño.
aplican de 4. Analiza la actuación ética
acuerdo a las del evaluador en casos de 4
evidencias a aplicación de instrumentos de 1 17
9. Pautas para la
recoger. evaluación de desempeño.
determinación del
logro de la 5. Analiza un caso de
aplicación de una lista de 4
competencia (e). 1 18
verificación de desempeño.
4
6. Describe el procedimiento
para el registro de evidencias 1 19
32
Documento de trabajo DEC-CONEAU – Prohibida su reproducción
d) Asignación de los puntajes de la prueba. Los puntajes de la prueba deben estar
de acuerdo con los criterios a evaluar y éstos se derivan de los elementos de la
competencia.
e) Asignación de pesos a los reactivos o ítems. El puntaje total del criterio sirve de
parámetro para asignar pesos a los reactivos o ítems de la prueba en función de las
capacidades y conocimientos a evaluar. En el ejemplo, los reactivos de menor peso
(2,5) corresponden al criterio A “El postulante es orientado sobre la evaluación, según
tipos de evidencias a recoger” proceso básico de describir o explicar.
Las capacidades que se pretenden medir deben estar identificadas en forma clara y
precisa. En este caso, se ha considerado la Taxonomía propuesta por L.D´Hainaut
(reproducción, conceptualización, aplicación, exploración, movilización y resolución de
problemas), de esta taxonomía para el ejemplo sólo se ha considerado a tres
capacidades.
33
Documento de trabajo DEC-CONEAU – Prohibida su reproducción
Tabla de estructura de la prueba
Por ejemplo, uno de los instrumentos que utilizaremos para medir competencias
profesionales es una prueba de conocimientos (cuestionario) donde elaboraremos
preferentemente reactivos de opción múltiple.
34
Documento de trabajo DEC-CONEAU – Prohibida su reproducción
Tabla de criterios, indicadores y reactivos del elemento de Competencia
“Recoger evidencias de las competencias del postulante aplicando los
instrumentos de evaluación de la entidad certificadora”
35
Documento de trabajo DEC-CONEAU – Prohibida su reproducción
6. Analiza la actuación f) Falta elaborar i. El equipo evaluador debe
ética del evaluador estar conformado por un
en un caso. mínimo de dos evaluadores.
( )
7. Identifica los g)En relación a los ii. II.-Todos los instrumen- tos
procedimientos procedimientos generales deben ser firmados por el
para la aplicación para la aplicación de los postulante y al menos uno
de los instrumentos de evaluación, de los evaluadores. ( )
instrumentos de según la guía de evaluación iii. III-La firma del postulante en
evaluación de CONEAU, identifique las el instrumento de evaluación
competencias. afirmaciones verdaderas y las es requisito para la
falsas y marque la respuesta apelación a que hubiere
correcta. lugar. ( )
iv. IV.Antes de comunicar los
resultados interme-dios y el
resultado final de la
evaluación, el equipo
evaluador debe realizar una
verificación de todo lo
actuado. ( )
a. VFFV b. VVVF c.
VFVV d. VVFV
36
Documento de trabajo DEC-CONEAU – Prohibida su reproducción
EJEMPLO DE CUESTIONARIO
NOMBRES Y APELLIDOS DE
EVALUADOR (A):
LUGAR DE EVALUACIÓN
FECHA DE EVALUACIÓN
ELEMENTOS DE
COMPETENCIA
II. INTRODUCCIÓN
Este documento presenta el instrumento de evaluación de los productos correspondientes del elemento de
competencia 3.1……………, perteneciente a la Norma de Competencia de……………………….. , que una persona
debe demostrar para ser considerada competente.
El presente instrumento de evaluación está diseñado para evaluar la competencia profesional de las personas que
se desempeñan como ……………………………y contiene las instrucciones que debe seguir para su aplicación.
Posteriormente se presentan las instrucciones de calificación del instrumento de evaluación, así como para la
emisión del resultado de la evaluación.
1 En la evaluación del dolor abdominal uno de los siguientes aspectos es menos relevante:
a) Tiempo de inicio
b) Ubicación y características
c) Tiempo de duración
d) Mejora con analgésico
2.
3.
ETC.
CUMPLE NO CUMPLE
HOJA DE RESPUESTAS
38
Documento de trabajo DEC-CONEAU – Prohibida su reproducción
FECHA DE MES:
DÍA: 30 AÑO:
INSCRIPCIÓN MAYO
ENTIDAD
COLEGIO …
CERTIFICADORA
NOMBRES Y APELLIDOS
XXXXXX
DE EVALUADOR (A):
ELEMENTOS DE
COMPETENCIA
RESPUESTAS
A B C D A B C D A B C D
1 X 11 X 21
2 X 12 X 22
3 X 13 X 23
39
Documento de trabajo DEC-CONEAU – Prohibida su reproducción
4 X 14 X 24
5 X 15 X 25
6 X 16 X 26
7 X 17 X 27
8 X 18 28
9 X 19 28
10 D C B A 20 30
5. VALIDEZ DE UN INSTRUMENTO
40
Documento de trabajo DEC-CONEAU – Prohibida su reproducción
Algunos autores definen:
¿Hasta qué punto son consistentes las puntuaciones? Responder esta interrogante
implica informar sobre la confiabilidad del instrumento.
¿Qué es lo que mide la prueba? Responder esta interrogante implica informar sobre
la validez del instrumento.
41
Documento de trabajo DEC-CONEAU – Prohibida su reproducción
La validez de contenido establece la relación del instrumento con los criterios de los
elementos de la competencia que pretende medir. Siendo indispensable elaborar la
tabla de especificaciones, elaborar la prueba que se ajusta a la tabla de
especificaciones y determinar si los ítems de una prueba son representativos de los
indicadores del criterio a evaluar. ( capacidad del instrumento).
Nos permite expresar el grado de eficacia con el que se puede predecir o pronosticar
un criterio a partir de las puntuaciones del instrumento.
Se define como el grado en que una prueba mide la construcción teórica elaborada
respecto a los conocimientos o conducta que se mide.
¿El instrumento mide el constructo y sus dimensiones?¿Por qué sí? ¿Por qué
no?
42
Documento de trabajo DEC-CONEAU – Prohibida su reproducción
Evalúa la capacidad del instrumento para recoger lo que se desea medir:
1.- Cuando no sabemos las respuestas que nos van a dar las unidades de estudio hay
una aproximación a la población y las interrogantes deben ser abiertas y con ellas se
procederá a construir una lista de ítems.
3.-La revisión del conocimiento disponible cuando existe la teoría suficiente para
poder construir un instrumento.
Esta validez se refiere a si el cuestionario elaborado, y por tanto si los ítems elegidos,
son evidencias de lo que se pretende medir.
El objetivo de este tipo de estudios es obtener evidencias para determinar si los ítems
del instrumento representan adecuadamente el constructo que se pretende medir. No
olvidemos que los ítems son el estímulo necesario para obtener las muestras de
conducta indicadoras del constructo. Este tipo de estudio examina si los ítems pueden
hacer bien su papel (GONZALES, 2006: 16)
2° A continuación indique que tan bien considera usted que el ítem o reactivo sea
parte del, indicador, del criterio de desempeño y de la unidad de competencia que se
aborda a continuación:
3° Juzgue cada ítem o reactivo de manera individual comparando el contenido del ítem
con el contenido de la dimensión de estudio. (Analice la tabla de especificaciones de la
prueba con la tabla de criterios, indicadores y reactivos)
Cantidad Número
ELEMENTO DE PESO
Conocimiento CRITERIOS Indicador de de
COMPETENCIA (%)
preguntas pregunta
1. 1.Recoger 1.Normas de A) El postulante 1. Identifica las normas de 2.5
evidencias de las competencias en es orientado competencia a evaluar, 1 1
competencias del que se evaluará al sobre la según priorización de la EC.
postulante aplicando postulante. (a, b, c, evaluación, 2.5
2. Identifica la habilidad social
los instrumentos de d) según tipos de
de comunicación: 1 2
evaluación de la evidencias a
asertividad.
entidad certificadora 2.Habilidades recoger.
sociales del 3. Diferencia las técnicas de 4
evaluador de evaluación de
competencias (Guía competencias según guía 1 3
del participante del de participantes del curso
curso de de evaluadores
evaluadores) (a) 4. Identifica los tipos 2.5
características y
3.Técnicas de condiciones de
evaluación de instrumentos de evaluación 1 4
competencias ( a, b, de competencias a aplicar
c, d) según guía de evaluación
CONEAU.
5. Analiza los tipos de 4 1 5
4.Tipos,
evidencias para la
características y
evaluación de
condiciones de
competencias según
44
Documento de trabajo DEC-CONEAU – Prohibida su reproducción
directrices de normalización
CONEAU.
6. Analiza la actuación ética 4
1 6
del evaluador en un caso.
7. Identifica los procedimien- 4
tos para la aplicación de los
1 7
instrumentos de evaluación
de competencias
1. Identifica las evidencias de 2.5
conocimiento de las normas 1 8
de competencia a evaluar.
2. Describe el procedimiento 4
del uso de instrumentos de
recojo de evidencias de 1 9
conocimiento, según
técnica.
B) Los
3. Identifica evidencias de 2.5
instrumentos de
conocimiento para la
evaluación de 1 10
evaluación de
conocimiento se
competencias
aplican de
4. Analiza la actuación ética 4
acuerdo a las
del evaluador en casos de
evidencias a
aplicación de instrumentos 1 11
recoger
de evaluación de
conocimiento.
5.Analiza un caso de 4
instrumentos de aplicación de un 1 12
evaluación de cuestionario.
competencias (a, b, 6. Analiza un caso de registro 4
c, d) de evidencias de 1 13
conocimiento
5.Tipos de 1.-Analiza las evidencias de 4
evidencias para la desempeño de las normas de
1 14
evaluación de competencia a evaluar en un
competencias (a, b, caso.
c, d) 2. Relaciona el instrumento de 4
evaluación de desempeño con
C) Los 1 15
6.Pautas éticas de a técnica correspondiente a la
instrumentos de
la evaluación de evidencia a recoger
evaluación de
competencias (a, b, 3Describe las características, 4
desempeño se
c, d y e) condiciones y procedimientos
aplican de 1 16
del uso del instrumento de
acuerdo a las
7. Procedimientos evaluación de desempeño.
evidencias a
para la aplicación de 4. Analiza la actuación ética 4
recoger.
los instrumentos de del evaluador en casos de
1 17
evaluación de aplicación de instrumentos de
competencias (a, b, evaluación de desempeño.
c, d). 5. Analiza un caso de 4
8. Procedimiento aplicación de una lista de 1 18
para el registro de verificación de desempeño.
evidencias (b, c, d,
6. Describe el procedimiento 4
1 19
para el registro de evidencias
e).
1.Identifica las evidencias de 2.5
1 20
producto de las normas de
D) Los competencia a evaluar.
instrumentos de 2.Relaciona el instrumento de 4
evaluación de evaluación de producto con la 1 21
producto se técnica correspondiente a la
aplican de evidencia a recoger
acuerdo a las 3. Describe las características, 2.5
evidencias a condiciones y procedimientos 1 22
recoger. del uso del instrumento de
evaluación de producto.
4. Analiza la actuación ética 4 1 23
del evaluador en casos de
aplicación de instrumentos de
evaluación de producto.
45
Documento de trabajo DEC-CONEAU – Prohibida su reproducción
5. Describe los procedimientos 4
para la aplicación del 1 24
instrumento de evaluación de
producto.
6.-.Describe el procedimiento 4
1 25
para el registro de evidencias
de producto
1.-Reconoce los principios 2.5
E) La éticos en la determinación del 1 26
determinación logro de las competencias y su
del logro de la registro.
competencia es 2.Analiza los procedimientos 4
1 27
registrada en los para la determinación del logro
formatos de las competencias.
establecidos 3. Describe el procedimiento 4
1 28
para el registro del logro de las
competencias
TOTAL 100 28
46
Documento de trabajo DEC-CONEAU – Prohibida su reproducción
TABLA DE CRITERIOS, INDICADORES Y REACTIVOS
6.-Falta elaborar 0
1
2
7.-En relación a los procedimientos generales 3
para la aplicación de los instrumentos de
evaluación, según la guía de evaluación
CONEAU, identifique las afirmaciones 0
verdaderas y las falsas y marque la respuesta
correcta. 1
I.-El equipo evaluador debe estar conformado
por un mínimo de dos evaluadores. ( )
2
II.-Todos los instrumentos deben ser firmados 3
por el postulante y al menos uno de los
47
Documento de trabajo DEC-CONEAU – Prohibida su reproducción
evaluadores. ( )
III-La firma del postulante en el instrumento de
evaluación es requisito para la apelación a
que hubiere lugar. ( )
IV.Antes de comunicar los resultados
intermedios y el resultado final de la
evaluación, el equipo evaluador debe realizar
una verificación de todo lo actuado. ( )
Total (S)
Experto Experto Experto Experto Experto Experto sumatoria de media
Ítem ESCALA
1 2 3 4 5 6 acuerdos T/6
1 0 2 3 1 2 3 11 1,8 débil
validez
2 3 3 1 2 2 3 14 2.3 validez
aceptable
3
4
5
6
7
total
Con los ítems restantes se obtiene una media general de cada criterio que lo
compone y el resultado se interpreta con la siguiente escala:
Intervalos Escalas
1,6 a 2 Débil validez
2,1 a 2,5 Validez aceptable
2,6 en adelante Validez fuerte
48
Documento de trabajo DEC-CONEAU – Prohibida su reproducción
Tabla de validez de contenido de ítems
Los instrumentos de evaluación deben ser válidos y confiables: Son válidos cuando el
instrumento se refiere realmente a la variable que pretende medir. Son confiables en
la medida que la aplicación repetida del instrumento al mismo sujeto, bajo situaciones
similares, produce iguales resultados (HERNÁNDEZ, 1997).
Donde:
Ítem Experto Experto Experto Experto Experto Experto Total (S) V ESCALA
1 2 3 4 5 6
sumatoria de Aiken:
acuerdos s/ (n (c-1))
1 0 2 3 1 2 3 11 11/6(3) = 0,6 débil validez
2 3 3 1 2 2 3 14 14/6(3) = 0.77 débil validez
aprox 0,8
3 3 3 3 3 3 3 18 18/6(3) = 1 validez fuerte
4 3 2 3 3 3 3 17 17/6(3)= 0,94 validez fuerte
5 3 3 1 2 2 3 14 0,8 Validez débil
6 3 3 1 3 3 3 16 0,88 validez
aceptable
7 3 3 3 3 3 3 18 1 validez fuerte
N=7 Validez
5,99/ 7 = 0,85 aceptable
9
Adaptado de Separata: Programa de maestría en educación. PAME- Callao .(2009)
49
Documento de trabajo DEC-CONEAU – Prohibida su reproducción
Para que el ítem sea aceptado o válido debe alcanzar un coeficiente “V” igual
o superior a 0.81.
BIBLIOGRAFÍA
MORALES, Pedro. ( 2007) “ La fiabilidad de los test y escalas”. Universidad Pontificia Comillas,
Madrid.
SALINAS Dino. 2002. ¡Mañana examen! La evaluación entre la teoría y la realidad. Barcelona
GRAO.
SOSA ESPINOZA, Myriam Janett. Evaluación del aprendizaje. 2009 ICE. USMP. Lima, Perú.
Evaluación de competencias en la educación universitaria. 2011 UCA. UNALM.
50
Documento de trabajo DEC-CONEAU – Prohibida su reproducción
VELA DAMONTE, Jorge. Guía Metodológica de Programación Curricular Modular para la
Educación Superior Tecnológica
Revista del Instituto de Investigación de la Facultad de Ciencias Contables. Vol. 17, N.°
34│Julio - Diciembre 2010│UNMSM│Lima, Perú
ANEXOS
CAPACIDADES CARACTERÍSTICAS
reproducción memoria, discriminación y generalización
conceptualización define, describe, define características,
caracteriza una situación
10
Ver CASAS, Luis. “Evaluación de capacidades y valores en la sociedad del conocimiento”. 2007.
Editorial Norma (fundamentos de la Taxonomía D’ HAINAUT como herramienta útil para evaluación de
capacidades. Pág. 63-71)
51
Documento de trabajo DEC-CONEAU – Prohibida su reproducción
ANEXO 2 CUADRO DE CAPACIDADES Y PROCESOS COGNITIVOS
CAPACID.ESPEC.
PROCESOS COGNITIVOS
CAPACIDAD Q´ TIENEN
DEFINICIÓN FORMA DE EVIDENCIA
ESPECÍFICA PROCESOS COGNITIVOS / PROCESOS
CARACTERÍSTICA DEL PROCESO SIMILARES
MOTORES
Capacidad para ubicar Proceso mediante el cual se lleva la
Recepción de información.
en el tiempo, en el información a las estructuras mentales. El estudiante
espacio o en algún Proceso mediante el cual se encuentra identifica cuando
Caracterización
medio físico características y referencias señala algo, hace
IDENTIFICAR elementos, partes, RECONOCER marcas, subraya,
Proceso mediante el cual se contrasta las
características, resalta expresiones,
Reconocimiento y características reales del objeto de
personajes, hace listas, registra
expresión. reconocimiento con las características
indicaciones u otros lo que observa, etc.
existentes en las estructuras mentales.
aspectos.
Proceso mediante el cual se lleva la El estudiante
Recepción de información
información a las estructuras mentales. discrimina cuando
Capacidad para
Identificación y Proceso mediante el cual se identifica elabora cuadros de
encontrar las
contrastación de características de cada elemento y se doble entrada,
diferencias esenciales
DISCRIMINAR características compara con las características de otros explica diferencias,
entre dos o más
elige algo
elementos, procesos o
Manifestación de las Proceso mediante el cual se manifiesta las sustancial de un
fenómenos.
diferencias diferencias entre uno y otro elemento conjunto de
elementos.
Proceso mediante el cual se lleva la
Recepción de información
información a las estructuras mentales.
Identificación de las El estudiante
Proceso mediante el cual se identifica o compara cuando
características
Capacidad para señala referentes de cada elemento encuentra
cotejar dos o más
individuales elementos comunes
elementos, objetos, Proceso mediante el cual se contrasta las o aspectos distintos
COMPARAR procesos o fenómenos características de dos o más elementos entre los
con la finalidad de fenómenos que
encontrar semejanzas contrastación de observa, hace
o diferencias. características de dos o cuadros
mas objetos de estudio comparativos,
paralelos
52
Documento de trabajo DEC-CONEAU – Prohibida su reproducción
Proceso mediante el cual se busca
Búsqueda y recepción de
información en contextos o fuentes
información El estudiante
diversas.
Proceso mediante el cual se establecen selecciona cuando
Determinación de criterios separa objetos,
Capacidad que permite criterios o especificaciones que servirán de
o especificaciones características,
escoger los elementos referente para la selección.
cuando registra
SELECCIONA de un todo, de acuerdo Identificación y
Proceso mediante el cual se identifica información de su
R con determinados contrastación de criterios
características de elementos y se contrasta interés, cuando
criterios y con un o especificaciones con
con los criterios o especificaciones. hace elecciones,
propósito definido. prototipos
etc.
Elección del modelo Proceso mediante el cual se elige el
elemento.
53
Documento de trabajo DEC-CONEAU – Prohibida su reproducción
Proceso mediante el cual se lleva la El estudiante infiere
Recepción de información
información a las estructuras mentales. cuando hace
Proceso mediante el cual se identifica deducciones,
Identificación de premisas información que se utilizará como base otorga significado a
para la inferencia las expresiones a
Contrastación de las Proceso mediante el cual se contrastan las partir del contexto,
Capacidad para premisas con el contexto. premisas o supuestos con el contexto determina el
obtener información mensaje de
INFERIR. nueva a partir de los DEDUCIR eslóganes, otorga
datos explícitos o de significado a los
otras evidencias. recursos no
Proceso mediante el cual se obtienen verbales y al
Formulación de
deducciones a partir de las premisas o comportamiento de
deducciones
supuestos. las personas,
determina causas o
posibles
consecuencias.
Recepción de información Proceso mediante el cual se lleva la
Capacidad para información a las estructuras mentales.
cuestionar el estado de El estudiante
un fenómeno, la Formulación de criterios Proceso mediante el cual se establecen enjuicia cuando
producción de un criterios que permitan emitir un juicio emite una
acontecimiento, el apreciación
pensamiento de los Contrastación de los Proceso mediante el cual se compara los personal, hace
JUZGAR ENJUICIAR
demás, las formas de criterios con el referente criterios establecidos con el referente, con comentarios, platea
organización, tratando la finalidad de encontrar las virtudes y argumentos a favor
de encontrar sus deficiencias. o en contra,
virtudes y deficiencias expresa puntos de
y asumiendo una Emisión de la opinión o Proceso mediante el cual se emite y vista.
posición al respecto. juicio. asume una posición
54
Documento de trabajo DEC-CONEAU – Prohibida su reproducción
Proceso mediante el cual se pone en
Ejecución de los procesos
practica los procesos y estrategias
y estrategias. obtener un
establecidos
determinado efecto,
un resultado o un
Recepción de la Proceso mediante el cual se lleva la
El estudiante
información. información a las estructuras mentales.
formula cuando
Proceso mediante el cual se identifican los
expresa mediante
Capacidad que permite Identificación de elementos que se deben relacionar para
signos matemáticos,
establecer relaciones elementos obtener resultados o generar nuevas
las relaciones entre
entre elementos para construcciones
FORMULAR PLANTEAR diferentes
presentar resultados, Interrelación de los Proceso mediante el cual se establecen
magnitudes que
nuevas construcciones elementos relaciones entre los elementos.
permitirán obtener
o solucionar problemas Proceso mediante el cual se pone en un resultado;
Presentación de las práctica las relaciones entre elementos cuando plantea un
interrelaciones obteniéndose los resultados o la nuevas proyecto, etc.
construcciones
DIAGRAMA
Observación del objeto o Proceso mediante el cual se observa con
R
situación que se atención el objeto o situación que se
ESQUEMAT
representará representará
IZAR
El estudiante
Proceso mediante el cual se toma
Capacidad que permite Descripción de la forma / representa cuando
conciencia de la forma y de los elementos
representar objetos situación y ubicación de DISEÑAR dibuja un objeto,
REPRESENTA que conforman el objeto o situación que se
mediante dibujos, sus elementos actúa en una obra
R representará
esquemas, diagramas, teatral, elabora un
Generación de un orden y Proceso mediante el cual se establece un
etc plano, croquis, plano
secuenciación de la orden y secuencia para realizar la GRAFICAR
o diagrama
representación representación
Representación de la
Proceso mediante el cual se representa la
forma o situación externa DIBUJAR
forma o situación externa e interna
e interna
Proceso mediante el cual se lleva o El estudiante
Recepción de la
recupera la información de las estructuras argumenta cuando
información
mentales. sustenta con
Capacidad que permite Observación selectiva de Proceso mediante el cual se identifican la fundamentos
ARGUMENTAR sustentar o sostener la información que información que se utilizarán para determinados temas
puntos de vista permitirá fundamentar fundamentar los argumentos. o puntos de vista en
una exposición,
Presentación de los Proceso mediante el cual se presenta los
discusión, alegato,
argumentos argumentos en forma escrita u oral.
etc.
55
Documento de trabajo DEC-CONEAU – Prohibida su reproducción
Proceso mediante el cual se recepciona
Recepción de la
información sobre el qué se va a realizar y el OPERAR
información del qué hacer,
cómo se va a realizar. En algunos casos se El estudiante realiza
por qué hacer y cómo
requiere incorporar imágenes visuales del ELABORAR cuando lleva a cabo
hacer (imágenes )
cómo se va a realizar un procedimiento
Capacidad que permite Identificación y secuenciación de
Proceso mediante el cual se identifica y secuencia los para la producción
REALIZAR ejecutar un proceso, los procedimientos que involucra
procedimientos que se pretenden realizar de un bien, un
tarea u operación la realización
movimiento físico,
Proceso mediante el cual se pone en práctica los
procedimientos de la realización . En una primera
un paso de una
Ejecución de los procedimientos danza, etc.
instancia controlados por el pensamiento y en una EJECUTAR
controlados por el pensamiento
segunda instancia es la puesta en práctica de los
procedimientos de manera automática
56
Documento de trabajo DEC-CONEAU – Prohibida su reproducción
ANEXO 3
¿Qué es un ítem
Un ítem es una pregunta, que en conjunto con otras dan forma a una prueba, pueden ser de
distintos tipos y clases de acuerdo con lo que se pretende medir.
La prueba escrita está conformada por dos tipos de ítems: los objetivos y los de desarrollo.
ITEMS OBJETIVOS
Los ítems objetivos son aquellos que el evaluado soluciona marcando una respuesta a
elegir entre varias opciones dadas, o bien completando una respuesta. En ambos casos
todas las respuestas aceptables han sido previstas y especificadas en una clave de
respuestas o una plantilla de corrección. El término objetivo se refiere al procedimiento
empleado para la asignación de la puntuación y no a las características de la respuesta.
Entre los tipos de ítems objetivos están: selección única, respuesta corta,
correspondencia o apareamiento e identificación.
1. Selección única
Consta de un enunciado, base o pie que hace referencia a una situación y varias opciones
de respuesta, entre las cuales solo hay una que es correcta, las demás funcionan como
distractores.
Ejemplo:
57
Documento de trabajo DEC-CONEAU – Prohibida su reproducción
D.Analizar sus fortalezas y debilidades para relacionarse.
REGLAS GENERALES
Verificar que el ítem corresponda con los propósitos de la evaluación, la estructura
de la prueba y con las dimensiones disciplinares Todas las preguntas de una
prueba deben ser independientes entre sí.
La información de un ítem no debe servir de pauta para contestar otra, ni la
respuesta a un ítem debe depender de haber encontrado primero la de otra
anterior.
Evitar los ítems que pueden contestarse por sentido común y aquellos cuya
respuesta dependa únicamente de recordar un término, un símbolo, un dato o la
fecha en que ocurrió un evento.
Evitar expresiones rebuscadas que puedan confundir. Se recomienda emplear un
lenguaje directo, sencillo y comprensible.
Los ítems no deben tener juicios de valores explícitos o implícitos.
58
Documento de trabajo DEC-CONEAU – Prohibida su reproducción
• CONTEXTO
Es la información que sitúa conceptualmente al evaluado. Provee elementos necesarios y
suficientes para focalizar la tarea de evaluación. En un sentido amplio, el contexto abarca
todo el saber previo del evaluado sobre el objeto de evaluación; no obstante, en el
proceso de elaboración de un ítem, es usual que el evaluador encuentre pertinente y
necesario presentar un texto u otro tipo de información que contribuya a precisar las
condiciones del problema, las variables que es prudente considerar, o para ubicar en el
tiempo y en el espacio la problemática, etc.
• ENUNCIADO
Es el planteamiento, propiamente dicho, de la problemática que se espera sea resuelta
por el evaluado. En el enunciado se hace explícita la tarea de evaluación y, por tanto,
dirige el esfuerzo del evaluado para generar o seleccionar una respuesta, por lo cual es
fundamental que esté escrito en lenguaje claro y preciso.
Tradicionalmente los enunciados de ítems de selección múltiple se plantean en forma de
pregunta, o como una proposición. En el primer caso, las opciones se redactan como
respuestas a la pregunta; en el segundo caso, el enunciado constituye la primera parte de
una proposición y cada una de las opciones debe completar coherentemente el
enunciado.
La utilización de una u otra forma de plantear el enunciado es decisión del evaluador y
generalmente tiene que ver con la facilidad para redactar, tanto el enunciado como las
opciones.
• OPCIONES DE RESPUESTA
Las opciones son posibles respuestas a la problemática planteada en el enunciado. En el
formato de selección múltiple con única respuesta, como su nombre lo indica, sólo una de
estas opciones es verdaderamente pertinente y completa para solucionar el problema –
tarea de evaluación-; las demás opciones, aunque pueden ser vistas como respuestas
plausibles por los evaluados que no dominan la tarea de evaluación, no responden en
forma completa o pertinente a la problemática formulada.
59
Documento de trabajo DEC-CONEAU – Prohibida su reproducción
• Un buen ítem, por lo general, ha experimentado toda una metamorfosis desde su versión
original. Durante la fase de elaboración de los ítems, realice sesiones de socialización o
análisis conjunto de los ítems elaborados por cada miembro del equipo, con el fin de
que cada uno tenga oportunidad de hacer aportes a la cualificación de todos los ítems
(tanto en lo que refiere a la forma como al contenido).
• Evite usar eufemismos y prefiera un lenguaje directo, sin sacrificar el nivel técnico y
académico del proceso. La claridad y concreción en el lenguaje debe ser una
consideración permanente; utilice dibujos, gráficos o tablas sólo si estos en realidad
aportan a la comprensión de la tarea de evaluación; tenga en cuenta el tiempo que el
evaluado debe emplear para leer instrucciones, contextos, enunciados y opciones, y el
tiempo total del cual dispone para responder.
• Asegúrese de que en ninguna parte del instrumento (portada, textos, instrucciones,
ítems, etc.) haya errores de ortografía, de gramática o de puntuación, que no se incluya
incorrectamente abreviaciones, citas, nombres, cifras, fechas, etc.
60
Documento de trabajo DEC-CONEAU – Prohibida su reproducción
• Si plantea el enunciado en forma de proposición incompleta asegúrese de usar
conjugaciones verbales, género y número adecuados para las opciones de respuesta
que planteará. Si lo escribe en forma de pregunta asegúrese de usar adecuadamente
signos de interrogación y la estructura gramatical de una pregunta.
• Presente en el enunciado la tarea de evaluación.
• Escriba con claridad.
• Evite texto excesivo.
• Redacte el enunciado en forma positiva; es decir, evite negaciones.
61
Documento de trabajo DEC-CONEAU – Prohibida su reproducción
PERFIL DEL ITEM
Cada ítem debe analizarse particularmente a los efectos de determinar sus características
y facilitar su ubicación en una base de datos.
Una posibilidad es realizar el siguiente cuadro (perfil del ítem) adaptado del Programa
de Evaluación de Aprendizajes de ANEP, año 2002.
FICHA DE ÍTEM
1. NORMA DE COMPETENCIA
2. ELEMENTOS DE COMPETENCIA
3. NIVEL DE
CONOCIMIENTO Reproductivo Comprensión Aplicación
Procedimientos y reglas Principios y teorías
5. ITEM:
5.1. Enunciado del ítem:
a.
b.
c.
d.
5.3 Respuesta
62
Documento de trabajo DEC-CONEAU – Prohibida su reproducción
Título
Apellidos y Nombres del
Autor
Páginas de referencia
10. COORDINADOR –
ASESOR
Apellidos y Nombres
Teléfono
Correo electrónico
63
Documento de trabajo DEC-CONEAU – Prohibida su reproducción
i
Firma
ANEXO 4
2° A continuación indique que tan bien considera usted que el ítem o reactivo sea parte del,
indicador, del criterio de desempeño y de la unidad de competencia que se aborda.(analice la
matriz ).
3° Juzgue cada ítem o reactivo de manera individual comparando el contenido del ítem con el
contenido de la dimensión de estudio.
AÑO:
FECHA DE INSCRIPCIÓN DÍA: MES:
ENTIDAD CERTIFICADORA
NOMBRES Y APELLIDOS DE
EVALUADOR (A):
LUGAR DE EVALUACIÓN
FECHA DE EVALUACIÓN
II. INTRODUCCIÓN
Este documento presenta el instrumento de evaluación del desempeño correspondiente el elemento de competencia
3.1. “Diagnosticar el estado funcional del movimiento corporal de la persona según protocolo establecido”.
Perteneciente a la Norma de Competencia 3, que el evaluador(a) debe demostrar para ser considerado(a) competente
en la norma correspondiente.
El presente instrumento de evaluación está diseñado para evaluar la competencia profesional de las personas que se
desempeñan como TERAPISTA FISICO y contiene las instrucciones que debe seguir para su aplicación.
Posteriormente se presentan las instrucciones de calificación del instrumento de evaluación, así como para la emisión
del juicio de competencia.
El instrumento contiene trece (13) reactivos.
III. INSTRUCCIONES DE APLICACIÓN DEL INSTRUMENTO DE EVALUACIÓN
Usted encontrará la tabla de aplicación o cuerpo del instrumento que contiene los reactivos a aplicar, su numeración o
código, un espacio de registro de cumplimiento (SI/NO) y otro para el registro de observaciones que como evaluador
considere conveniente realizar.
Marque SI, cuando el candidato cumpla con el desempeño o muestre las evidencias correspondientes y NO cuando no
cumpla con los aspectos señalados.
IV. TABLA DE APLICACIÓN O CUERPO DEL INSTRUMENTO DE EVALUACIÓN
Si todos los reactivos son afirmativos el resultado es que cumple lo solicitado por la norma de competencia y si hay
algún reactivo con respuesta negativa el resultado es que No Cumple. No puede haber ítem sin marcar.
VII. RESULTADO DE LA EVALUACIÒN
CUMPLE NO CUMPLE
……………………………..…………… ………………………………………….
FIRMA DEL EVALUADOR FIRMA DEL EVALUADO
Experto 2
Experto 3
Experto 4
Experto 5
Experto 6
ÍTEM
(S) S/ (n (c-1))
sumatoria de
1
2
Coeficiente “V” de Aiken
Donde:
S: sumatoria de las respuestas o acuerdos de los expertos por cada ítem
n: número de expertos
N: Número de ítem
c: número de valores en la escala de valoración ( 2 si se trata de acuerdo y desacuerdo) ( 4 si
se trata de escala: 0,1,2,3)
Observaciones y /o recomendaciones
………………………………………………………………………………………………
Conclusiones finales
………………………………………………………………………………………………