Este documento describe los mecanismos de control de la evaluación sumativa en la Universidad Nacional Abierta (UNA), incluyendo las observaciones que los estudiantes pueden hacer a los ítems de las pruebas. Las observaciones representan una vía para que los estudiantes consulten dudas y expresen desacuerdos. Los especialistas en contenido responden indicando si la observación es procedente o no, y pueden modificar las claves de corrección. Este proceso de observaciones sirve como mecanismo de metaevaluación para analizar y corregir posibles problemas en los ítems
1. UNIVERSIDAD NACIONAL ABIERTAUNIVERSIDAD NACIONAL ABIERTA
VICERRECTORADO ACADÉMICOVICERRECTORADO ACADÉMICO
ÁREA EDUCACIÓNÁREA EDUCACIÓN
Profa. Ana Gudiño: Evaluadora
Universidad Nacional Abierta (UNA)
Caracas, 23 de enero de
2015
Mecanismos de Control de la Evaluación
Sumativa en la UNA
Observaciones a ítemes de las pruebas
como mecanismo de Metaevaluación
2. La UNA está organizada para impartir enseñanza en la
modalidad de educación a distancia.
Un rasgo particular de esta modalidad es la separación
física entre estudiantes y profesores.
El elemento “interacción” juega un papel relevante en el
intercambio que debe existir entre los tres componentes
básicos en este tipo de modalidad: estudiante, docente y
material instruccional.
El sistema de evaluación esta centrado en el estudiante y
se desarrolla por cursos, utilizando variados instrumentos
de evaluación principalmente las PRUEBAS.
Tancredi y Figueroa (2003)
Observaciones a ítemes de las pruebas
Preámbulo
3. Las pruebas tienen carácter presencial: son instrumentos
de evaluación con un número de ítemes de diferentes
tipos, adecuados al nivel de complejidad de cada objetivo
del curso, pasan por un control de calidad y deben
cumplir con un conjunto de pautas o recomendaciones
para su construcción.
El seguimiento y control técnico de los instrumentos es
llevado conjuntamente por el Evaluador y el Especialista
en Contenido, quienes tienen la responsabilidad de
validar la calidad de los mismo.
Se pueden presentar una variedad de elementos una
vez que el estudiante tiene acceso a la Clave de
Corrección correspondiente a la prueba y manifieste
desacuerdo con las repuestas, entre otros.
Preámbulo
4. En consecuencia, se generan observaciones a las
preguntas de las pruebas, en la mayoría de los casos
producen un impacto debido a las decisiones que se
toman al responderlas.
Las respuestas a las observaciones van dirigidas al
estudiante que la remite en los formatos
correspondientes.
Estas observaciones se rigen por lo pautado en el
documento: Procesamiento de Observaciones
Relacionada con la Evaluación Estudiantil, emanado
por el Vicerrectorado Académico a través de la
Coordinación de la Unidad de Evaluación Académica.
Preámbulo
Arandia (2006)
5. Observaciones a ítemes de las pruebas
El estudiante tiene la posibilidad por la vía de las
observaciones a los ítemes de las pruebas solicitar
aclaratoria de cualquier situación que considere irregular
generando la interacción docente-estudiante y
evidenciando el carácter bidireccional de la comunicación.
Representan la vía a través del cual el estudiante puede
consultar e informar a los Especialistas en Contenidos sus
dudas y posiciones en cuanto a una pregunta en específico
o más preguntas, en el cual no está de acuerdo.
La observación respecto a cada ítem de prueba u otro
documento, es formulada o solicitada por los mismos
estudiantes, en el respectivo centro local, en un tiempo
máximo permitido por la UNA.
6. El estudiante debe registrar en el “Formato”
correspondiente, la fecha en que hace entrega de su
observación al Centro Local o Unidad de Apoyo.
Los estudiantes argumentan una variedad de aspectos
relacionados con los ítemes:
a) Fallas en el ítem que impiden responder la alternativa
correcta, redacción, omisión de información, error en la
información presentada en la base del ítem.
b) Ausencia de la respuesta correcta.
c) Más de una opción de la respuesta correcta.
d) El ítem no se corresponde con el objetivo.
e) Se repiten preguntas en un mismo objetivo.
f) El ítem no se se relaciona con el material instruccional.
g) Las claves de respuestas liberadas no se corresponden
con las respuestas correctas de la prueba. Entre otros.
Observaciones a ítemes de las pruebas
7. No. C.E.AUniversidad Nacional Abierta
Vicerrectorado Académico
Coordinación Evaluación Académica
LAPSO 2015-1
Para: Coordinación de Evaluación Académica
Asunto: Observaciones a Ítemes de Selección / Claves de Corrección
Centro Local /COD Oficina de Apoyo / COD
Asignatura COD Área
Momento de Evaluación Tipo de
Prueba
Fecha de
Aplicación VP
1P 2P 3P 4P 1I 2I OB
J
MI
X
No Ítem No. Objetivo Clave Rectificación
Propuesta
Argumentos
Nombre del Estudiante Asesor Jefe Unidad Académica o Unidad Logística
CI. CI CI
Firma: Firma: Firma:
Fecha: Fecha: Fecha:
Fecha Recepción Área F. Respuesta No. Memo Área
VP: Versión de la Prueba
8. Universidad Nacional Abierta
Vicerrectorado Académico
Coordinación Evaluación Académica
LAPSO 2015-1
No. C.E.A
Centro Local /COD Oficina de Apoyo / COD
Asignatura COD Área
Momento de Evaluación T. P Fecha de
Aplicación VP
1P 2P 3P 4P 1I 2I OB
J
DES MIX
No. Ítem________ No. Objetivo:____________
Argumentos:
(Si lo estima necesario anexe Hojas identificadas con su nombre, CI, Centro Local)
Nombre del Estudiante
CI.
Asesor
CI
Jefe Unidad Académica o
Unidad Logística
CI
Firma Firma Firma
Fecha: Fecha: Fecha:
Fecha de Recepción C.E.A:
VP: Versión de la Prueba
Para: Coordinación de Evaluación Académica
Asunto: Observaciones a Ítemes de Desarrollo / Modelo Respuesta
9. Tipos de respuesta emitida por los
Especialistas en Contenido
Observaciones Procedentes: Cuando el Especialista en
Contenido examina que el planteamiento presentado por el
estudiante es correcto y verifica que la opción de respuesta
presentada en la clave de corrección no es la correcta.
Observaciones Procedentes: Cuando el Especialista en
Contenido examina que el planteamiento presentado por el
estudiante es correcto y verifica que la opción de respuesta
presentada en la clave de corrección no es la correcta.
Se modifica la clave de corrección, (se cambia la opción de
respuesta).
Se elimina la pregunta, (se reduce el Criterio de Dominio).
Se sustituye la clave de corrección, (completa).
Se Modifica el Modelo de respuesta.
Presentar una explicación didáctica que refuerce la decisión y le
deje una orientación pedagógica y formativa al estudiante.
La respuesta con la decisión se presenta en el formato
correspondiente, se remite para todos los Centros Locales.
10. Asignatura: Cód:
Momento de Prueba: Aplicación: Número Versión
Prueba
Objetivo(s): Ítem(es):
RESPUESTA
Se modifica la clave de corrección, (se cambia la opción de respuesta).
Se elimina la pregunta, (se reduce el Criterio de Dominio).
Se sustituye la clave de corrección, (completa).
Presentar una explicación didáctica que refuerce la decisión y le deje una orientación
pedagógica y formativa al estudiante.
UNIVERSIDAD NACIONAL ABIERTA
VICERRECTORADO ACADEMICO
CARRERAS EDUCACION INTEGRAL
OBSERVACIÓN PROCEDENTE
Nº CEA: 000
Nº NP: ______
PARA: Coordinación de Evaluación Académica
ATENCIÓN: TODOS LOS CENTROS LOCALES
DE: Carreras de Educación Integral
ASUNTO: Respuesta a Observación
FECHA:
Coordinador: _____________________
29/06/09
Especialista:_______________________
29/06/09
Evaluador:________________________
29/06/09
Coordinación Evaluación Académica: __________________
11. Tipos de respuesta emitida por los
Especialistas en Contenido
Observaciones No Procedentes: Cuando el Especialista en
Contenido examina que el planteamiento presentado por el
estudiante no procede y considera que la opción de respuesta
presentada en la clave de corrección es la correcta.
Observaciones No Procedentes: Cuando el Especialista en
Contenido examina que el planteamiento presentado por el
estudiante no procede y considera que la opción de respuesta
presentada en la clave de corrección es la correcta.
Se ratifica la opción correcta presentada en la Clave de
Corrección.
Presentar una explicación didáctica argumentada que
refuerce la decisión y le deje una orientación pedagógica
y formativa al estudiante.
Se sugiere al estudiante revisar de nuevo la Unidad y el
tema relacionado con el ítem y objetivo.
12. UNIVERSIDAD NACIONAL ABIERTA
VICERRECTORADO ACADEMICO
CARRERAS EDUCACION INTEGRAL
OBSERVACIÓN NO PROCEDENTE
PARA: Coordinación de Evaluación
Académica
ATENCIÓN: Centro Local
DE: Nivel Central-Carrera:
Mención:
ASUNTO: Respuesta a Observación
FECHA: 00/00/0000
Nº CEA: 000
Nº NP: ______
Asignatura: Cód:
Momento de Prueba: Fecha de Aplicación: Número Versión
Prueba
Objetivo(s): Ítem(es):
RESPUESTA
Se ratifica la opción correcta presentada en la Clave de Corrección.
Presentar una explicación didáctica argumentada que refuerce la decisión y le deje una
orientación pedagógica y formativa al estudiante.
Se sugiere al estudiante revisar de nuevo la Unidad y el tema relacionado con el ítem y
objetivo.
Coordinador: _____________________
29/06/09
Especialista:_______________________
29/06/09
Evaluador:________________________
29/06/09
Coordinación Evaluación Académica: __________________
13. Las Observaciones a los instrumentos de pruebas
representan un mecanismo de la Metaevaluación; la
oportunidad de analizar y revisar los ítemes de los
instrumentos, detectar si cumplen con los requisitos y el
fin para el cual fueron elaborados y corregir los
problemas presentados.
Pueden considerarse un procedimiento de revalidación
que implica volver a la revisión del ítem (su estructura,
distractores, respuesta correcta, Clave de Corrección,
pertinencia con el objetivo, con el material instruccional,
la Selección de Lecturas) permitiendo considerar la
utilización del mismo a futuro o si deberá ser eliminado
del banco de ítemes de la asignatura.
Observaciones a ítemes de las pruebas
como mecanismo de Metaevaluación
14. UNIVERSIDAD NACIONAL ABIERTA
VICERRECTORADO ACADÉMICO
ÁREA DE EDUCACIÓN
CARRERAS DE EDUCACIÓN INTEGRAL ASIGNATURA:______________ Prof. (a) Especialista en Contenido:__________
LICENCIATURA (CÓDIGO 440)
CÓDIGO:____________________________LAPSO:________________Profesor (a) Evaluador (a):_________
TÉCNICO SUPERIOR UNIVERSITARIO (CÓDIGO 430)
REGISTRO DE OBSERVACIÓN A ÍTEMES
LEYENDA:
CEA: COORDINACIÓN EVALUACIÓN ACADÉMICA, RECEP: RECEPCIÓN, 1º I: 1º INTEGRAL, 2º I: 2º INTEGRAL, V1: VERSIÓN 1, V2: VERSIÓN 2,
CONT: CONTENIDO DEL ÍTEM S.R.C: SIN RESPUESTA CORRECTA, S.J.: SIN JUSTIFICACIÓN, MÁS R.C.: MÁS DE UNA RESPUESTA CORRECTA, R.N.I: LA RESPUESTA
NO ES LA INDICADA, MC: SE MODIFICÓ LA CLAVE, EI: SE ELIMINÓ EL ÍTEM, CC: CLAVE CORRECTA, EX: EXTEMPORÁNEO, PROC.: PROCEDENTE,
NO PROC.: NO PROCEDENTE, U.E.A.: UNIDAD DE EVALUACIÓN ACADÉMICA, EI: EDUCACIÓN INTEGRAL, O: OBJETIVA, M: MIXTA
15. Código
de la
Asignatura
Nº Ítemes Pruebas Integrales
Nº
Ítemes
S.S.
Nº
Ítemes
Des.
Total
de
Ítemes
Total
pruebas
Asignaturas
1I 2I I A IE FEUNA - - - -
V1 V2 V1 V2 - - 1I 2I - - - -
120 32 - 32 - - - - - 64 - 64 2
423 36 - 36 - - - - - 72 - 72 2
476 32 - 32 - - - - - 64 - 64 2
477 20 - 20 - - 20 20 20 100 - 100 5
478/430 28 - 28 - - 28 - - 84 - 84 3
479 12 - 12 - - - 12 12 48 - 48 4
480/432 28 - 28 - - - - - 56 - 56 2
481/436 24 - 24 - - - 24 24 56 - 56 4
484 40 - 40 - - - - - 80 - 80 2
485/418 16 - 16 - - 16 16 16 64 - 64 5
487 24 - 24 - - - - - 48 - 48 2
488/422 24 - 24 - - 24 - - 72 - 72 3
489/424 24 - 24 - - 24 - - 72 - 72 3
490 22 - 22 - - - - - 32 12 44 2
491/459 36 - 36 - - - - - 72 - 72 2
492/438 20 - 20 - - - - - 40 - 40 2
493 8 - 8 - - - - - 16 - 16 2
498 16 - 16 - - - - - 32 - 32 2
TOTAL DE
ÍTEMES
418 - 418 - 112 72 72 1080 12 1092 49
Para las pruebas de las asignaturas de la Carrera del TSU en Educación Integral (430) lapso 2008
– 2 se elaboraron un total de 1092 ítemes de los cuales 1080 son de selección simple y 12 son
ítemes de desarrollo distribuidos en un total de 49 pruebas.
Nº DE ÍTEMES PRODUCIDOS PARA LAS PRUEBAS DE LAS ASIGNATURAS DE
LA CARRERA DE TSU (430) Y TOTAL DE PRUEBAS ELABORADAS DURANTE EL LAPSO 2008 – 2
16. CÓD. ASIGNATURAS
OBSERVACIONES
PROCEDENTES
OBSERVACIONES
NO PROCEDENTES
1º IN 2º IN TOTALES
TOTAL OB
P 1º IN 2º IN
TOTAL OB
NO P
TOTAL
OBS
EI MC EI MC EI MC CC CC
120 LENGUA Y COMUNICACIÓN EN EDUCACIÓN - - - - - - - - - - -
423 DISEÑO Y ELABORACIÓN DE PUBLICACIONES
PERIÓDICAS - - - 1 - 1 1 - - - 1
476 MATEMÁTICA 1 - - - 1 - 1 - - - 1
477 FUNDAMENTOS DE LA EDUCACIÓN - - - - - - - 1 - 1 1
478/43
0
LECTO-ESCRITURA
- - 1 3 1 3 4 - 1 1 5
479 ENSEÑANZA DE LA MATEMÁTICA - - - 1 - 1 1 - - - 1
480 EDUCACIÓN AMBIENTAL - - - - - - - 4 - 4 4
481 LITERATURA INFANTIL Y JUVENIL - 1 - 3 - 4 4 - - - 4
484 GEOGRAFÍA GENERAL Y DE VENEZUELA - - - - - - - - - - -
485 CIENCIAS NATURALES I - - - - - - - 2 3 5 5
487 DIDÁCTICA PARA EL DOCENTE INTEGRADOR - - - - - - - 1 - 1 1
488 HISTORIA DE VENEZUELA - - - - - - - - - - -
489 CIENCIAS NATURALES II 1 3 1 - 2 3 5 2 1 3 8
490 COMUNICACIÓN EFICAZ - - - - - - - - - - -
491 ENSEÑANZA DE LA LENGUA - - 1 - 1 - 1 2 3 5 6
492 SEMINARIO PRACTICO DE EDUCACIÓN PARA
EL TRABAJO - - - - - - - - - - -
493 EVALUACIÓN - - - - - - - 1 - 1 1
498 LIDERAZGO UNA ESTRATEGIA PARA EL
CAMBIO - - - 1 - 1 1 - - - 1
2 4 3 9 5 13 18 13 8 21 39
- - - - 0,45%
1,19
% 1,64% 1,19% 0,74 1,93% 3,57
RELACIÓN DE RESPUESTAS DADAS A LAS OBSERVACIONES A ÍTEMES DE PRUEBAS
POR ASIGNATURAS CARRERA 430 LAPSO 2008 – 2
DE 49 PRUEBAS ELABORADAS
EL TOTAL DE ÍTEMS CONSTRUIDOS ES DE 1.092 = 100,00%
EL TOTAL DE ÍTEMES CON OBSERVACIONES 39 = 3,57%
EL TOTAL DE ÍTEMES SIN OBSERVACIONES 1.080 = 98,90%
17. “El error esta estrechamente vinculado a uno de los
espacios didácticos del ámbito educativo, la
evaluación(...) una de las finalidades de la evaluación es
la revalidación, la cual se denomina evaluación
formativa. El error aparece entonces como una
referencia una investigación para aplicar la
metaevaluación (...) El error siempre tiene una
explicación y un porqué”.
De la Torre (2004)
Las observaciones que realizan los estudiantes a los ítemes de las pruebas
representan la oportunidad de evaluar sus planteamientos y aprendizajes
formativamente y también nuestro trabajo como docente; más que resaltar un error
de las partes involucradas, es la oportunidad de mejorar el proceso, a través de los
ítemes de las pruebas, las pruebas, la misma observación planteada, con la
validación pertinente. Profa. Ana Gudiño.
18. Tancredi, B., Figueroa, P. (2003). Seminario N° 1: Análisis de las
características del alumno de educación a distancia: Caso Universidad
Nacional Abierta. Red de Universidades de Educación a Distancia Rueda
PROGRAMA ALFA, Subprograma A. PROYECTO: Evaluación de los
Programas de Educación a Distancia. Loja, Ecuador.
Arandia, J.R. (2006). Procesamiento de Observaciones relacionada con la
evaluación estudiantil. Vicerrectorado Académico. Coordinación de
Evaluación Académica. UNA. Lapso 2006 – 2.
De la Torre, S. (2004) Aprender de los errores. El tratamiento didáctico de
los errores como estrategias innovadoras. Editorial: Magisterio del Rio de la
Plata. Buenos Aires. Argentina.
Referencias: