El documento presenta información sobre la evaluación de programas educativos. Explica que la evaluación es un proceso sistemático que se aplica en todas las fases del diseño de la instrucción con el fin de mejorar la práctica didáctica. Describe las dimensiones de la evaluación, incluyendo el objeto, finalidad, momento, modelo e instrumentos de evaluación. También cubre temas como las características, dimensiones y modelos de la evaluación, así como el proceso de evaluación de programas y posibles problemáticas asociadas.

1. República Bolivariana de Venezuela
Ministerio de la Defensa
Universidad Nacional Experimental Politécnica de la Fuerza
Armada Nacional
Decanato de Investigación y Postgrado
Diseño Tecnológico Instruccional
Expositores:
Claudia Ceballos
Plácida Díaz
Eliana Fermín
Douglas García
20/06/2012 16:48:26 EQUIPO IV 1

2. La Evaluación
“Proceso sistemático implícito e integrante del diseño
de la instrucción, que se aplica en todas las fases de
éste con el fin de corregir los procedimientos para
la toma de decisiones y orientadas a mejorar la
práctica didáctica”
20/06/2012 16:48:26 EQUIPO IV 2

3. Características de la Evaluación
• Proceso sistemático de compilación de información
• Organiza los elementos de la información
• Sistematiza las fases
• Temporaliza secuencias
• Provee recursos
• Sirve para construir y seleccionar instrumentos
20/06/2012 16:48:26 EQUIPO IV 3

4. Características de la Evaluación
• Es Flexible
• Ha de valorarse la información una vez compilada
sistemáticamente
• Está orientada a la toma de decisiones
• Orientada a la mejora de la práctica
20/06/2012 16:48:26 EQUIPO IV 4

5. Dimensiones de la Evaluación
Objeto
El qué? Modelo
¿Cómo?
Finalidad La Evaluador
¿Para qué? Evaluación ¿Quién?
Momento
¿Cuándo? Instrumento
¿Con qué?
20/06/2012 16:48:26 EQUIPO IV 5

6. Dimensiones de la Evaluación
Objeto
• Contexto
• Necesidades
• Objetivos
• Contenidos
• Profesores
• Instituciones
• Alumnos
• Metodología
• Recursos
20/06/2012 16:48:26 EQUIPO IV 6

7. Dimensiones de la Evaluación
Finalidad
20/06/2012 16:48:26 EQUIPO IV 7

8. Dimensiones de la Evaluación
Momento
20/06/2012 16:48:26 EQUIPO IV 8

9. Dimensiones de la Evaluación Instrumentos
Observación
Entrevistas
Cuestionarios
Test
Instrumentos de Pruebas objetivas
evaluación
Escalas
Validez
Fiabilidad
Pruebas objetivas
20/06/2012 16:48:26 EQUIPO IV 9

10. Dimensiones de la Evaluación Evaluador
• Profesores
• Alumnos
• Equipo directivo
• Usuario
• Experto
• Autoevaluación
• Heteroevaluación
• Interna-externa
20/06/2012 16:48:27 EQUIPO IV 10

11. REFERENTES
• Coherencia con las finalidades definidas por la
política de formación
• Adecuación a las necesidades formativas del
contexto inmediato
• Adecuación a los participantes (necesidades,
expectativas, intereses)
20/06/2012 16:48:27 EQUIPO IV 11

12. Dimensiones de la Evaluación Modelos
Experimental
Naturalista
Basado en la demanda
Basado en Costos
Toma de decisiones
Verificacion de logros
Cuantitativa
Cualitativa
20/06/2012 16:48:27 EQUIPO IV 12

13. Modelos de la Evaluación
• Modelo Objetivista
Consideran que la evaluación es: la determinación del
valor o mérito de un programa. Los criterios de
evaluación, son el grado de productividad y el nivel
de eficiencia del programa
• Modelo de Tyler
Está orientado a la toma de decisiones
20/06/2012 16:48:27 EQUIPO IV 13

14. Modelos de la Evaluación
• Modelo Cronbach:
Uno de los aspectos claves determinante en la
evaluación es su función política.
20/06/2012 16:48:27 EQUIPO IV 14

15. Modelos de la Evaluación
• Modelo de Stuflebeam (C.I.P.P)
La evaluación es un proceso mediante el cual se
proporciona información útil para la toma de
decisiones.
20/06/2012 16:48:27 EQUIPO IV 15

16. Modelos de la Evaluación
• Modelo Scriven
El modelo sin referencia a objetivos surge como una
fuerte oposición al modelo basado en objetivos,
Scriven propone que el evaluador desconozca
deliberadamente los objetivos del programa.
20/06/2012 16:48:27 EQUIPO IV 16

17. Modelos de la Evaluación
• Modelos subjetivistas
La evaluación es concebida como la comprensión y
valoración de los procesos y resultados de un
programa educativo.
• Modelo Stake
Este modelo incluía el estudio de los antecedentes del
proceso y los juicios previos sobre el mismo,
además de los resultados
20/06/2012 16:48:27 EQUIPO IV 17

18. Modelos de la Evaluación
• Parlett y Hamilton
Estos autores proponen un modelo de evaluación que
implica el estudio intensivo de un programa
educativo como un todo, con sus fundamentos,
evaluación, estrategias de aplicación, logros y
dificultades en el contexto escolar o ambiente de
aprendizaje. Sus propósitos eran resaltar
problemas, cuestiones y características principales
del programa
20/06/2012 16:48:27 EQUIPO IV 18

19. Modelos de la Evaluación
• Mc Donald
Según el autor los evaluadores no sólo viven en el
mundo de la política evaluativa, sino que influye
de hecho en sus cambiantes relaciones de poder.
La evaluación proporciona información que
sirve a intereses y valores personales.
20/06/2012 16:48:27 EQUIPO IV 19

20. Modelos de la Evaluación
• Modelo crítico
Desde esta perspectiva, la evaluación de un programa,
es un proceso de recogida de información que
fomenta la reflexión crítica de los procesos y
conduce a la toma de decisiones pertinentes de cada
situación específica.
20/06/2012 16:48:27 EQUIPO IV 20

21. El programa y su evaluación
• ¿ Qué es un programa?
Según Gairín (1993) es cualquier propuesta
estructurada para producir cambios en las
personas que se exponen a ellos.
20/06/2012 16:48:27 EQUIPO IV 21

22. El programa y su evaluación
• Evaluación de un programa
Proceso continuo, sistemático y multidimensional de
recogida de información relevante, válida y fiable
que permite tomar decisiones sobre el valor o
mérito del mismo para mejorar su funcionamiento.
20/06/2012 16:48:27 EQUIPO IV 22

23. RELACIÓN ENTRE EL NIVEL DE PLANIFICACIÓN Y
EVALUACIÓN DE UN PROGRAMA
INFORME INICIAL
INFORME DE PROGRESO
DIAGNÓSTICA INFORME FINAL
FORMATIVA SUMATIVA
CONTEXTO
NECESIDADES REALIZACIÓN
VIABILIDAD DESARROLLO
RESULTADOS RESULTADOS
DESTINATARIOS PRODUCTOS
DISEÑO GESTIÓN IMPACTO
REALIDAD EVALUACIÓN COSTES
INICIAL FINAL / DIFERIDA
CONTINUA
NECESIDAD
DE CAMBIO PROGRAMA
DESARROLLO RESULTADOS=
PROYECTO REALIDAD NUEVA
PROGRAMA
20/06/2012 16:48:27 EQUIPO IV 23

24. El programa y su evaluación
Secuencias estructural Secuencia conceptual Secuencia operativa
DEFINIR:
JUSTIFICACIÓN EVALUACIÓN DIAGNÓSTICA
Finalidades
DISEÑO Contexto socio-cultural
Grupo destinatario
Objetivos Política de la institución
Política de formación
Grupo autonomía
Acciones
DETECTAR NECESIDADES
Recursos
EVALUACIÓN-PLANIFICACIÓN Instrumentalización
Responsables
Elaboración del programa Configurar grupo de incidencia
Evaluación
ESTRUCTURAR
Temporalización
EVALUACIÓN- PROCESO Configurar grupo
OPERATIVA
Desarrollo del programa Establecer mecanismos de
Espacios seguimiento y control
Tiempos EVALUACIÓN-RESULTADOS ESTATBLECER
Profesorado Evaluación del programa Receptores
Información
Núcleos de decisión
Secuencia conceptual, estructural y operativa de la elaboración de programas
de formación. Gairín (1993).
20/06/2012 16:48:27 EQUIPO IV 24

25. El programa y su evaluación
20/06/2012 16:48:27 EQUIPO IV 25

26. Proceso de evaluación de programas
FASE PROPÓSITO ACTIVIDAD QUE IMPLICA
FASE
1. FORMULACIÓN DE Identificación y precisión de la Definir la audiencia.
LA EVALUACIÓN naturaleza de la evaluación. Determinar el propósito.
Identificar los aspectos relevantes.
2. VALORACIÓN DE Análisis a priori de la credibilidad y Listado de los componentes básicos: objetivos,
LA EVALUABILIDAD utilidad de la evaluación que se va a resultados y efectos.
efectuar. Elección de los más relevantes.
Reordenación de la misma. Análisis crítico de la posibilidad de analizarlos a través
del estudio evaluativo.
3. PLANIFICACIÓN Implementación de la evaluación. Elección del modelo.
DE LA EVALUACIÓN Determinación de la metodología.
4. EJECUSIÓN DE LA Ejecución del proceso evaluativo. Elaboración del diseño.
EVALUACIÓN Recogida de la información.
Análisis e interpretación de la información.
5. UTILIZACIÓN DE Toma de decisiones a partir de las Informe de evaluación.
LA EVALUACIÓN conclusiones elaboradas en el informe Toma de decisiones.
evaluativo y otros aspectos a
considerar.
6.METAEVALUACIÓN Evaluación de la evaluación. Elección de los criterios referenciales evaluativos.
Análisis y valoración efectuada en base a dichos
objetivos.
El proceso de evaluación a partir de Mateo (1994).
20/06/2012 16:48:27 EQUIPO IV 26

27. TRABAJO DE CAMPO IDEA DEL TRABAJO INTERNO
PROYECTO
DISEÑO
PRESENTACIÓN
R
DOCUMENTACIÓN
E
PRESENTACIÓN
F
L E
NEGOCIACIÓN COMPROMISO
E Q
X U
I I ANÁLISIS DE DOCUMENTOS
RECOLECCIÓN DE LA Ó P E INSTRUMENTALIZACIÓN
INFORMACIÓN N O
ANÁLISIS DE
E LAINFORMACIÓN
N
AMPLIACIÓN Y
SISTEMATIZACIÓN
CONTRASTACIÓN
ORGANIZACIÓN
ÚLTIMA PUESTA EN COMÚN
INFORME FINAL
Ideograma de flujo en evaluación de Programas. Tomado de Jiménez, 1996
20/06/2012 16:48:27 EQUIPO IV 27

28. Instrumentalización en la evaluación de
programas
OBJETO CRITERIOS INDICADORES REFERENTES
Cuestiones de evaluación
¿Los objetivos definidos son relevantes con la política de formación?
• ¿Los objetivos formulados son suficientes para satisfacer las necesidades de los
destinatarios?
• ¿La selección de contenidos es pertinente con el contexto?
• ¿La metodología permite la participación activa?
• ¿La duración de las sesiones se adecua a las necesidades del contexto?
• ¿Las prácticas realizadas satisfacen las necesidades de los participantes?
• ¿Nivel de los objetivos logrados?
• ¿Satisfacción de las expectativas de los participantes?
• ¿Nivel de cambio producido en la práctica profesional?
• ¿Suficiencia del presupuesto asignado?
Instrumento Instrumento
Abierto /Cerrado Extenso/ Limitado
20/06/2012 16:48:27 EQUIPO IV 28

29. OBJETO
¿QUÉ?
CONTENIDO
REFERENTE NECESIDADES
OBJETIVOS, CONTENIDOS
•Coherencia con INSTITUCIONES
las finalidades PROFESORES, ALUMNOS
FINALIDAD METODOLOGÍA MODELO
definidas por la EXPERIMENTAL,
política de ¿PARA QUÉ? RECURSOS NATURALISTA ¿CÓMO?
DIAGNÓSTICA BASADO EN DEMANDA,
formación BASADO EN COSTOS
FORMATIVA
•Adecuación a las TOMA DE DECISIONES,
SUMATIVA VERIFICACIÓN DE LOGROS
necesidades
CUANTITATIVA,
formativas del CUALITATIVA
contexto EVALUACIÓN
inmediato. PROFESORES
•Adecuación a INICIAL ALUMNOS
CONTINUA EQUIPO DIRECTIVO
determinados
FINAL USUARIO
principios
DIFERIDA EXPERTO. AUTOEVAUACIÓN
psicopedagógicos HETEROEVALUACIÓN
. MOMENTO EVALUADOR
OBSERVACIÓN INTERNA-EXTERNA
•Adecuación a los ¿CUÁNDO? ENTREVISTAS ¿QUIÉN?
participantes CUESTIONARIOS, TESTS
(necesidades, exp PRUEBAS OBJETIVAS
ectativas, interese ESCALAS, VALIDEZ
s) FIABILIDAD, PERTINENCIA
INSTRUMENTO
¿CON QUÉ?
20/06/2012 16:48:27 EQUIPO V 29

30. Problemáticas de los programas de
Evaluación
• Teórico-Conceptuales
• Sustantivas (plan de evaluación)
• Metodológicas (validez, fiabilidad y
Generales pertinencia)
• Diseño-implementación del programa
(objetivos, cronogramas, monitoreo)
• Diseño de Evaluación
(contexto, destinatarios, responsables)
• Desarrollo de la Evaluación
Específicas (Informe parcializado, normas de evaluación)
• El evaluador como problema
• Los destinatarios y su participación
(conflictos institucionales, clima organizacional)
20/06/2012 16:48:27 EQUIPO IV 30

31. Patologías generales de la Evaluación
Según Santos (1993), se presentan cuando se evalúa:
• Unilateralmente
• Sólo lo explícito u observable
• Negativamente
• Descontextualizadamente
• En forma esterotipada
• Para controlar
• Sólo en forma Interna
• Incoherentemente
• Competitivamente
• Apartado de la ética
• Sin realizar paraevaluación, metaevaluación y/o autoevaluación
• Se realiza distemporalmente
20/06/2012 16:48:27 EQUIPO IV 31

32. Abusos en la Evaluación
• Elogiar a quien la realiza.
• Tener una visión sesgada del proceso.
• Hacer evaluaciones diferentes en cuanto al rigor para eventos de similar
importancia.
• Convertirla en instrumento de dominio.
• Encargarla a equipos y/o personas subjetivas o sin independencia en la
toma de decisiones.
• Omitir o falsificar resultados por conveniencia.
• Atribuir los malos resultados a los usuarios y no al programa.
• Descalificar la evaluación si los resultados no favorecen el evaluador.
20/06/2012 16:48:27 EQUIPO IV 32

33. Algunas alternativas para la superación de
las dificultades problemáticas en el
proceso de evaluación
• Estudio del diseño del programa.
• Comprobación del proceso de implementación-desarrollo del programa.
• Disponer de un plan preciso, claro y negociado sobre la evaluación y su
proceso.
• Complementar evaluación interna con la externa.
• Operar desde enfoques paradigmáticos no exclusivistas, sino más bien
complementarios.
• Considerar las normas de evaluación.
20/06/2012 16:48:27 Grupo V 33

34. NORMAS DE EVALUACIÓN
Joint Committee on Standards for Educational Evaluation (2010)
UTILIDAD
LEGITIMIDAD PRECISIÓN
Credibilidad del
Orientación de Conclusiones y
evaluador
confianza e integradora decisiones justificadas
Atención a las
Acuerdos formales Información válida
audiencias
Derechos humanos y Información fiable
Fines negociados VIABILIDAD
respeto Descripciones explicitas
Valores explícitos Gestión de proyectos
Claridad y equidad del programa y del
Información relevantes Procedimientos contexto
prácticos Transparencia y
Procesos y productos Gestión de la
divulgación
significativos Viabilidad contextual información
Conflicto de intereses
Oportuna y adecuada Uso de recursos Razonamiento explícito
comunicación y Responsabilidad fiscal de la evaluación
presentación de los
Comunicación y
informes
presentación de los
Preocupación por las informes
consecuencias y la
influencia
20/06/2012 16:48:27 EQUIPO IV 34