El documento presenta conceptos sobre evaluación de impacto, incluyendo definiciones como determinar los efectos deseados de un programa y si son atribuibles a la intervención. También discute enfoques de evaluación como medir resultados, procesos, y generar conocimiento, así como diferentes modelos como ex ante, intermedio, y ex post. El documento concluye resaltando la importancia de considerar los marcos conceptuales y actores diversos al definir el enfoque de una evaluación.
3. Aproximación a una definición…..
• Determinar si el programa produjo los efectos deseados en
las personas, hogares e instituciones y si esos efectos son
atribuibles a la intervención del programa. Las evaluaciones
de impacto también permiten examinar consecuencias no
previstas en los beneficiarios, ya sean positivas o negativas.
Especialmente en su bienestar. (Baker - Banco Mundial. Evaluación del
impacto de los proyectos de desarrollo en la pobreza. 2000)
• Ver si efectivamente el proyecto o programa está alcanzando
(o alcanzó) los objetivos planteados por el proyecto. (CEPAL. Serie
Manuales N° 48. Pauta metodológica de evaluación de impacto ex-ante y ex-post de
programas sociales de lucha contra la pobreza Aplicación metodológica. 2006)
Walter Melgar Paz
4. Aproximación a una definición…..
• Identificación y análisis sistemático de los cambios duraderos
y significativos en las vidas de las personas – inclusive
cambios no pretendidos, sean positivos o negativos – para
los cuales la organización contribuye, directa o
indirectamente. (ACT para el Desarrollo: Guía para apreciar nuestra contribución al
cambio)
• Determinar la capacidad que tienen las ideas
potencialmente buenas para solucionar los problemas
sociales y establecer si puede atribuirse o no (y en qué
medida) a la intervención. (IVALUA. Guía N° 5 de Evaluación de Impacto.
Instituto Catalán de Evaluación de Políticas Públicas)
Walter Melgar Paz
5. Rasgos primordiales de la definición
Componente de la
definición
Hace referencia a
Medir
Cálculo o valoración de las distancias entre dos
situaciones comparadas. Hace alusión a
métodos y herramientas de medición.
Efectos
Cambio de situación o características de
elementos de la realidad, objetivamente
verificables.
Comparación
Definición y uso de criterios explícitos para
juzgar el cambio mensurado.
Toma de decisiones
Denota finalidad social de la evaluación y su
relación con la finalidad de la organización
involucrada.
Walter Melgar Paz
6. Enfoques de la evaluación
Período Objetivo Enfoque
Primera generación
50s – 70s
Medición / comparación Resultados
Segunda generación
80s
Transparencia /
responsabilidad
Resultados
Tercera generación
90s
Comprensión /aprendizaje
/ toma de decisiones /
responsabilidad
compartida
Procesos / uso de la
información
Cuarta generación
2000
Re-conceptualización
/innovación /
construcción de poder
Conocimientos
generalizables
Walter Melgar Paz
7. Comprender y valorar las transformaciones
que han sido favorecidas por nuestras
intervenciones
Supone:
•Reconocer actores diversos en acción
•Proceso de negociación y acuerdos
•Identificar criterios de evaluación
•Toma de posición
•Despliegue de destrezas técnicas
•Gestión de información
•Análisis y apreciación crítica
•Capacidad propositiva
•Comunicar resultados
Un concepto alternativo…..
Walter Melgar Paz
8. Elemento Evaluación moderna Evaluación convencional
Objetivos
Solución de problemas y toma de
decisiones. Responsabilidad positiva y
ante sí mismo. Construcción de
conceptos. Conocimiento, aprendizaje,
desarrollo de capacidades y cambio
organizacional. Desarrollo de visión
estratégica.
Juicios, responsabilidad formal,
medición
Proceso
Interdisciplinario y holístico. Inclusivo.
Horizontal.
Sectorial. Excluyente. Jerárquico y
vertical.
Resultados de la evaluación
Internalización en la organización del
proceso y de las prácticas de la
evaluación
Informe final de la evaluación
Responsabilidad Actores Evaluador externo
Control y toma de decisiones
que se derivan
Actores Evaluador externo. Directivos.
Pericia
Actores a través del desarrollo de
capacidades como parte del proceso
Evaluador externo, equipo técnico
evaluador
Participación de actores Empoderamiento Consulta
Diversidad Valoración Indiferencia
Informe
Ad hoc, enfocado a las necesidades de
desarrollo de capacidades de los diversos
actores
Único, enfocado al requerimiento
del financista
Walter Melgar Paz
9. Diferentes modelos….
Criterio Tipos
Momento del ciclo del proyecto
Ex Ante
Intermedio
Ex post
Jerarquía de objetivos
De proceso
De resultado
De impacto
Desempeño
Eficiencia
Eficacia
Costo – beneficio
Costo - efectividad
Otros criterios
Pertinencia
Sostenibilidad
Inclusión de enfoques
Relación intercultural
……..Walter Melgar Paz
10. La definición del enfoque de la
evaluación
• Toma en cuenta la misión de la organización y sus mandatos
específicos.
• Expresa los marcos conceptuales, políticos y valorativos de
quienes emprenden el proceso de evaluación.
• Reconoce la existencia de actores diversos con intereses y
necesidades particulares.
• Define el proceso, contenido y alcances mediante consulta y
negociación.
• Busca establecer compromisos y beneficios compartidos en el
proceso y sobre el producto.
• Tomando en cuenta todo lo anterior, precisa claramente(a
través de preguntas orientadoras) las dimensiones / temáticas
que abordarán con la evaluación.
Walter Melgar Paz
11. Cómo determinar el impacto??
Walter Melgar Paz
Escenario de
influencia del
proyecto y “zonas de
impacto”
Resultado
Objetivo General
Resultado
Resultado
Objetivo
Específico
Zona de
impacto
Zona de
impacto
Zona de
impacto
Zona de
impacto
Zona de
impacto
Zona de
impacto
ÁMBITO DEL
PROYECTO