1. Monitoreo y Evaluación para la Gestión para Resultados Estrategia y Plan de Acción para la Efectividad en el desarrollo en Brasil—Taller de arranque Brasilia, 18/Sep/ 2006 Angel Saz-Carranza angel . saz @ nyu . edu

6. La organización pública como sistema de producción PROCESO Procesos de producción y prestación de servicios (sistemas de gestión) Servicios & Productos Resultados (cambio) INSUMOS Autorización Recursos humanos Tecnologías & información Recursos financieros Criterios de evaluación: Transparencia Responsividad Efectividad Calidad/Impacto Legitimidad Legalidad/Equidad Eficiencia/Economía OUTPUT

11. Evaluacion Introduccion: la evaluación de proyectos

13. Lógica de intervención / Teoría de cambio OBJETIVO ESPECÍFICO

15. Lógica de intervención / Teoría de cambio A1.1: Identificar deficits tecnológicos. A1.2: Adquirir tecnología necesaria. A2.1: Identificar deficits formativos. A2.2: Formar al personal. OI1: Tecnología utilizada es adecuada OI2: Personal capacitado OE: Agencia Estatal de Infraestructuras es eficaz OG: Transporte y comunicacion mejora

19. Ejercicio: 2 —construye indicadores e indica sus fuentes de verificación para la siguiente lógica de intervención— FDV.R1: Informe de asesoría técnica externa. FDV.R2: Certificados de formación. I.R1: Tecnología utilizada esta conforme con los estándares profesionales internacionales I.R2: El 100% del personal está capacitado para su posición de trabajo. OI1: Tecnología utilizada es adecuada OI2: Personal capacitado FDV.OE: Informe de monitoreo de la agencia I.OE: Normas de calidad de la red de carreteras controladas OE: Agencia Estatal de Infraestructuras es eficaz FDV.OG: Informes de investigación dirigidas a usuarios I.OG: La duración media de un trayecto via una las carreteras mejoradas se ha reducido un 15% OG: Transporte y comunicacion mejora

20. PROGRAMACIÓN FORMULACIÓN IDENTIFICACIÓN EVALUACIÓN EJECUCIÓN Evaluación ex-post Evaluación ex-ante Monitoreo

24. planificacion input aplicado proceso ejecutado output outcome situacion contrafactual objetivo 1 impacto efectividad eficacia 2 eficiencia 1 objetivo 2 eficacia 1 eficiencia 2 input asignado proceso planificado economía

25. Criterio de la evaluación  ECONOMÍA  Relaci ó n input asignadoi - input aplicado  EFICACIA  Relaci ó n objetivo fijado - resultado conseguido  EFICIENCIA  Relaci ó n input aplicado - output producido  EFECTIVIDAD  Relaci ó n output producido - resultado conseguido  IMPACTO  - Grado de modificaci ó n conseguido  EQUIDAD  Relaci ó n distribuci ó n valor p ú blico fijada - conseguida  SATISFACCI Ó N  Relaci ó n expectativas esperadas - satisfechas

26. Evaluación absoluta / postmoderna

27. Evaluación gestora / controladora

28. Evaluación positivista / científica

30. Programación Ejecución Evaluación Impacto Programación Ejecución Evaluación Impacto Programación Ejecución Programa 1 Programa 2 Programa 3 Marco temporal

31. MÉTODOS CUANTITATIVOS Encuestas Análisis bivariante Análisis de clusters Correlaciones MÉTODOS CUALITATIVOS Observación directa Grupos de expertos Entrevistas en profundidad Entrevistas desestructuradas MÉTODOS PARTICIPATIVOS Acceso a recursos Análisis de taréas Mapping Análisis de necesidades Pocket Charts Juego de roles Árboles Ranking Talleres: Planificación por objetivos Marco lógico HERRAMIENTAS ANALÍTICAS Análisis de beneficiarios Análisis de conflictos Análisis de génerio Análisis participativo rural Análisis de riesgo SARAR ( self-esteem, associative strength, resourcefulness, action planning and responsibility) Análisis de escenarios Análisis de stakeholder

33. Impacto A1 B1 A2 (con) B2 (sin) T1 (antes) T2 (después) Con P Sin P Impacto: diferencia entre lo que ha pasado (el outcome) y lo que hubiera pasado V. Estadística V. Interna V. Constructo

35. Sistemas de Evaluacion y Monitoreo

38. Para qué evaluar los resultados de la gestión? X X X X Responsabilización y rendimiento de cuentas X X X Planificación estratégica y global de las políticas X X Mejoramiento de políticas sectoriales y programas X X X X Asignación presupuestaria (racionalización del gasto) X X X Mejoramiento de la gestión organizacional Chile SCPG SCG Uruguay SEV Costa Rica SINE Colombia SINERGIA País Propósito declarado

39. Modernizacion & Democratizacion Alemania Holanda 80 90 Modernizacion Democratizacion Modernizacion Democratizacion

41. Dos Orientaciones Uruguay : OPP - Oficina de Planeamiento y Presupuesto Chile : DIPRES - Division de Presupuesto, Ministerio de Finanzas Colombia : DNP - Departamento Nacional de Planeación Costa Rica : Mideplan - Ministerio de Planificación Organizado en función del ciclo presupuestario Organizado en función del Plan Nacional de Desarrollo Enfasis en la responsabilización gerencial Funcion: Aprendizaje/Asignación Enfasis en la responsabilización política Función: Aprendizaje/legitimación Modelo Presupuesto Modelo Plan

42. Evaluación de los resultados de la gestión pública para Principal criterio de responsabilización: gerencial Principal criterio de responsabilización: pol í tico Democratizar: Responsabilización y transparencia Relaciona el desempeño con la asignación del presupuesto Relaciona el desempeño con el desarrollo de la política pública Modernizar: El mejoramiento de la gestión Modelo Presupuesto Modelo Plan Objetivos declarados

44. Casos LA Niveles de desempeño CHILE SSPG SCG (mon&eva) URUGUAY SEV (monitoreo) CSTA RICA SINE (monitoreo) COLOMBIA SINERGIA (mon&eva) Nivel Unidad de presupuesto Micro Programas Agencias Agencias Programas Agencias Programas [agencias] Meso Sectores PND PND Sectores Macro

49. Tipos de informacion & usuarios INE ME Informacion 1 Informacion 2 Retroalimentacion Informacion 3 Consultores Decisores Gerentes … … Ciudadanos Usuarios 1 Usuarios 2 Informacion 4

54. La GpR en NYC Mayor´s Management Report

57. Informe del alcalde

60. Informe 2: Indicadores

61. Informe 3: Descripcion de indicadores

62. Estadisticas vecinales

66. El servicio 311

69. La tarjeta de resultados ( scorecard )

70. CapStat: CompStat

71. CapStat: Campanya politica

73. "En la medida en que las leyes de la matemática se refieren a la realidad, no son exactas, y en tanto son exactas, no se refieren a la realidad." Albert EINSTEIN