Evaluacin de Programas y Proyectos CEPALILPES Temario Introduccin

Evaluación de Programas y Proyectos CEPAL/ILPES Temario • Introducción • Evaluación privada • Evaluación social • Precios sociales • Evaluación de programas • Matriz de Marco Lógico Eduardo Aldunate Experto APPGP ILPES, CEPAL Eduardo Aldunate APPGP - ILPES/CEPAL

Temario CEPAL/ILPES Temario • Introducción • Evaluación privada • Evaluación social • Precios sociales • Evaluación de programas • Matriz de Marco Lógico Eduardo Aldunate APPGP - ILPES/CEPAL • • • Introducción Evaluación privada Evaluación social Precios sociales Evaluación de programas Matriz de Marco Lógico

Los “Dedos Presupuestales” CEPAL/ILPES Temario • Introducción • Evaluación privada • Evaluación social • Precios sociales • Evaluación de programas • Matriz de Marco Lógico Eduardo Aldunate APPGP - ILPES/CEPAL

Evaluación y Ciclo de Vida CEPAL/ILPES Temario Preinversión Inversión Operación • Introducción • Evaluación privada • Evaluación social • Precios sociales • Evaluación de programas • Matriz de Marco Lógico Eduardo Aldunate APPGP - ILPES/CEPAL Evaluación ex-ante Cronograma Costos Cantidad Calidad Control de proceso C 4 Evaluación de resultados Evaluación Ex-Post

CEPAL/ILPES Temario • Introducción • Evaluación privada • Evaluación social • Precios sociales • Evaluación de programas • Matriz de Marco Lógico Eduardo Aldunate APPGP - ILPES/CEPAL Evaluación ¿De qué se trata ? Estimar y comparar los costos y los beneficios de un proyecto para decidir la conveniencia de su ejecución.

¿Costos y beneficios para quién? CEPAL/ILPES Temario • Introducción • Evaluación privada Persona o empresa: Evaluación Privada Evaluación financiera • Evaluación social • Precios sociales • Evaluación de programas • Matriz de Marco Lógico Eduardo Aldunate APPGP - ILPES/CEPAL Todos los habitantes del país por igual: Evaluación social Evaluación económica

Determinación de Beneficios y Costos CEPAL/ILPES Temario Pasos a seguir: • Introducción • Evaluación privada • Evaluación social • Precios sociales • Evaluación de programas • Matriz de Marco Lógico Eduardo Aldunate APPGP - ILPES/CEPAL • Identificación: ¿cuáles? • Cuantificación: ¿cuánto? • Valoración: ¿cuánto vale?

Tipos de evaluación CEPAL/ILPES Temario • Introducción • Evaluación privada • Evaluación social Evaluación Beneficio Costo • Precios sociales • Evaluación de programas • Matriz de Marco Lógico Eduardo Aldunate APPGP - ILPES/CEPAL Costo eficiencia Acción Identificar Costos Ö Beneficios Ö Cuantificar Ö Ö Valorar Identificar Ö Ö Cuantificar Ö Ö? Valorar Ö X

Flujo de ingresos y costos CEPAL/ILPES Temario • Introducción • Evaluación privada • Evaluación social • Precios sociales • Evaluación de programas • Matriz de Marco Lógico Eduardo Aldunate APPGP - ILPES/CEPAL • Ordena la información • Facilita detectar errores u omisiones • Simplifica los cálculos

Valor del dinero en el tiempo CEPAL/ILPES Temario • Introducción Efecto de la inflación: • Evaluación privada • Evaluación social • Precios sociales • Evaluación de programas • Matriz de Marco Lógico Eduardo Aldunate APPGP - ILPES/CEPAL El costo de oportunidad: Hoy En un año

Indicadores Beneficio - Costo CEPAL/ILPES Temario • Introducción • Evaluación privada • Evaluación social • Precios sociales • Evaluación de programas • Matriz de Marco Lógico Eduardo Aldunate APPGP - ILPES/CEPAL • VAN: Valor Actual Neto ( o VPN) • TIR: Tasa Interna de Retorno • Otros criterios – Razón Beneficio/Costo – Período de recuperación del capital – TRI

Valor Actual Neto (VAN) CEPAL/ILPES Temario • Introducción • Evaluación privada • Evaluación social • Precios sociales • Evaluación de programas • Matriz de Marco Lógico Eduardo Aldunate APPGP - ILPES/CEPAL Ejemplo con tasa de descuento de 10 % Año 0 1 2 3 4 5 Costos 2500 150 300 150 650 Beneficios 1000 1000 Neto -2500 850 700 850 350 (1+r) i 1 1. 21 1. 33 1. 46 1. 61 V. A. -2500 773 702 526 582 217 VAN = 300

Tasa Interna de Retorno (TIR) CEPAL/ILPES Temario • Introducción • Evaluación privada • Evaluación social • Precios sociales • Evaluación de programas • Matriz de Marco Lógico Eduardo Aldunate APPGP - ILPES/CEPAL

Indicadores Costo - Eficiencia CEPAL/ILPES Temario • Introducción • Evaluación privada • Evaluación social • Precios sociales • Evaluación de programas • Matriz de Marco Lógico Eduardo Aldunate APPGP - ILPES/CEPAL • Valor actual de los costos VAC • Costo anual equivalente CAE • VAC / VA Beneficiarios

Evaluación Social CEPAL/ILPES Temario • Introducción • Evaluación privada • Evaluación social • Precios sociales • Evaluación de programas • Matriz de Marco Lógico Eduardo Aldunate APPGP - ILPES/CEPAL • La Evaluación social de proyectos permite determinar el impacto que generará la ejecución de un proyecto sobre la economía nacional (sociedad en su conjunto). • Difiere de la evaluación privada de proyectos ya que: – Los precios de mercado no reflejan el verdadero costo social de producción de esos bienes o servicios (existencia de distorsiones de mercado). – Los privados no valoran adecuadamente los beneficios de los proyectos. – Los privados no incorporan en su evaluación los efectos indirectos (positivos o negativos) generados a otros agentes.

Evaluación Social CEPAL/ILPES Temario • Introducción • Evaluación privada • Evaluación social • Precios sociales • Evaluación de programas • Matriz de Marco Lógico Eduardo Aldunate APPGP - ILPES/CEPAL 1. Precios de Mercado “mentirosos” – Los precios de mercado no reflejan los costos reales de producción debido a la existencia de: • • • Impuestos/Subsidios Cuotas Precios Mínimos/Precios Máximos Monopolios/Monopsonios Externalidades

Evaluación Social CEPAL/ILPES Temario • Introducción 2. Inadecuada Valoración de Beneficios • No existe un mercado formal del bien – • Evaluación privada • • • Evaluación social – • Precios sociales • Evaluación de programas • Matriz de Marco Lógico Eduardo Aldunate APPGP - ILPES/CEPAL Para determinar su valoración podemos utilizar: • Precios Hedónicos Valoración contingente Si no es posible estimar beneficios, evaluamos con criterio de mínimo costo o de costoeficiencia. Ev. Privada no incluye excedente del consumidor.

Evaluación Social CEPAL/ILPES Temario • Introducción • Evaluación privada • Evaluación social • Precios sociales • Evaluación de programas • Matriz de Marco Lógico Eduardo Aldunate APPGP - ILPES/CEPAL 3. No incorporación de externalidades • Sobre el medio ambiente • Sobre otros usuarios • En mercados relacionados

Evaluación Social CEPAL/ILPES Temario • Introducción • Evaluación privada • Evaluación social • Precios sociales • Evaluación de programas • Matriz de Marco Lógico Eduardo Aldunate APPGP - ILPES/CEPAL Precios Sociales (P. Sombra – P. de Cuenta) Para no evaluar con “precios mentirosos” es necesario calcular Precios Sociales, es decir, precios que reflejen el verdadero costo de oportunidad de los bienes para la sociedad. • Precios Sociales de los Factores Básicos: – Mano de Obra – Costo Capital – Divisa • Valor Social del Tiempo de Viaje. • Precio Social de los Costos de Operación Vehicular (Combustible, lubricantes, neumáticos, entre otros).

Tasa Social de Descuento CEPAL/ILPES País Temario Argentina • Introducción Bolivia • Evaluación Chile privada Tasa Referencias 12% Resolución N° 110/96 de la Secretaría de Programación Económica* (1996) 12, 07% Ministerio de Hacienda, Resolución No. 684, 2002 10% Precios Sociales para la evaluación de los proyectos. SEBI 2005 Colombia 12% Preguntas frecuentes, Nº 15 en el sitio del DNP. México 16. 29 a 21. 57 % • Evaluación social • Precios sociales Perú • Evaluación de programas Uruguay • Matriz de Marco Lógico España Eduardo Aldunate APPGP - ILPES/CEPAL El Costo de Oportunidad de los Fondos Públicos y la Tasa Social De Descuento, Héctor Cervini Iturre. 14% Anexo SNIP 09: Parámetros de Evaluación La Tasa Social de Descuento, Informe Final (2000) 12% Los Parámetros Nacionales de Cuenta en el Uruguay, Presidencia de la República, Oficina de Planeamiento y Presupuesto (1986) Entre 4, 8 y Tasas de descuento para la evaluación de inversiones públicas: más de 20% estimaciones para España, Guadalupe Souto Nieves, (2003) * Esta resolución fue derogada el año 97, pero no hay información más actualizada.

Valor social del trabajo CEPAL/ILPES País Temario • Introducción Bolivia • Evaluación privada • Evaluación social Chile • Precios sociales • Colombia Evaluación de programas • Matriz de Marco Lógico Perú no calificada Eduardo Aldunate APPGP - ILPES/CEPAL Categoría Factor de ajuste Calificada Semi calificada No calificada urbana No calificada rural 1, 00 0, 43 0, 23 0, 64 Calificada Semi calificada No calificada 0, 98 (1) 0, 68 (0. 94) 0, 62 (0. 89) Calificada No calificada 1, 00 0, 60 Lima Metropolitana Resto costa urbano/rural Sierra urbano/rural Selva urbano/rural 0, 86 0, 68/0, 57 0, 60/0, 41 0, 63/0, 49 Referencias Ministerio de Hacienda, Resolución No. 684, 2002 Precios Sociales para la evaluación de los proyectos. SEBI 2005 Manual Metodológico General, (2002) Formato EV-12. Anexo SNIP 09: Parámetros de Evaluación, Dirección General de Programación Multianual del Sector Público

Valor social de la divisa CEPAL/ILPES Temario Factor de ajuste = Valor social de la divisa Valor privado de la divisa • Introducción • Evaluación privada País Factor de ajuste • Evaluación social Bolivia 1, 19 Ministerio de Hacienda, Resolución No. 684, 2002 Chile 1, 01 Precios Sociales para la evaluación de los proyectos SEBI 2005 Perú 1, 08 Anexo SNIP 09: Parámetros de Evaluación El Precio Sombra de la Divisa, Informe final (2000) Uruguay 1, 31 Actualización de precios de cuenta para el Uruguay, Roberto Fernández Gaeta, 1995. • Precios sociales • Evaluación de programas • Matriz de Marco Lógico Eduardo Aldunate APPGP - ILPES/CEPAL Referencia

Valor social del tiempo CEPAL/ILPES Temario • Introducción • Evaluación privada • Evaluación social • Precios sociales • Evaluación de programas • Matriz de Marco Lógico Eduardo Aldunate APPGP - ILPES/CEPAL • Corresponde al costo de oportunidad del tiempo de los involucrados. • Es particular para cada persona e instante. • Es distinto para trabajo y ocio

Valor social del tiempo CEPAL/ILPES Temario Chile • Introducción • Evaluación privada Propósito • Evaluación social Usuarios de transporte urbano Todo vehículo 1, 24 Usuarios de transporte interurbano Automóviles Camionetas Camiones de dos ejes Camiones de más de dos ejes Buses 13, 04 15, 40 5, 31 49, 97 • Precios sociales • Evaluación de programas • Matriz de Marco Lógico Tipo Valor en (US$/hora/pasajero) y en (US$/hora/vehículo) Fuente: Precios Sociales para la evaluación de los proyectos, Mideplan, 2004 Eduardo Aldunate APPGP - ILPES/CEPAL

Valor social del tiempo CEPAL/ILPES Temario • Introducción Perú Propósito • Evaluación privada • Evaluación social • Precios sociales • Evaluación de programas • Matriz de Marco Lógico General Tipo Laboral urbana Laboral rural No laboral Aéreo nacional Interurbano auto Usuarios de Interurbano tte. Público transporte Urbano auto Urbano tte. público Valor (S/hora) 4, 96 3, 32 0, 3 del anterior para adultos y 0, 15 para niños 4, 25 3, 21 1, 67 2, 8 1, 08 Fuente: Anexo SNIP 09: Parámetros de Evaluación, Dirección General de Programación Multianual del Sector Público, Perú. Eduardo Aldunate APPGP - ILPES/CEPAL

CEPAL/ILPES Temario • Introducción • Evaluación privada • Evaluación social • Precios sociales • Evaluación de programas • Matriz de Marco Lógico Eduardo Aldunate APPGP - ILPES/CEPAL Impacto de la creación del SNIP de Colombia

Referencias CEPAL/ILPES Temario • Introducción • Evaluación privada • Evaluación social • Precios sociales • Evaluación de programas • Matriz de Marco Lógico Eduardo Aldunate APPGP - ILPES/CEPAL • Breve Glosario de Términos para el Evaluador de Proyectos, Instituto para el Mejoramiento de la Calidad de la Inversión - IMCI (México). • Metodología de evaluación socioeconómica de inversiones nacionales y extranjeras; Ferra, Coloma y Botteon, Claudia. • Errores más frecuentes en la evaluación de políticas y proyectos, Joan Pasqual Rocabert y Guadalupe Souto Nieves. • Harberger, A. , "Reflections on Social Project Evaluation" • Harberger, A. , "Economic Project Evaluation, Part 1: Some Lessons for the 1990 s"

Evaluación y Ciclo de Vida CEPAL/ILPES Temario Preinversión Inversión Operación • Introducción • Evaluación privada • Evaluación social Evaluación ex-ante Control de proceso C 4 Evaluación de resultados • Precios sociales • Evaluación de programas • Matriz de Marco Lógico Eduardo Aldunate APPGP - ILPES/CEPAL Evaluación Ex-Post

CEPAL/ILPES Temario • Introducción • Evaluación privada • Evaluación social • Precios sociales • Evaluación de programas • Matriz de Marco Lógico Eduardo Aldunate APPGP - ILPES/CEPAL

CEPAL/ILPES Temario • Introducción • Evaluación privada • Evaluación social • Precios sociales • Evaluación de programas • Matriz de Marco Lógico Eduardo Aldunate APPGP - ILPES/CEPAL ¿Qué es la Matriz de Marco Lógico? • Es un instrumento de gestión de programas y proyectos. • Permite fortalecer la preparación y la ejecución de programas y proyectos. • Resume los principales resultados de la preparación del programa o proyecto. • Sirve de base para la programación de la ejecución. • Facilita el seguimiento y la evaluación de resultados e impactos.

La Matriz de Marco Lógico CEPAL/ILPES Temario Medios de Objetivos Indicadores verificación Supuestos • Introducción • Evaluación privada Fin • Evaluación social • Precios sociales • Evaluación de programas • Matriz de Marco Lógico Eduardo Aldunate APPGP - ILPES/CEPAL Propósito Componentes Actividades

Objetivos CEPAL/ILPES Temario • Introducción • Evaluación privada • Esta columna se conoce también como Resumen Narrativo del Proyecto. • Responde a las interrogantes: • Evaluación social – ¿Cuál es la finalidad del proyecto? • Precios sociales – ¿Para que se hace el proyecto? – ¿Qué se va a hacer? – ¿Cómo se hará? • Evaluación de programas • Matriz de Marco Lógico Eduardo Aldunate APPGP - ILPES/CEPAL Fin Propósito Componentes Actividades

Objetivos Lógica vertical del proyecto CEPAL/ILPES Temario Si el proyecto está bien diseñado se pueden examinar los vínculos causales de abajo hacia arriba: • Introducción • Evaluación privada Fin • Evaluación social • Precios sociales • Evaluación de programas • Matriz de Marco Lógico Eduardo Aldunate APPGP - ILPES/CEPAL Propósito Componentes Actividades · El Fin es una respuesta al problema más importante en el sector. · Si se logra el Propósito, el proyecto, contribuirá al logro del Fin. · Cada Componente es necesario para lograr el Propósito. · No falta ningún Componente. · Las Actividades son las necesarias para producir cada Componente.

Indicadores CEPAL/ILPES Temario • Introducción • Evaluación privada • Evaluación social • Precios sociales • Evaluación de programas • Matriz de Marco Lógico Eduardo Aldunate APPGP - ILPES/CEPAL • Proporcionan la base para supervisar y evaluar el proyecto. • Definen metas que nos permiten conocer en que medida se cumplen los objetivos • Establecen una relación entre dos o más variables. • Pueden cubrir aspectos cualitativos o Indicadores cuantitativos. • Entregan información cuantitativa. Fin Propósito • Deben ser acordados con los Compoinvolucrados nentes Actividades

Medios de Verificación CEPAL/ILPES Temario • Introducción • Evaluación privada • Evaluación social • Precios sociales • Evaluación de programas • Matriz de Marco Lógico Eduardo Aldunate APPGP - ILPES/CEPAL ¿Cómo obtenemos la evidencia? • Son las fuentes de información que se pueden utilizar para verificar el logro de los objetivos (cálculo de los indicadores). • Pueden incluir: – Estadísticas Medios de verificación – Material publicado – Inspección visual Fin – Encuestas Propósito Compo– Informes de auditoría nentes Activi– Registros contables dades

Supuestos CEPAL/ILPES Temario • Introducción • Evaluación privada • Evaluación social • Precios sociales • Evaluación de programas • Matriz de Marco Lógico Eduardo Aldunate APPGP - ILPES/CEPAL ¿Cómo podemos manejar los riesgos? • Cada supuesto corresponde a un riesgo que enfrenta el proyecto y que está más allá del control directo de la gerencia del proyecto. • El supuesto se expresa como una condición que tiene que darse para Fin que se cumpla la relación de Propósito causalidad en la jerarquía de Compoobjetivos. nentes Activi • Sólo se consideran los riesgos que dades tengan una probabilidad razonable de ocurrencia. Supuestos

CEPAL/ILPES Temario • Introducción • Evaluación privada • Evaluación social • Precios sociales • Evaluación de programas • Matriz de Marco Lógico Eduardo Aldunate APPGP - ILPES/CEPAL ¿Qué NO es la Matriz de Marco Lógico? • No es un método de evaluación exante de proyectos o programas • No es un método de programación de la ejecución • No es autosuficiente para una buena gestión de proyectos • No es una panacea • No es un dogma

Referencias CEPAL/ILPES 1. Temario • Introducción • Evaluación privada 2. • Evaluación social • Precios sociales • Evaluación de programas • Matriz de Marco Lógico Eduardo Aldunate APPGP - ILPES/CEPAL 3. Banco Interamericano de Desarrollo - BID, Oficina de Supervisión y Evaluación - EVO, “Evaluación: Una herramienta de gestión para mejorar el desempeño de los proyectos, Anexo I: La Matriz de Marco Lógico”. Disponible en: http: //www. iadb. org/ove/spbook/lamatriz. htm Helming, Stefan y Göbel, Michael, GTZ, “Planificación de proyectos orientada a objetivos (ZOPP), Orientaciones para la planificación de proyectos y programas nuevos y en curso”. Disponible en español en: http: //www. campolatino. org/paginas/descargas/Documentos/GTZ_ZOPP-sp. pdf. Disponible en portugués en: http: //www. zopp. com. br/zopp_p. pdf Ministerio de Hacienda de Chile, Dirección de Presupuesto, “Metodología para la Elaboración de la Matriz de Marco Lógico”. Disponible en: http: //www. dipres. cl/control_gestion/evaluacion_programas_guber namentales/metodologia. html

Referencias CEPAL/ILPES 4. Temario • Introducción • Evaluación privada 5. • Evaluación social • Precios sociales • Evaluación de programas • Matriz de Marco Lógico Eduardo Aldunate APPGP - ILPES/CEPAL 6. Organización Panamerica de Salud – OPS, Oficina de Relaciones Externas, “Manual de Monitoreo de la Ejecución de Proyectos”, abril 1999. Disponible en: http: //www. paho. org/Spanish/DEC/Manual_de_Monitoreo. pdf Aus. Aid (Australian Government’s Overseas Aid Programme); Aus. GUIDE, Aus. GUIDElines, The logical framework approach. Disponible en: http: //www. ausaid. gov. au/ausguidelines/ausguidelines 1. pdf World Bank (2000). The Logical Framework Handbook, World Bank, http: //www. worldbank. org/evaluation/logfram/ Nota Informativa del ILPES sobre Evaluación www. ilpes. org => “Publicaciones”

Para terminar. . . CEPAL/ILPES FIN Temario • Introducción • Evaluación privada • Evaluación social • Precios sociales F • Evaluación de programas • Matriz de Marco Lógico Eduardo Aldunate APPGP - ILPES/CEPAL F I N N AL FIN!

CEPAL/ILPES Temario • Introducción • Evaluación privada • Evaluación social • Precios sociales • Evaluación de programas • Matriz de Marco Lógico Eduardo Aldunate APPGP - ILPES/CEPAL

ODA AL AIRE CEPAL/ILPES (Pablo Neruda, fragmentos) Andando en un camino Temario encontré al aire, lo salude y le dije • Introducción con respeto: "Me alegro • Evaluación privada de que por una vez dejes tu transparencia, • Evaluación social así hablaremos". . … • Precios Yo le besé su capa sociales de rey del cielo, • Evaluación me envolví en su de programas bandera • Matriz de de seda celestial Marco Lógico y le dije: Eduardo Aldunate APPGP - ILPES/CEPAL monarca o camarada, hilo, corola o ave, no sé quién eres, pero una cosa te pido, no te vendas. No, aire, no te vendas, que no te canalicen, que no te entuben, que no te encajen ni te compriman, que no te hagan tabletas, que no te metan en una botella, cuidado! El agua se vendió y de las cañerías en el desierto he visto terminarse las gotas y el mundo pobre, el pueblo caminar con su sed tambaleando en la arena. . . .