Vinculando microempresas y actividades generadoras de ingresos con

Vinculando microempresas y actividades generadoras de ingresos con servicios energéticos para la población en condiciones de pobreza del Chaco Sudamericano. MONITOREO & EVALUACIÓN DE PROGRAMAS Y PROYECTOS ENERGÉTICOS NOMBRE Y ORGANIZACIÓN DEL RESPONSABLE DE ESTE PRODUCTO: DR. MANUEL FUENTES - IT POWER AUTORES: DRA. ALBA GAMARRA DE GUARDIA ING. WALTER CANEDO ESPINOZA CINER

Manual de Monitoreo & Evaluación Presentado en el Taller en San Bernardino 11 y 12 de marzo, Asunción - Paraguay

Manual de Monitoreo & Evaluación

El Monitoreo es una herramienta que usa la recolección sistemática de datos para indicadores específicos, de manera tal que aporten a la gestión y a los principales actores acerca del desarrollo sobre la marcha de las intervenciones, a través de indicadores para el avance y logro de objetivos; así como el progreso en el uso de los recursos colocados. Módulo 1: 16

La Evaluación es definida como la valoración objetiva y sistemática del diseño, implementación y resultados de un proyecto, programa o política que está en avance o ha concluido. El objetivo es determinar la importancia y el cumplimiento de los objetivos, avance de eficiencia, efectividad, impacto y sostenibilidad. La evaluación debe proveer información que sea creíble y útil, permitiendo la incorporación de lecciones aprendidas en los procesos de toma de decisiones, tanto de receptores como de donantes. Se ocupa de quién, o qué grupo, se ha beneficiado del sistema interinstitucional de trabajo (o fue adversamente afectado), en qué cuantía, de qué manera y por qué. Módulo 1: 16

Dinámica: Preparación del M&E: Se solicita a los participantes realizar una lluvia de ideas e identificar todas las tareas que están involucradas en la preparación para conducir las actividades de M&E. Tiempo: 10 minutos. Trabajo por parejas. No se compartirá la información en plenaria, hasta la revisión nuevamente por parejas al finalizar el Módulo 1: 16

Procesos del M&E: IMPLEMENTAR EVALUAR, APRENDER, DECIDIR PLANIFICAR IMPLEMENTAR REFLEXIONAR, APRENDER, DECIDIR, JUSTIFICAR MONITOREAR IMPLEMENTAR REFLEXIONAR, APRENDER, DECIDIR, AJUSTAR Módulo 1: 21

El sistema de M&E debe contener los elementos que responden a las siguientes preguntas: • • • Qué? Quién? Cuándo? Cómo? Con qué recursos? Módulo 1: 22

Tipos de M&E • Eficacia: Número de clientes conectados o volumen de ventas. • Efectividad: los actores pueden crear “nuevos usos” para el servicio de electricidad. • Impacto: al haberse incrementado los usos de electricidad ha repercutido en la mejora de condiciones sociales y económicas de los beneficiarios. Módulo 1: 23 y 24

Indicadores �Los indicadores son parámetros seleccionados para representar una situación compleja y a menudo imposible de medir directamente. Estos pueden ser cuantitativos o cualitativos; y la combinación de ellos resulta en indicadores mixtos. ü Ejemplos: Analizar ejemplos en páginas 27 -29. Módulo 1: 26, 27 y 28

Tipos de M&E: Analizar ejemplo de página No. 30 Módulo 1: 30

Pasos para el Monitoreo: ü Paso 1: Introducción del concepto de eficacia, efectividad e impacto. ü Paso 2: Generar una lista de indicadores para cada aspecto y clarificar qué variables estarán enlazadas. ü Paso 3: Decidir cómo realizará la recolección de la información que necesita y dónde se guardará. ü Paso 4: Decidir cuán frecuentemente se analizará la información. ü Paso 5: Recolectar, analizar y reportar. Módulo 1: 32

Pasos para la Evaluación: Elaborar los TDR s para la evaluación: ü ü ü Antecedentes Objetivos Preguntas clave de evaluación Objetivos específicos Metodología Temas logísticos Módulo 1: 32

Ventajas y desventajas de la evaluación interna y externa de un proyecto: Analizar el cuadro en la pagina No. 37. Módulo 1: 37

Pasos para elaborar un Plan de M&E: 1. Identifique los actores involucrados en las necesidades de M&E. 2. Elabore un diagrama de su proyecto. 3. Asigne resultados del proyecto a los vínculos con su cadena de efectos. 4. Elija los indicadores y métodos de recolección de información. 5. Trate los temas transversales. 6. Elabore un borrador del esquema de M&E. 7. Valide su esquema con los actores del M&E. 8. Integre los aportes de los actores en el diseño del M&E: 9. Ejecute el M&E como parte del proyecto. 10. Elabore conclusiones, presente los resultados del M&E, los acuerdos para el seguimiento de las recomendaciones. Módulo 1: 37 -40

Módulo 2: Tipos de métodos de M&E Módulo 2: 56

Tipos de métodos de M&E: MARCO LÓGICO USAID Jerarquía o Sistema de objetivos Fin: Objetivo de mayor nivel jerárquico. Alude a un objetivo de desarrollo o a una apuesta política de largo aliento que justifica la existencia de la organización y que por sus dimensiones complejas no es posible determinar cuándo se alcanzará. Propósito: Es el objetivo que justifica la intervención de la institución a través de un proyecto específico. Nos señala el cambio más importante que esperamos alcanzar con nuestra intervención. El objetivo a nivel de propósito determina el impacto del proyecto. (Nace respuesta al problema central identificado). Resultados: Son los objetivos específicos que se propone alcanzar el proyecto para garantizar el logro del Propósito. Los cambios propuestos a este nivel representan los efectos esperados como producto de nuestra intervención y por los cuales asumimos responsabilidad directa. Acciones: Actividades principales que ejecutándose colectivamente deben producir resultados. Las acciones nos indican cómo se desarrollará el proyecto y el tipo de recursos humanos y materiales necesarios para su cumplimiento. Módulo 2: 57

Tipos de métodos de M&E: Enfoque en la demanda – ESMAP Este enfoque se concentra en integrar el M&E desde la fase de preparación del proyecto involucrando a la demanda, más que en el enfoque convencional del monitoreo durante la ejecución y la realización de evaluaciones de impacto. Estadío Proy. Preparación Diseño Ejecución Evaluaciónde Impacto M&E convencional Nuevo enfoque de M&E Fig. 2. 1: Enfoque orientado a la demanda Módulo 2: 58

Tipos de métodos de M&E: El enfoque basado en Resultados – Banco Mundial Enfoque basado en resultados Enfoque tradicional Insumos Financiamiento privado gestionado por el proveedor del servicio. Financia miento privado Proveedor del servicio Receptores Proveedor del servicio cia an o n i F ent mi blico pú Financiamiento para el servicio público Receptores Fig 2. 2: Enfoque basado en Resultados Módulo 2: 60

Tipos de métodos de M&E: El enfoque de sistema de gestión basado en resultados de OECD - DAC Módulo 2: 62

Cierre de módulo 2: Comparación de enfoques del M&E: Por el tipo de trabajo que desarrolla, cuál de estos enfoques de M&E sugeriría utilizar en su proyecto? Comparta con su colega sus puntos de vista. Tiempo total: 10 minutos. Módulo 2: 62

Módulo 3: Análisis de los participantes en el M&E Un actor es la persona u organización con influencia, interés y poder de decisión en el ciclo del proyecto o programa. Es importante diferenciar al actor con el “interesado” (stakeholder), ya que los interesados son participantes que tienen interés y son afectados positiva o negativamente de alguna manera con el proyecto o programa. Módulo 3: 68

Módulo 3: Análisis de los participantes en el M&E Primarios: Individuos o grupos afectados directamente con la intervención del proyecto. Secundarios: Actores involucrados como intermediarios en el proyecto tales como miembros de ONGs, empresas eléctricas, instaladores, etc. Externos: Actores que no están involucrados formalmente en el proyecto; pero cuyas acciones y decisiones pueden crear impacto en las decisiones y actividades del proyecto o programa. Donantes o gobernantes (si es que no son ejecutores) pueden entrar en esta categoría. Módulo 3: 69

Módulo 3: Análisis de los participantes en el M&E • • Autoridades beneficiarias del sector público. Donantes. Autoridades públicas donantes del país. Usuarios, clientes. Equipo de gestión del proyecto. Microempresarios. Equipo interno del proyecto. Módulo 3: 70

Módulo 3: Análisis de los participantes en el M&E Módulo 3: 72

Módulo 3: Análisis de los participantes en el M&E Módulo 3: 73 -74

Módulo 3: Análisis de los participantes en el M&E Módulo 3: 76

Módulo 3: Análisis de los participantes en el M&E Que inciden Que son afectados Módulo 3: 80

Módulo 4: Indicadores de M&E Actividades: ¿Qué es lo que hace el proyecto? Insumos Resultados ¿Qué es lo que ¿Cuáles son los aportas? resultados de lo que haces? • Tiempo • Dinero Bienes y • Aspectos Servicios. técnicos • Recursos Ej. : humanos. Entrenamiento / • Datos, medios creación de e instrumentos. capacidades. • Conocimientoe información. I: 98 y 99 Confort, ahorro, • I: eficiencia. clientes 94 -98 conectados, volumen de Impactos: Consecuencias en metas de desarrollo nacionales , MDMs. I: 104 Efectos (+ / -) Objetivos 1 er. nivel de consecuencias. Dependen de insumos, acciones y decisiones que no dependen del proyecto. Diferencia entre los resultados del proyecto y aquellos que se hubiesen logrado sin la intervención. Directos o indirectos, a corto y largo plazo; positivos o negativos con beneficios y y limitaciones. Prácticas comportamientos. Ej. : Personal mejor capacitado en regulación de energía e implementación de programas. Ej. : Creación de programas energéticos para el sector rural. Mejora del marco regulatorio en apoyo a la electrificación para sector pobre de la Módulo 3: 80 población.

Módulo 4: Indicadores de M&E Módulo 4

Módulo 4: Niveles de impacto Módulo 4: 104

Módulo 4: Proceso de análisis de indicadores de resultados Determine algunos indicadores clave para el proceso de monitoreo / evaluación. Obtención de indicadores. información acerca de los Desarrolle una estructura para el análisis de los temas emergentes y preocupaciones, donde Ud. suponga que pueden esperarse variaciones de lo esperado y/o planificado. Analice la información, organícela bajo temas y asuntos. Identifique modelos, interpretaciones. tendencias y posibles Escriba sus descubrimientos y conclusiones. Trabaje posibles vías para seguir adelante (recomendaciones). Módulo 4: 109

Módulo 5: Proceso de implementación de un Plan de M&E Módulo 5: 126

Módulo 5: Proceso de implementación de un Plan de M&E Módulo 5: 126

Módulo 5: Proceso de implementación de un Plan de M&E Herramientas más comunes para levantamiento de información. ü Estudios de caso. ü Observaciones grabadas. ü Diarios. ü Grabación de incidentes o análisis importantes (denominados “análisis de incidentes críticos” ü Cuestionarios estructurados. ü Entrevistas personales. ü Grupos focales. ü Encuestas por muestreo. ü Revisión sistemática de información oficial de importancia. Módulo 5: 126

Sistema Interno de retroalimentación Módulo 5: 126

Módulo 5: Plan de M&E APLICABILIDAD Y COMPROMISO El objetivo de la tarea es examinar la aplicabilidad institucional del contenido del curso-taller en los proyectos y/o acciones de Monitoreo y Evaluación de la entidad en la que colaboran los participantes, y de cuyo análisis integral se extraen determinaciones concretas acerca de los cambios y mejoras sobre los sistemas de M&E. Actividades a realizar: • Identificar las principales acciones que se podrían emprender para mejorar los sistemas de monitoreo y evaluación de su institución, proyecto o programa. • Para la aplicación de esas acciones, identificar los principales obstáculos que pueden presentarse. • Establecer las medidas administrativas, técnicas y financieras y otras que deba realizar para superar los obstáculos y lograr el mejoramiento del sistema. Módulo 5: 135

Módulo 5: . • Proyectos exitosos. • GVEP International. • Agradecimientos. • Contactos: alba@ciner. org • Evaluación • Clausura. Módulo 5: 136