ABC de Monitoreo y Evaluacin de proyectos de

ABC de Monitoreo y Evaluación de proyectos de desarrollo con enfoque en OSC Martes 11 de Junio de 2019 Tijuana, BC

Agenda 1. Presentación de participantes 2. Entendiendo la teoría 1. Las dimensiones de la evaluación 2. Teoría de Cambio 3. Creación de indicadores y metas 3. Manos a la obra: Ejercicio práctico

Presentación de participantes Platica con tu compañero del lado para presentarlo después • Nombre • Institución • Tema que trabaja la organización • Expectativas de taller ( 10 mins)

Desafíos y Fortalezas de M y E ( 20 mins) Objetivo: Recopilar experiencias, conocerse y compartir buenas y ”malas” prácticas en Monitoreo y Evaluación En equipos de 4 -5 personas, contestesten las siguientes preguntas en el rotafolio: • ¿Qué fortalezas tienes en relación al monitoreo de proyectos? • ¿Qué fortalezas tienes en relación con la evaluación de proyectos? • ¿Qué desafíos identificas en el monitoreo de tus proyectos? • ¿Qué desafíos identificas en la evaluación de tus proyectos?

Compartimos nuestras reflexiones

Objetivo general Facilitar conceptos básicos y buenas prácticas sobre el monitoreo y evaluación de proyectos de desarrollo implementados por OSC y enfatizar su importancia para el fortalecimiento organizacional en el sector de Sociedad Civil

DIMENSIONES DE LA EVALUACIÓN

Conceptos Clave Auditoría Estudios Factibilidad Pre Monitoreo Evaluación Post

Tipos de evaluación: Por objetivos Pre Durante Post Fin Inicio Impacto Formativa Implementación Efectividad “Piloto” Resultados Propósitos

¿Para qué nos sirve evaluar? Prueba del IMPACTO Posicionamiento causa social Áreas de MEJORAS Incrementar los stakeholders Involucrados - Gerentes, Directivos, Consejo Donantes (Privados/ Individuales) Población Objetivo Empleados Voluntarios Gobierno M y E es necesario al nivel institucional, al nivel de estrategia organizacional, y al nivel de proyecto

Niveles de evaluación EXPLICAR CORRELACIONAR COMPROMETER JUSTIFICAR La intervención cuenta con la evidencia teórica de sus resultados Información existente La intervención está bien diseñada y satisface Experiencia Población Objetiva Evidencia que la intervención está creando cambios Pre/ post pruebas, correlaciones INCREMENTA EL RIGOR Evidencia isolada del impacto de la intervención en el resultado meta con significancia estadística Pruebas de control Evidencia que el impacto de la intervención es replicado en múltiples situaciones Estudios independientes/ repetitivos Más rigor= Más trabajo + Más $ y Más tiempo CAUSALIDAD

Proceso de Monitoreo y Evaluación eñ Dis Diagnóstico (necesidades) o Reportar/ Difusión Indicadores Monitoreo y Evaluación constante Medir/ analizar (pre-mid-post) Plan / recursos nta me ple Im n ció Línea Base Diseño herramientas/ fuentes de información

TEORÍA DE CAMBIO

¿Qué es? Un mapa visual de tu visión a largo plazo basado en la lógica que los recursos aplicados a actividades generan resultados que producen propósitos los cuales agregados generan impacto ¿Porqué es única? 1. Proceso retroactivo 2. No sólo hay causalidades lineares, sino interacciones multidimensionales a través de los diferentes propósitos y precondiciones que generan una meta a largo plazo

Elementos de la Teoría de Cambio Recursos Actividades Resultados Propósitos IMPACTO* +Supuestos (precondiciones) Descripción, cantidad y costo Humanos, físicos, financieros e intelectuales Descripción de la intervención Resultados medibles de la intervención (CP) Beneficios corto – mediano plazo creados por los resultados de intervenciones (MP) La diferencia de lo que pasó y de lo que hubiera pasado si la intervención no se hubiera hecho (LP)

Otras visualizaciones

Otras visualizaciones

Una buena teoría de cambio Se realiza colaborativamente Describe posibles soluciones e identifica las factibles según tiempo y recursos Tiene enfoque sistémico y fuerte trabajo entre actores Integra supuestos y riesgos más relevantes Integra cambios a las poblaciones afectadas

INDICADORES

Nuestros aliados: Indicadores Un indicador es una unidad de medida que ayuda a determinar el grado de avance hacia el logro de los resultados OBJETIVO GENERAL IMPACTO Indicador de Impacto Objetivo Específico Resultado Indicador de Resultado Actividad e Insumos Producto Indicador de proceso Objetivos, grados de complejidad y fuentes de información diferentes

Indicadores de CALIDAD: Características S. M. A. R. T. Población + Objetivo + Meta + Periodo • 90% de los niños inscritos en programas de inversión social afirman conocer y ejercer sus derechos al primer año de implementación. • Al menos 90% de las ONG’s inscritas en el programa de Fortalecimiento incrementaron su eficiencia en un 50% al 2020 • El margen de utilidad en el 3 er semestre del 2019 incrementa por 15%

Buenas prácticas: • Se pueden emplear varios indicadores para cada resultado, pero es recomendado usar los menos posibles para simplificar tu sistema de M y E • La selección de indicadores debe ser un proceso participativo, para asegurar tanto la apropiación del proyecto por parte de los involucrados, como la efectividad de los mismos • Tratar de utilizar indicadores ya establecidos de referentes nacionales e internacionales • Siempre que sea posible, los indicadores deben estar desagregados por sexo

Fuentes de información: Primarias Innovadoras Tradicionales • Encuestas • Focus groups • Observación directa Mejor para datos cualitativos (Hábitos de comportamiento, encuestas de satisfacción) Riesgo: Bias del encuestador y costo de implementación en lugares rurales VS • Lean Data (móvil) • Client-Centric Mobile (tablets) Mejor para variables estadísticas (Número de personas en familia, ingresos) y preguntas sensibles (anónimo). Relativamente más barato. Riesgo: Analfabetismo, penetración móvil

Resumiendo Comenzar con medir estos pasos ya es UN GRAN avance para cualquier OSC (trimestralmente) Recursos • • • Comunicar Revaluar objetivos Adaptar actividades Actividades Hipótesis de contraste Resultados Propósitos Indicadores Impacto Monitoreo y Evaluación Resultados Gpo control

¡Manos a la obra! ( 30 mins) Actividad en pareja: 1. Llenen el formato de Teoria de Cambio ( de su organización, o proyecto específico) 2. Escriban la narrativa de su Teoría de Cambio 3. Describan los Indicadores de Resultados, Procesos e Impacto Compartan la hoja con su compañero 1. Utilicen el checklist de monitoreo para evaluar el trabajo de su compañero y dictaminen Compartiremos nuestras reflexiones Recursos Actividades Resultados Propósitos IMPACTO*

¿Dudas?

ANEXOS

Checklist: Componente Teoría de cambio Fin (Impacto) Propósito Resultados Población objetivo (de ser posible desagregar edad, género, localidad) Actividades Narrativa 1 párrafo Supuestos ( por resultado > propósito) Recursos (Fisicos, Humanos, Intelectuales, Económicos) Matriz de Indicadores por impacto, propósito y resultados Definición de indicadores Línea Base Meta Fuente de Información Responsables Frecuencia de recolección Recursos Criterio de evaluación de indicadores Específico (S) Medibles. (M) Alcanzables (A) Realista (R) Temporales (T) Criterios de calidad de teoría de cambio (en práctica) Fue realizada en un proceso participativo El cambio a realizar es realmente claro Existe un flujo lógico de la intervención Se establecen claramente los supuestos de la intervención Se consideran otros actores (alianzas) para la intervención Se consideran cambios estructurales para la intervención Sí No Observaciones