Participacin tica de nios nias y adolescentes en

'Participación ética de niños, niñas y adolescentes en procesos de evaluación' 04 de junio 2019

Grabación del webinar ► La grabación del webinar se puede escuchar en el siguiente enlace: https: //www. dropbox. com/s/bjxwi 6 hlulkhucc/Semana%20 de%20 la%20 eval uaci%C 3%B 3 n%20 -%20 Webinar%20%20%27 P. %20%20 Tuesday%2 C%20 June%204%2 C%202019%2010. 02. 36%20 AM. mp 4 ? dl=0 2

Agenda ► Por qué es importante la participación de niños, niñas y adolescentes en evaluación? ► Principios éticos fundamentales ► Experiencias de Panamá ► Experiencias de Chile ► Preguntas y Comentarios 3

¿Por qué es importante la participación de niños, niñas y adolescentes en evaluación? Es un derecho garantizado por la Convención sobre los Derechos del Niño (1989) : ► Artículo 12 1. Los Estados Partes garantizarán al niño que esté en condiciones de formarse un juicio propio el derecho de expresar su opinión libremente en todos los asuntos que afectan al niño, teniéndose debidamente en cuenta las opiniones del niño, en función de la edad y madurez del niño. ► Artículo 13 1. El niño tendrá derecho a la libertad de expresión; ese derecho incluirá la libertad de buscar, recibir y difundir informaciones e ideas de todo tipo, sin consideración de fronteras, ya sea oralmente, por escrito o impresas, en forma 4 artística o por cualquier otro medio elegido por el niño.

¿Por qué es importante? (2) ► La participación de niños en evaluación es esencial para comprender la vida del niño. Permite que se incorpore información acerca de sus experiencias y perspectivas, proporcionando así una información precisa y culturalmente específica, lo cual aumenta el valor y la validez de los resultados. ► Los niños, niñas y adolescentes son personas por derecho propio y son dignas y capaces de reconocimiento, de respeto y de tener voz en la investigación. ► La información sistemática obtenida de los niños puede contribuir al fortalecimiento de las leyes, las políticas y las prácticas que promuevan su dignidad humana, sus derechos y bienestar. ► Los resultados de una evaluación pueden tener repercusiones en la vida de los niños, por lo tanto, su derecho a ser escuchado y dar su opinión en 5 asuntos que les afecten deben ser respetados.

¿Por qué no hay más participación entonces? ► Debate ético entre un enfoque proteccionista (NNA como personas vulnerables que deben ser protegidas) y un enfoque participativo (competencia y capacidad de los niños a actuar por sí mismos y derechos de participación). ► El diálogo, la colaboración y la reflexión crítica desempeñan un papel importante a la hora de tomar decisiones de orden ética en cuanto a la participación de NNA. 6

Principios éticos fundamentales ► Respeto: Todas las actividades relacionadas con la generación de evidencia deberán garantizar el respeto de todas las personas. Implica valorar a los niños y el contexto de su vida, así como el reconocimiento de su dignidad. ► Beneficio – No maleficencia: El principio de no maleficencia, no causar daño, requiere el evitar hacer daño o causar lesiones a los participantes por medio de actos cometidos u omitidos. Beneficencia: El principio de beneficencia se refiere a toda acción que promueva el bienestar de los niños. ► Justicia: El principio de justicia exige a los evaluadores encontrar un equilibrio entre los beneficios percibidos de la investigación y las cargas percibidas que se imponen a los participantes. 7

Investigación ética con niños ► Daños y Beneficios ► Consentimiento Informado ► Privacidad y Confidencialidad ► Pagos y Compensaciones ► Conflictos de Interés y Financiación Guía disponible en: www. childethics. com 8

Experiencias de Panamá Anilena Mejia Oficial de M&E Panamá 9

Contenido 1. 2. 3. 4. 5. • • ¿Por qué es valioso y necesario incluir a NNA en evaluaciones y otros procesos de generación de evidencia? ¿Cuándo y cómo incluirlos? El ciclo de la evaluación/generación de evidencia Pilotaje y procesos éticos Algunas técnicas (con «participantes» y con «no participantes» ) Comité de Apoyo a la Evaluación (CAE) o Participant Advisory Group (PAG) Entrevistas semi-estructuradas Entrevistas asistidas por computador Dos ejemplos en Panamá Evaluación de servicios de resocialización ofrecidos a adolescentes privados de libertad Evaluación de una intervención familiar (Familias Fuertes) para prevenir violencia contra NNA Preguntas y Reflexiones 10

¿Por qué es valioso y necesario incluir a NNA en evaluaciones y otros procesos de generación de evidencia? 1. En nuestro mandato, son ellos y ellas los beneficiarios de las intervenciones, programas y de la evidencia generada 2. A través de procesos de consulta nos aseguramos de que: • • • 3. El diseño toma en cuenta su perspectiva (por ejemplo, su satisfacción con el servicio) Las herramientas (asentimiento, cuestionarios, agenda de entrevista) son apropiadas para su edad Que ellos y ellas sean informados de los resultados (i. e. , participantes de la diseminación) A través de su participación en la evaluación nos aseguramos que: • • Su punto de vista también sea tomado en cuenta para determinar eficacia, pertinencia, eficiencia, etc. Los servicios sean refinados en base a las necesidades específicas de nuestros principales beneficiarios (los NNA). 11

¿Cuándo y cómo incluirlos? El Comité de Apoyo a la Evaluación (CAE) te ofrece consejería en aspectos éticos, refinamiento de herramientas y un vistazo a las posibles dificultades de los participantes a lo largo del proceso. No son participantes per se. Incepción • Comité de Apoyo a la Evaluación • Grupos focales sobre diseño y herramientas Ejecución • Comité de Apoyo a la Evaluación • Participantes activos (4 -17) - Entrevistas - Cuestionarios Análisis • Comité de Apoyo a la Evaluación • Participantes activos (4 -17) - Triangulación Diseminación • Comité de Apoyo a la Evaluación • Receptores **En la generación de evidencia básica, un proceso “bottom-up” y participativo, incluiría a los niños y niñas desde la idea (i. e. , la pregunta). Esto es poco común en la generación de evidencia aplicada. 12

Necesidad de Pilotaje y Procesos Éticos (Incepción) 1. El asentimiento informado lo escribe un adulto • ¿Lo entienden los NNA en el rango de edad de nuestra muestra? 2. Las herramientas de recolección de datos las diseña un adulto • ¿Son apropiadas para los NNA en el rango de edad de nuestra muestra? o ¿Se entienden? o ¿Ofenden? o ¿Preocupan? o ¿Causan estrés innecesario? 3. El Plan de diseminación de resultados lo diseña un adulto • ¿Contempla a los NNA en el rango de edad de nuestra muestra? • ¿Tendrán ellos mejores ideas de cómo llegarles a otros NNA no participantes pero beneficiarios de los resultados? 13

Técnicas (1) CAE (A lo largo / No participantes) Diverso El fin y su propósito va cambiando a lo largo de la evaluación Con miembros que tienen características similares a los participantes (NNA en el mismo rango de edad) Un CAE es: Normalmente hay un CAE de los cuidadores en paralelo 1. Entre más temprano se conforme, mejor 2. Se conforma antes de la aplicación a un Comité de Bioética porque nutre el diseño de la evaluación Formalizado (por ejemplo, nos vamos a reunir 1 vez al mes, los Viernes después de la escuela) 3. Tiene entre 5 a 7 miembros Constante (mismos miembros a lo largo de la evaluación) 14

Técnicas (2) Entrevistas Semi-Estructuradas (Ejecución y Análisis / Participantes) NOTA: Todo proceso en donde los NNA sean participantes debe pasar por “clearance” de un Comité de Bioética • Un cuidador responsable debe firmar un consentimiento INFORMADO • Luego nos podemos aproximar al NNA, para que él o ella decida si desea participar. Debe firmar (aparte) un asentimiento INFORMADO 1. 2. 3. 4. 5. Las entrevistas semi-estructuradas nos ofrecen suficiente flexibilidad y al mismo tiempo estructura (necesaria en conversaciones con NNA) La agenda no debe desviarse de la pregunta de investigación PERO debe incluir un inicio para establecer “rapport” • “Comencemos con que me cuentes un poco sobre ti…. ¿Qué es lo que más te gusta hacer? ” Asegurarnos que el/la evaluador/a tenga experiencia entrevistando a NNA • Saludar apropiadamente (sonrisa, apretón de mano, distancia) • Sentarse a la altura del NNA • Dar espacios de silencio, de “salirse del tema”, y tener capacidad para volver a encaminar la entrevista • Aclarar siempre (NNA: “Es que aquí me siento libre…”) - ENT: “¿A qué te refieres con sentirte libre? ” • La entrevista puede ser en varias sesiones • Las entrevistas se graban en audio (luego de consentimiento y asentimiento) pero el audio: o Debe ser eliminado inmediatamente del grabador al llegar a la oficina o El file no debe contener nombres o identificadores o El file se debe borrar del computador apenas sea transcrita verbatim 15 Algunos participantes deben participar del análisis (triangulación)

Técnicas (3) Entrevistas Asistidas por Computador (Ejecución y Análisis / Participantes) 1. “In my Shoes” o “En mis Zapatos” es un software para entrevistar a NNA que han vivido experiencias traumáticas • • Fue creado en Inglaterra y es libre su uso luego de un entrenamiento Evita la revictimización Evita las preguntas guiadas Está diseñado para facilitar comunicación de manera sistemática y clara Usa imágenes, sonidos y videos para que los NNA compartan emociones y experiencias Un adulto entrenado se sienta junto al NNA y lo guía en el proceso. Es una buena herramienta en casos de entrevistas con niños que han sufrido violencia, con dificultades de desarrollo o que han vivido experiencias difíciles 16

Ejemplo (1) Evaluación de Servicios de Resocialización (Técnica: Entrevistas Semi-Estructuradas) • • 1. Impacto Evaluación cuasiexperimental (grupo control y grupo intervención sin aleatorización) Toma de mediciones en la línea base, 3 meses y 6 meses 2. Relevancia ¿Cuál es el nivel de satisfacción de los adolescentes con los servicios de satisfacción? ¿Qué recomendaciones tienen para mejorarlos? • • Entrevistas semi-estructuradas con 20 adolescentes que llevan más de 8 meses privados de libertad (i. e. , que reciben el servicio) • • Consentimiento informado de cuidadores (visita 1) Asentimiento informado de adolescentes (visita 2) Entrevista dos días después (visita 3) Evitar la re-victimización • La idea no es revivir el motivo por el que están privados de libertad sino entender cómo perciben el servicio Crucial: 1) establecer el rapport inicial, 2) encontrar espacio seguro y confidencial y 3) aclarar límites Piloteamos la agenda de entrevista con 2 adolescentes privados de libertad antes de la aprobación ética Las entrevistas son casi 40 horas de grabación, transcritas verbatim, analizadas en Nvivo con un marco de Análisis Temático Pudimos haber evaluado relevancia/pertinencia entrevistando a tomadores de decisiones y personal técnico • ¿Pero quién mejor para decidir si algo es relevante/pertinente que el beneficiario? 17

Ejemplo (2) Evaluación de Intervención Familiar (Técnica: CAE y Entrevistas Semi-Estructuradas) Tres CAEs a lo largo del proceso (uno de NNA, uno de cuidadores y uno de facilitadores) 1. Impacto 2. Proceso de Implementación • Estudio aleatorizado por clúster (c. RCT) • N = 800 familias con mediciones de línea base, 3, 6 y 12 meses • Fidelidad de la Intervención • Satisfacción de: o. Cuidadores o. Niños 10 -14 años o. Facilitadores o. Escuelas y centros de salud El CAE de NNA tenía 6 miembros no participantes que comenzaron desde la incepción • Refinaron el asentimiento y los cuestionarios • Nos dieron ideas para • Solucionar problemas de reclutamiento • Solucionar problemas de asistencia a las sesiones de intervención • Refinar preguntas de entrevistas porque algunos NNA les costaba expresarse • Revisaron material para atraer más familias (panfletos, etc) • Diseñaron su mecanismo de divulgación de resultados • Un video de 10 minutos diseñado, filmado y editado por ellos mismos (hasta la música) Entrevistas con 30 NNA participantes (saturación definió tamaño de N) • Semi-estructuradas individuales • Cuidadores no presentes • Varias preguntas de rapport al principio • Utilizamos el dibujo para NNA más callados (“¿puedes dibujarme aquí qué significó para ti este programa? ”) • Lo más difícil es que te digan lo que no les gusta • Eliminar jerarquías • Aclarar que eres neutro y que este es un espacio de sinceridad 18

Preguntas o Reflexiones (amejia@unicef. org) 19

Experiencias de Chile Sebastián Carrasco Oficial de M&E UNICEF Chile 20

A modo de contexto: Participación en términos de la Convención sobre los derechos del Niño (arts. 12, 13, 14, 15, y 17). Discusión ética y metodológica en la generación de evidencia. Participación de niños/as y adolescentes en la generación de evidencia UNICEF | for every child

Estándares y protocolos para el levantamiento de información con niños/as y adolescentes: Violencia contra la niñez. Desafío en la generación de evidencia: principalmente una restricción ética (la participación directa de niños, niñas y adolescentes impone el mayor cuidado en la implementación de protocolos y procedimientos). Efecto emocional de la investigación en el niño/a Niños/as que han sido víctima de violencia: revictimización. Niños/as que no han sido víctima de violencia: exposición. Participación y conocimiento de los padres Voluntad y capacidad de participar Consentimiento: entre quienes ejercen o no ejercen violencia. Efecto/rol de factores como la edad, sexo, y otras características. Asentimiento informado. Participación de niños/as y adolescentes en la generación de evidencia UNICEF | for every child

Estándares y protocolos para el levantamiento de información con niños/as y adolescentes: Violencia contra la niñez. Principios básicos: Evitar el daño. Protección de los niños/as: habilidades de los entrevistadores, y provisión de contención y atención. Confidencialidad: privacidad en la entrevista, de los datos recogidos, y acerca de los hallazgos. Respeto por la autonomía: la capacidad del niños/a y adolescente de tomar decisiones acerca de aspectos que puedan afectarlo. Beneficencia y justica. Devolución. Participación de niños/as y adolescentes en la generación de evidencia UNICEF | for every child

Definición sobre violencia “Los Estados Partes adoptarán todas las medidas legislativas, administrativas, sociales y educativas apropiadas para proteger al niño contra toda forma de perjuicio o abuso físico o mental, descuido o trato negligente, malos tratos o explotación, incluido el abuso sexual, mientras el niño se encuentre bajo la custodia de los padres, de un representante legal o de cualquier otra persona que lo tenga a su cargo” Observación General N° 8 (CRC/C/GC/8, 2006). El derecho del niño a la protección contra los castigos corporales y otras formas de castigo crueles o degradantes Observación General N° 13 (CRC/C/GC/13, 2011) Derecho del niño a no ser objeto de ninguna forma de violencia. Recomendaciones CRC a Chile (2015) sobre reunión de datos (CDN, artículo 19, párrafo 2 del artículo 28 y artículo 37, entre otros). Marco de los ODS y los 17 indicadores prioritarios para la niñez Recomendaciones ü Las causas y los factores correlativos de la violencia. ü Los factores que aumentan o disminuyen el riesgo de violencia. ü Los factores que podrían modificarse mediante intervenciones. Fuente: : Informe Mundial sobre la violencia y la salud, OMS, 2002, Inspire; OPS, 2017: 15. Generación de evidencia; – UNICEF | for every child

La violencia contra la niñez: panorama de la medición Muestra: niños/as que asisten a 8° básico (13 a 14 años). Cuestionario auto-aplicado (1. 555). Muestra: niños/as que asisten a cursos de 6 básico a 4 medio en establecimientos educacionales; mujeres entre 15 a 65 años de edad (6. 050 niños/as, 6. 004 mujeres). Indicador comparable Encuesta UNICEF 1994 2000 2006 2008 VIF 73, 6% 75, 2% 72, 3% 2014 Encuesta VIF ENVAE 42, 4% Año Vida 77, 4% 2012 22, 3% 75, 1% 71, 1% (UNICEF) Procedimientos éticos en la medición: -Consentimientos y asentimientos informados: autonomía. -Protocolos de respuesta: incluida redes institucionales. -Protección: Entrenamiento a entrevistadores. -Comité ético. -Confidencialidad: autoaplicado. 62, 5% -Revictimización. 34, 0% (violencia por parte de sus cuidadores) Encuesta Polivictimización 2017 Encuesta VIF Muestra: Estudiantes de 7° a 3° medio de establecimientos de las 15 regiones (19. 867). Cambio en la muestra: Mujeres entre 15 y 65 años (6. 824). 25, 0% (15 a 18 años) 38% (15 a 65 años) 2017 Muestra: 22. 810 niños/as entre 0 y 12 años (18. 310 muestra de seguimiento y 4. 500 entre 0 a 5 muestra de refresco). Encuesta ELPI Incorpora indicador de disciplina infantil ODS 16. 2. 1 (módulo MICS). Principios guía, aspectos éticos y protocolos. Generación de evidencia; – UNICEF | for every child

Gracias por su participación! Para preguntas o comentarios, contactar a Stephanie Druey: sdruey@unicef. org