Suivi et Evaluation des Programmes de Sant au

Suivi et Evaluation des Programmes de Santé au Niveau du District Dakar, Sénégal, 14 Juin au 02 juillet 2010

Programmes de Santé Sexuelle et de la Reproduction Dakar le 25 Juin 2010 Dr Denise APLOGAN ONGOTHA

Objectif Général • L’objectif général du module est de permettre aux participants d’acquérir des compétences en suivi et évaluation des programmes de SSR afin de contribuer à une meilleure gestion de ces programmes au niveau des districts sanitaires

Objectifs Spécifiques Au terme de la séance, les participants seront capable de: • Définir le concept de SSR • Elaborer les cadres de suivi et évaluation des programmes de SSR • Définir les indicateurs des programmes de SSR • Identifier les étapes du suivi et évaluation des programmes de SSR

Méthodes Pédagogiques • Méthode participative • Exposé introductif • Discussions • Travaux pratiques

Plan • • La définition et l’évolution des concepts de SSR L’élaboration du cadre de suivi & Evaluation des programmes de SSR Les principaux indicateurs des programmes de SSR Le suivi de la performance des programmes de SSR L’Evaluation des programmes de SSR Conclusion Exercice d’application: étude de cas

Introduction • La SSR affecte la vie des femmes et des hommes, de la conception à la naissance en passant par l'adolescence jusqu'à la vieillesse • Les conditions : – un environnement favorable sur le plan politique, juridique, culturel et religieux; – les connaissances données à chacun pour lui permettre de promouvoir et de protéger sa propre santé reproductive; – la fourniture d'une large gamme de services de santé de qualité accessibles, appropriés, d'un coût abordable et efficaces.

Introduction (suite) Les Programmes de SSR ont besoin d’activités de Suivi et d’évaluation pour – évaluer la mise en oeuvre de ces trois conditions – mesurer les progrès accomplis.

La définition et l’évolution des concepts de SSR

Définition de la Santé Sexuelle et de la Reproduction “Par Santé en matière de Reproduction, on entend le bien-être général, tant physique mental ou social, de la personne humaine, pour tout ce qui concerne l’appareil génital, ses fonctions et son fonctionnement et non pas seulement l’absence de maladies ou d’infirmités. ” Programme d’action de la CIPD, par. 7. 2

Implications de la définition ü Vie sexuelle satisfaisante en toute sécurité ü Être capable de procréer librement selon la fréquence désirée ü Droit à l’information, à l’utilisation d’une méthode de régulation des naissances ü Droit à des services de santé maternelle et infantile

Les Droits en matière de SR 1. La survie et la vie 2. La liberté et la sécurité de la personne 3. L’égalité et liberté de toute forme de discrimination 4. L’intimité 5. La liberté de pensée 6. L’information et l’éducation

Les Droits en matière de SR 7. Choisir de se marier ou non, de bâtir et planifier une famille 8. Décider d’avoir un enfant et quand 9. Aux soins de santé et de la protection sanitaire 10. De bénéficier des progrès scientifiques 11. La liberté de réunion et la participation politique 12. Libre de la torture et de mauvais traitement

Les Composantes de la Santé Sexuelle et de la Reproduction (SSR) 1. Planification familiale 2. Soins prénatals /accouchement médicalement assisté/Soins postnatals 3. Gestion des complications et des urgences obstétriques et néonatales 4. Gestion des complications des avortements et soins post-abortum 5. Prévention et traitement des Infections de l’appareil reproductif et des IST (y compris le VIH/SIDA) Plan d’action CIPD 1994

Les composantes de la Santé en Matière de Reproduction (suite) 7. Diagnostic précoce et traitement des cancers du sein et de l’appareil reproductif (hommes et femmes) 8. Promotion, éducation et soutien à l’allaitement maternel exclusif 9. Prévention et traitement adéquat de l’hypo-fertilité et de l’infertilité 10. Campagnes actives pour l’abandon des pratiques culturelles dangereuses : mutilation génitale féminine (MGF/SGF) Plan d’action CIPD 1994

Les composantes de la Santé en matière de Reproduction (suite) 11. Santé en matière de Reproduction de l’adolescent 12. Prévention et gestion des violences faites au femmes Plan d’action CIPD 1994

Les Cadres de Suivi et Evaluation des Programmes de SSR: Exemple de la Réduction de la Mortalité Maternelle

L’analyse de situation • • • Problèmes SSR ü Ampleur ü Gravité ü Déterminants Elaboration du profil du district sanitaire Calcul de la population cible Détermination de la couverture des services Évaluation des services ü Disponibilité ü Qualité

Le Cadre Conceptuel Déterminants biologiques Déterminants politiques • Hémorragie • Politique nationale SR • Éclampsie • Engagement politique • Septicémie • Existence d’un budget • Dystocie • Avortements à risque Déterminants structurels • Disponibilité des services SSR • Disponibilité de personnel qualifié • Accessibilité des services Mortalité maternelle Déterminants Culturels et religieux • Pouvoir de décision de la femme dans la communauté • Statut économique de la femme • Comportement de SSR

Le Cadre Stratégique Impact: Mortalité maternelle réduite RI 1. Prise en charge précoce et adéquate des complications liées à la grossesse accrue RSI 1. 1: Utilisation des services accrue RSI 1. 1. 1: Disponibilité des services SSR accrue RSS 1. 1. 2: Niveau de connaissance des bénéficiaires en SSR accru Prise en charge précoce et adéquate des urgences obstétricales accrue RSI 1. 2: Qualité des services accrue RSI 1. 2. 1: compétences des prestataires de soins en SSR accrues RSI 1. 2. 2: disponibilité des produits de SSR accrue

Le Cadre Logique Exercice

La chaîne des étapes d'un programme 1 … pour réaliser des activités. . Des moyens sont mobilisés (intrants) …doivent … dont les produits produire des résultats … Cet enchaînement repose sur une suite de relations logiques (si. . . alors) dites "de cause à effet" Suivi ou Evaluation du Processus et un impact sur le dévelop -pement Évaluation 1. By R. N. Dackam, UNFPA EAT Dakar

Les principaux indicateurs de la Santé en matière de Reproduction (OMS. )

La « short list » des indicateurs pour le suivi mondial de la SR (OMS) 1. Taux de fertilité total 2. Prévalence contraceptive 3. Ratio de mortalité maternelle 4. Couverture de soins anténataux 5. Accouchements assistés par du personnel de santé qualifié 6. Disponibilité des Soins Obstétricaux d’Urgence de Base 7. Disponibilité des Soins Obstétricaux d’Urgence Complets 8. Taux de mortalité périnatale 9. Prévalence de petit poids de naissance

La « short list » des indicateurs pour le suivi mondial de la SR (OMS) 1. 2. 3. 4. 5. 6. 7. Prévalence de sérologie positive pour la syphilis chez les femmes enceintes Prévalence d’anémie chez les femmes Pourcentage d’admission en obstétrique ou en gynécologie dues à des avortements Prévalence rapportée de femmes présentant une mutilation génitale féminine Prévalence d’infertilité chez les femmes Incidence rapportée d’urétrites chez les hommes Prévalence de l’infection à VIH chez les femmes enceintes Connaissance de méthodes de prévention du VIH/ Sida

La Prévalence Contraceptive • Pourcentage de femmes en âge de procréer(15 -49 ans) qui utilisent (ou dont le partenaire utilise) une méthode contraceptive à un moment donné. • Formule: – de femmes en âge de procréer(15 -49 ans) qui utilisent (ou dont le partenaire utilise) une méthode contraceptive à un moment donné / Nombre de femme en âge de procréer et à risque d’être enceinte au même moment • Sources: – Echantillons d’enquête de population, – enquêtes ponctuelles limités, – données des programmes de PF

Le taux de fertilité total • Nombre total d’enfants qu’une femme aurait eu à la fin de sa période de reproduction si elle avait expérimenté l’actuel taux de fertilité spécifique par âge durant toute sa période de fécondité (15 – 49 ans) • Taux de fertilité spécifique par âge (TFSA) – Nb. de naissances dans l’année de femme d’âge X / Nb. total de femmes âgées de X au milieu de l’année – (pour 1000 femmes) • Taux de fertilité total (TFT) par femme – TFSA x 5 /1000 • Source: – état civil (naissances), – recensement, – enquêtes de population

Le Taux de Mortalité Maternelle • Nombre annuel de décès maternel pour 100. 000 naissances vivantes • Sources: ü Etat civil ü Données des services de santé ü Enquête de population ou surveillance • Méthodes de collecte ü ü RAMOS (Reproductive-Age Mortality Survey) Estimation directe Méthode des sœurs Recherches confidentielles

Couverture des soins prénatals • Pourcentage de femmes qui ont été assistées, au moins une fois, durant la grossesse dans un service de CPN, par un personnel médical qualifié (à l’exclusion des matrones formées ou non), pour des motifs liés à la grossesse. • Formule: Nb. de femmes qui ont été assistées, au moins une fois, durant la grossesse dans un service de CPN, par un personnel médical qualifié (à l’exclusion des matrones formées ou non), pour des motifs liés à la grossesse pendant une période donnée / Nb. De naissances vivantes dans la même période. Source: ü Etat civil ü Données d’enquête de population

Pourcentage de naissances assistés par un personnel médical qualifié Pourcentage de naissances assistées par un personnel médical qualifié • Formule: – Nb de naissances assistées par un personnel médical qualifié pendant une période donnée / Nb de naissances vivantes durant la même période • Sources: ü Données de services de santé ü Enquête de population (ménage) ü État civil ü Recensement

Disponibilité des Soins Obstétricaux essentiels de base Nombre de structures sanitaires fonctionnelles avec des soins obstétricaux essentiels de base effectifs pour 500. 000 personnes • Formule : – Nombre de structures sanitaires fonctionnelles avec des soins obstétricaux essentiels de base effectifs x 500 000 / Population totale • Sources : – Données de routines des services – Recensement – Données d’évaluation des services

Disponibilité de soins obstétricaux essentiels complets Nombre de structures sanitaires disposant de soins obstétricaux essentiels complets pour 500. 000 personnes • Formule : – Nombre de structures sanitaires fonctionnelles disposant de soins obstétricaux essentiels complets x 500. 000 / Population totale • Sources : – Données de routines des services – Recensement – Données d’évaluation des services

Taux de mortalité périnatale Nombre de décès périnataux (décès fœtaux et néonataux) pour 1000 naissances Formule : – Nb de décès périnataux x 1000 / Nb total de naissances – Période périnatale = 22 semaines complètes de gestation à 7 jours complets après accouchement Sources : – Etat civil – Notification de naissances – Données de services de santé – Enquête de population – Recensement – Recherches confidentielles

Prévalence de faible poids de naissance Pourcentage de naissance vivantes dont le poids est inférieur à 2, 500 kg Formule : – nb de naissances vivantes dont le poids est inférieur à 2, 500 kg / nb total de naissances vivantes Sources : ü Données des services de santé ü Enquête de population

Prévalence de sérologie de syphilis positive chez les femmes enceintes Pourcentage de femmes enceintes (15 – 24 ans) qui ont fréquenté un service de CPN, dont le sang a été testé pour la syphilis avec un résultat de sérologie positive pour la syphilis Formule : – de femmes enceintes (15 – 24 ans) qui ont fréquenté un service de CPN, dont le sang a été testé pour la syphilis avec un résultat de sérologie positive / Nb total de femmes enceintes (15 – 24 ans) qui ont fréquenté un service de CPN, dont le sang a été testé pour la syphilis Sources : – Données de surveillance sentinelle (seconde génération) – Données des services de CPN – Enquête communautaire de prévalence de syphilis

Prévalence d’anémie chez les femmes Pourcentage de femmes en âge de procréer (15 -49 ans) dans le sang des quelles le taux d’hémoglobine a été mesuré avec des résultats de 110 g/l pour le femmes enceintes et 120 g/l pour les non enceintes Formule : Nb de femmes en âge de procréer dans le sang des quelles le taux d’hémoglobine a été mesuré avec des résultats de 110 g/l pour le femmes enceintes et 120 g/l pour les non enceintes pendant une période donnée x 100 / nb total de femme en âge de procréer pour les quelles le dosage de l’hémoglobine a été effectué durant la même période Sources : – Données de services de santé – Enquête de population

Pourcentage d’admission en obstétrique et en gynécologie pour avortement Pourcentage de tous les cas admis dans les structures de soins avec hospitalisation en obstétrique et gynécologie pour avortement (spontané ou provoqué, à l’exclusion des interruptions volontaires de grossesses) Formule : – Admissions pour les complications liées à l’avortement x 100 / Toutes les admissions exceptées celles pour interruption volontaire planifiée de grossesse Sources : – Données de services de santé (pays où l’avortement est autorisé)

Prévalence rapporté de femmes avec Mutilation génitale féminine Pourcentage de femmes interrogées dans une enquête en communauté, rapportant avoir subi une MGF • Formule : – Nb femmes interrogées dans une enquête en communauté, rapportant avoir subi une MGF x 100 / Nb total de femmes interrogées durant l’enquête • Sources : ü Enquêtes communautaires (intégrant MGF) ü Recensement ü Carnets et dossier médicaux

Prévalence de l’infertilité chez les femmes Pourcentage de femmes en âge de procréer (15 – 49 ans) à risque de grossesse (non enceinte, sexuellement active, pas sous contraception et n’allaitant pas au sein) qui déclare essayer d’avoir une grossesse depuis 2 ans ou plus • Formule : de femmes en âge de procréer (15 – 49 ans) à risque de grossesse (non enceinte, sexuellement active, pas sous contraception et n’allaitant pas au sein) qui déclare essayer d’avoir une grossesse depuis 2 ans ou plus x 100 / Nombre total de femme en âge de procréer et à risque d’être enceinte • Sources: – Enquête communautaire – EDS

Incidence rapportée d’urétrites chez les hommes Pourcentage d’hommes d’âge compris entre 15 et 49 ans interrogés dans une communauté enquêtées et qui rapportent un épisode d’urétrite dans les 12 derniers mois • Formule : – d’hommes d’âge compris entre 15 et 49 ans interrogés dans une communauté enquêtées et qui rapportent un épisode d’urétrite dans les 12 derniers mois x 100 / Nb total d’homme âgé de 15 – 49 ans interrogés dans l’enquête • Sources : ü EDS ü Études sur population ou régions spécifiques

Prévalence du VIH parmi les femmes enceintes Pourcentage de femmes enceintes (15 – 24 ans) en services de CPN dont le sang a été testé positif pour le VIH • Formule : – Nb de femmes enceintes (15 – 24 ans) en services de CPN dont le sang a été testé positif pour le VIH dans des sites sélectionnés x 100 / nb total de prélèvements sanguins effectués chez des femmes enceintes âgées de 15 – 24 ans dans les mêmes sites et testés pour le VIH • Sources : ü Données de surveillance sentinelle de routine ü Enquête de séroprévalence dans la population

Connaissance des pratiques de prévention contre le VIH Pourcentage de tous les répondants qui ont correctement identifié tous les 3 principaux moyens de prévention de la transmission sexuelle du VIH et qui rejettent trois idées fausses majeures sur la transmission et la prévention du VIH. • Formule: – Nb de répondants qui ont correctement identifié tous les 3 principaux moyens de prévention de la transmission sexuelle du VIH et qui rejettent trois idées fausses majeures sur la transmission et la prévention du VIH x 100 / Nb total de répondants à l’enquête. • Sources: ü Enquêtes de ménage ü EDS

Planification des Interventions 1. Formuler des objectifs 2. Définir des cibles pour l’atteinte des objectifs 3. Prioriser et choisir les stratégies 4. Élaborer un plan de travail annuel: formation, approvisionnement, équipement, supervision, budget

Suivi de la couverture et de la qualité des programmes SSR

Les activités de suivi de routine • Renseigne en continu sur la performance des services de SSR • Aide à identifier précocement les problèmes afin d’y rémédier à temps • Consiste à vérifier ce qui avait été prévu et évaluer la possibilité d’atteinte des cibles (ajustements souvent nécessaires) • Doit impliquer toutes les parties prenantes à l’offre de services • Contribue à la formation continue du personnel

Les activités de supervision • Supervision = clé de la motivation, la performance et les résultats • Supervision réussie apporte, aux agents de santé, des ü aptitudes ü équipements nécessaires ü conseils • Les supervisions intégrées sont les plus efficientes

Le suivi de la qualité Les déterminants de la Qualité 1. Compétences techniques et professionnelles des prestataires de service 2. Les aptitudes interpersonnelles des prestataires de service 3. La disponibilité des produits, des équipements et de la logistique 4. La qualité physique des infrastructures et des établissements 5. L’accessibilité des services: distance, horaires d’ouverture, coûts des prestations)

Le suivi de la qualité (suite) Les déterminants de la qualité 6. Sécurité des clients et des prestataires 7. Intégration des services 8. Système de référence fonctionnel 9. Continuité des soins : prévention – soins curatifs – suivi des patients 10. Décision éclairée des patients grâce à un counseling et IEC de qualité

Le suivi de la qualité (suite) Les Déterminants de la Qualité 11. La satisfaction de la clientèle 12. L’engagement des responsables du centre 13. L’approche processus et l’approche processus 14. L’amélioration continue

Revue annuelle et Evaluation des Programmes de SSR

Revue annuelle de la performance • Permet ü d’évaluer les progrès de l’année vers l’atteinte des cibles ü utilisant les indicateurs identifiés ü d’analyser les facteurs favorisant et limitant pouvant expliquer l’atteinte ou non des cibles ü de démontrer ce qui est survenu dans le district l’année écoulée • Responsabilise les parties prenantes • Habituellement effectuée au moment de la prise de décision en vue de la planification et la bugétisation pour l’année suivante

Les finalités d'une évaluation Les responsables Connaître, être informé Le public, les bénéficiaires, les contributeurs Décider 4 grandes finalités Savoir, comprendre et tirer des enseignements Le gestionnaire, les opérateurs Gérer, contrôler Le chercheur

Selon les "moments" de l'évaluation, les buts diffèrent Début Avant Pendant À la fin Plus tard Rendre des comptes Déterminer l’impact Programme Vérifier la conception Améliorer la mise en œuvre

L’évaluation de processus • Apprécie par exemple: • Ressources : disponibilité , utilisation • Activités üL’acceptabilité, ül’accessibilité et ü l’efficience

L’évaluation de processus (suite) • Aide à répondre aux questions: pourquoi et comment les résultats sont (ou pas) atteints • Met en valeurs les meilleures pratiques et les leçons apprises • Démontre la redevabilité des partenaires

Exemple de question d’évaluation finale: La mise en oeuvre de ce programme s'est-elle déroulée comme prévu ? Comment répondre à cette question ? 1) Je vais identifier ce qui était prévu dans les documents de départ, 2) Je vais reconstituer ce qui s'est passé réellement Analyse documentaire Entretiens avec plusieurs responsables pour m'assurer d'une bonne compréhension Analyse documentaire, lecture des dossiers d'archive Entretiens avec des acteurs des différentes composantes, des différentes phases et de différentes sensibilité

Exemple suite : La mise en oeuvre de ce programme s'est-elle déroulée comme prévu ? 3) Je vais comparer le plan et la réalité, mettre à jour les différences, vérifier que les opinions recueillies sur ce point convergent vers les mêmes conclusions 4) Il me faudra décider ce qui est un changement négligeable et ce qui est un changement notable. Je ne signalerai que les changements qui ont eu des conséquences visibles sur les coûts et les délais Etablissement d'un chronogramme rétrospectif Construction de l'argumentaire Entretiens avec plusieurs acteurs pour vérification de la validité des conclusions

Exemple suite : La mise en oeuvre de ce programme s'est-elle déroulée comme prévu ? Cette démarche prévoit l'utilisation de différentes techniques qui elle-mêmes supposent l'usage d'outils ou d'instruments Techniques - Analyse documentaire Revue de dossiers Entretiens individuels Groupes de discussion Outils/instruments - Guides d'entretien - Chronogrammes

L’évaluation des Effets • Evalue les changements en matière de connaissance, attitudes et pratiques en matière de SSR dans la population • Nécessite une collecte de données de base à comparer avec les données de fin de programme Les changements observés sont attribués au programme

L’évaluation d’impact • Mesure les changements à long terme dans la vie des bénéficiaires du programme en rapport avec son but • Exemple: – Réduction du nombre de grossesse non désirée – Réduction de la mortalité maternelle • Les évaluations d’impact sont coûteuses et complexes

L’évaluation participative • Implique tous les partenaires • Améliore ü l’appropriation des activités et les résultats du programme ü La communication et la collaboration entre partenaires ü L’efficience de l’allocation de ressources Ø Implication des partenaires à divers niveaux: ü Accord sur l’objet de l’évaluation ü Interpretation des résultats ü Suivi des décisions

Sources et outils de collecte de données pour l’évaluation • Outils de collecte de données dépendent des méthodes de collecte • Méthodes de collecte: – Quantitatives: SIS, rapport de progrès, autres sources d’informations courantes – Qualitative: interview, focus group, observation interaction client-prestataire de soins

Deuxième Seconde question à choisir avec le exemple : groupe, si possible sur l'efficience Dérouler ensemble le raisonnement : 1. Comment répondre à la question (avec éventuel retour à la formulation de la question) ? 2. Quelle démarche déroulée? 3. En utilisant quelles techniques et quels outils ? 4. Comparer avec la démarche précédente

Récapitulatif 1. Définition et évolution des concepts de SSR 2. Elaboration d’un cadre de suivi & Evaluation des programmes de SSR 3. Principaux indicateurs des programmes de SSR 4. Suivi de la performance des programmes de SSR 5. Evaluation des programmes de SSR

Conclusion • La planification, les cadres, les indicateurs et les systèmes de données sont indispensables pour la réalisation du suivi et de l’évaluation correcte d’un projet/ programme. • En somme, plus le suivi et l'évaluation sont bien menés, plus le programme peut être efficace. • L'élaboration d’un plan de S/E doit être soigneuse, et il est important de garder à l'esprit qu'il s'agit d'une tâche continue, à tester et à améliorer tout au long du déploiement du programme.

Je vous remercie