157
EVALUATION DU PROGRAMME WASH A LECOLE AU MALI Evaluation commanditée et financée par le Comité Espagnol UNICEF et le Gouvernement de Navarra RAPPORT D’EVALUATION 23 décembre 2014 HYDROCONSEIL Eau Assainissement Déchets Services publics 198 chemin d’Avignon 84470 Châteauneuf de Gadagne France Tel. : + 33 4 90 22 57 80 Fax : + 33 4 90 22 57 81 E-mail : [email protected] - Site internet : www.hydroconseil.com

EVALUATION DU PROGRAMME WASH A L ECOLE AU MALI · 2020-04-29 · EVALUATION DU PROGRAMME WASH A L’ECOLE AU MALI Evaluation commanditée et financée par le Comité Espagnol UNICEF

  • Upload
    others

  • View
    10

  • Download
    4

Embed Size (px)

Citation preview

Page 1: EVALUATION DU PROGRAMME WASH A L ECOLE AU MALI · 2020-04-29 · EVALUATION DU PROGRAMME WASH A L’ECOLE AU MALI Evaluation commanditée et financée par le Comité Espagnol UNICEF

EVALUATION DU PROGRAMME WASH A L’ECOLE AU MALI

Evaluation commanditée et financée par le Comité Espagnol UNICEF

et le Gouvernement de Navarra

RAPPORT D’EVALUATION

23 décembre 2014

HYDROCONSEIL Eau – Assainissement – Déchets – Services publics

198 chemin d’Avignon 84470 Châteauneuf de Gadagne – France Tel. : + 33 4 90 22 57 80 – Fax : + 33 4 90 22 57 81 E-mail : [email protected] - Site internet : www.hydroconseil.com

Page 2: EVALUATION DU PROGRAMME WASH A L ECOLE AU MALI · 2020-04-29 · EVALUATION DU PROGRAMME WASH A L’ECOLE AU MALI Evaluation commanditée et financée par le Comité Espagnol UNICEF

HYDROCONSEIL

Evaluation du programme WASH à l’école -Spanish Natcom - Rapport d’évaluation Page 2

Table des matières

A. Résumé exécutif ....................................................................................................... 4

A.1. Cadre et objectifs de l’évaluation ............................................................................................ 4

A.2. Méthodologie de l’évaluation ................................................................................................. 4

A.3. Synthèse des résultats de l’évaluation .................................................................................... 5

A.4. Bilan et recommandations ...................................................................................................... 6

B. Introduction et méthodologie ................................................................................... 7

B.1. Contexte de l’intervention Dubai Cares dans les régions de Mopti et de Koulikoro .............. 7

B.1.1. Brève présentation du programme Dubai Cares et du cofinancement Spanish NatCom .............................. 7 B.1.2. Bref aperçu de la situation de base en Eau, Hygiène et Assainissement en milieu scolaire au Mali ............. 8

B.2. Méthodologie de l’évaluation de Hydroconseil .................................................................... 10

B.2.1. Objectif de l’évaluation ............................................................................................................................... 10 B.2.2. Une méthodologie alliant revue documentaire, entretiens participatifs et observations de terrain .......... 11 B.2.3. La Méthodologie du Most-Significant Change ............................................................................................. 12 B.2.4. Equipe et agenda ......................................................................................................................................... 13 B.2.5. Limites de l’évaluation ................................................................................................................................. 13

C. Description du programme Eau, Hygiène et assainissement à l’école de l’UNICEF .... 15

C.1. Fiche signalétique du programme ......................................................................................... 15

C.2. Acteurs concernés par le programme ................................................................................... 15

C.3. Cadre logique du programme Dubai Cares ........................................................................... 18

D. Principaux résultats de l’évaluation ........................................................................ 19

D.1. PERTINENCE : Evaluation des procédures de mise en œuvre du programme ...................... 19

D.1.1. Logique d'intervention : La logique d'intervention du programmes WASH à l'école est-elle cohérente? .. 19 D.1.2. Bonnes pratiques : Le programme a-t-il su intégrer les derniers développements et innovations dans le domaine? 26 D.1.3. Sensibilisation aux besoins : Le programme a-t-il pu satisfaire les préoccupations des différentes catégories de bénéficiaires et partenaires ? ................................................................................................................ 30

D.2. EFFICACITE : Evaluation des approches préconisées par le programme .............................. 35

D.2.1. Qualité et conformité : La mise en œuvre sur le terrain a-t-elle été en ligne avec ce qui été prévu ? ........ 35 D.2.2. Atteinte des résultats .................................................................................................................................. 39 D.2.3. Efficacité des activités de coordination, de suivi, évaluation et capitalisation ............................................ 46

D.3. EFFICIENCE ............................................................................................................................. 50

D.3.1. Utilisation des fonds : les ressources ont-elles été utilisées de manière efficiente ? .................................. 50 D.3.2. Gestion administrative et financière du programme : aurait-il été possible d'atteindre les mêmes résultats à moindre coûts ?......................................................................................................................................................... 52

D.4. IMPACT : effets directs et indirects du projet ....................................................................... 54

D.4.1. Ressenti interne : Quels sont les impacts qui ont été perçus par les différents acteurs du programme ? .. 54 D.4.2. Ressenti externe : Les écoles du programme ont-elles suscitées un intérêt particuliers? .......................... 66

D.5. DURABILITE et appropriation du programme ....................................................................... 67

D.5.1. Durabilité, appropriation : La conception du programme et ses modalités de mise en œuvre permettent-ils de maximiser les chances de durabilité ? ................................................................................................................ 67 D.5.2. Mise à l'échelle : La conception du programme et ses modalités de mise en œuvre permettent-ils de maximiser les chances de mise à l'échelle ?................................................................................................................. 75

Page 3: EVALUATION DU PROGRAMME WASH A L ECOLE AU MALI · 2020-04-29 · EVALUATION DU PROGRAMME WASH A L’ECOLE AU MALI Evaluation commanditée et financée par le Comité Espagnol UNICEF

HYDROCONSEIL

Evaluation du programme WASH à l’école -Spanish Natcom - Rapport d’évaluation Page 3

E. Principales recommandations ................................................................................. 77

E.1.1. Procédures de mise en œuvre du programme ............................................................................................ 77 E.1.2. Réponses sociales et techniques proposées par le programme .................................................................. 78

F. Bilan de l’évaluation : matrice d’évaluation ............................................................ 80

G. Annexes ................................................................................................................. 85

G.1. Annexe 1 : Tableau des rencontres réalisées - Modalité des entretiens et des observations réalisés dans le cadre de l’évaluation du programme Dubai-Cares ................................................. 85

G.2. Annexe 2 : Plan de travail de l’évaluation ............................................................................. 86

G.2.1. Calendrier général ....................................................................................................................................... 86 G.2.2. Focus phase terrain ..................................................................................................................................... 87

G.3. Annexe 3 : Extrait du cadre logique du PS-PEHMS ................................................................ 88

G.4. Annexe 4 : Liste de thèmes de recherche pré-identifié par le programme Dubai-Cares ...... 90

G.5. Annexe 5 : Fiche C8 de contrôle des inspecteurs et travail réalisé par Hydroconseil pour intégrer les préoccupations du programme Wash à l’école ............................................................ 91

G.6. Annexe 6 : Termes de Référence de l’évaluation .................................................................. 95

G.7. Annexe 7 : CV de l’équipe d’évaluation ............................................................................... 109

G.8. Annexe 5 : Grilles d’entretiens et d’observation utilisées ................................................... 128

1) FICHE 1 : DIRECTEUR NOM ECO LE…………………………… ...................... 128

2) FICHE 2 : ENSEIGNANT NOM ECOLE…………………………… .................... 136

3) FICHE 3 : CLUB D’HYGIENE NOM ECOLE…………………………… ............. 141

4) FICHE 4 : ELEVES NOM ECOLE………………………………… ........................ 145

5) FICHE 5 : RENCONTRE REHA ..................................................................... 148

6) FICHE 6 : RENCONTRES MOST SIGNIFICANT CHANGE ....................... 149

7) FICHE 7 : ENTRETIENS AVEC LE S SERVICES DE L’ETAT ................... 153

Page 4: EVALUATION DU PROGRAMME WASH A L ECOLE AU MALI · 2020-04-29 · EVALUATION DU PROGRAMME WASH A L’ECOLE AU MALI Evaluation commanditée et financée par le Comité Espagnol UNICEF

HYDROCONSEIL

Evaluation du programme WASH à l’école -Spanish Natcom - Rapport d’évaluation Page 4

A. Résumé exécutif A.1. Cadre et objectifs de l’évaluation

L’évaluation porte sur le cofinancement du programme Dubai Cares par le Comité national espagnol pour l’UNICEF (ci-dessous appelé « Spanish NatCom »). Le programme vise l’amélioration des conditions d’hygiène sanitaire des écoles du cycle fondamental et dans la communauté environnante, grâce à l’amélioration de l’accès à l’eau, à l’assainissement et à l’hygiène dans les écoles, l’amélioration des pra-tiques d’hygiène et la durabilité (gestion, entretien) des ouvrages construits. Le cofinancement du Spanish NatCom a concerné 139 écoles dans deux régions du Mali à savoir : Koulikoro et Mopti. Les activités sont mises en œuvre par l’UNICEF à travers ses partenaires d’exécution qui sont des ONG internationales, lo-cales, des entreprises privées de forage ou de BTP et un bureau de contrôle des travaux.

Les fonds du Spanish NatCom ont été logés sur deux lignes de financements différentes, à savoir : le fonds SC 110472 et le fonds SC 140270 pour un total de 1 321 019,33 USD sur 3 ans.

Conformément aux Termes de Référence de la mission, l’objectif de cette évaluation est double. Il doit tout d’abord permettre d’analyser les activités réalisées dans de cadre du programme WASH à l’école par l’utilisation des 5 critères de l’OCDE, dans un but de transparence et de redevabilité par rapport aux dona-teurs. Pour ce qui est du critère de l’impact, une analyse plus qualitative que quantitative est requise, étu-diant la perception et le ressenti des bénéficiaires par rapport à l’impact que le programme a pu avoir sur leur vie, grâce à la méthode du Most Significant Change (MSC). Le second objectif est d’évaluer les ap-proches adoptées par le programme dans un but d’apprentissage, en le comparant avec d’autres expé-riences WASH à l’école mises en œuvre dans le monde, et de proposer des recommandations pour d’éventuelles améliorations futures.

A.2. Méthodologie de l’évaluation

Conformément aux termes de référence, l’étude s’est déroulée en trois phases consécutives.

Conceptualisation de l’intervention : le consultant au travers des réunions avec l’UNICEF et la lec-ture des documents de référence s’est construit une vision globale du programme et de principales difficultés rencontrée. A l’issue de ce travail, la méthodologie d’intervention (matrice d’évaluation, grille d’entretien, liste des personnes à interviewer, choix des sites à visiter) a été créée puis a été validée par l’UNICEF. Une attention particulière a été consacrée à la conception de supports d’entretien utilisant la Méthodologie du Most Significant Change. La méthodologie utilisée est dé-taillée au Chapitre B.2.3.

Collecte des données : Après avoir défini l’échantillon1 avec les équipes de l’UNICEF (National, Mopti et Koulikoro) selon la méthodologie explicitée dans le rapport de démarrage remis à l’UNICEF2, l’équipe de consultants a réalisé les visite terrain et les entretiens du 13 au 24 octobre 2014 à Koulikoro, puis à Mopti. Il convient de préciser que la collecte des données sur le terrain s’est déroulée une semaine seulement après la reprise des cours dans les écoles, et que compte te-nu des contraintes de temps et de logistique, seules 11 écoles d’intervention ont pu être enquê-tées. Ces deux éléments constituent les principales limites de cette évaluation. Cependant, l’équipe d’évaluation considère que le nombre important d’entretiens conduits sur chaque site et le temps consacré à chaque entretien a permis de compenser en partie ces limites.

Analyse des données et production du rapport provisoire : De nombreuses études thématiques et évaluation quantitatives d’impact ont été réalisés par l’UNICEF et ses partenaires dans le cadre du programme Dubai Cares. Ainsi, d’un commun accord avec l’UNICEF, Hydroconseil s’est appuyé sur

1 Pour rappel, ce dernier n’a pas vocation a être statistiquement robuste puisqu’au regard du temps imparti seul 11 groupes scolaires sur les 139

co-financés par le Spanish Natcom ont été ciblés. 2 Rapport de démarrage éval WASH à l'école - Hydroconseil_V3.pdf. Chapitre D.1. Sélection des sites d’analyse.

Page 5: EVALUATION DU PROGRAMME WASH A L ECOLE AU MALI · 2020-04-29 · EVALUATION DU PROGRAMME WASH A L’ECOLE AU MALI Evaluation commanditée et financée par le Comité Espagnol UNICEF

HYDROCONSEIL

Evaluation du programme WASH à l’école -Spanish Natcom - Rapport d’évaluation Page 5

ces rapports et a apporté une importance spéciale à l’analyse qualitative de l’impact du pro-gramme, c’est-à-dire du ressenti des bénéficiaires, des ONG et entreprises travaillant sur le pro-gramme. A l’issue de l’analyse des données collectées, un rapport provisoire a été élaboré et une réunion de restitution des principaux résultats de l’évaluation a été réalisée. Quelques jours après la tenue de cette réunion, le rapport d’évaluation a été transmis à l’UNICEF en Français puis en Es-pagnol, sur demande du Spanish NatCom.

A.3. Synthèse des résultats de l’évaluation

Globalement, l’évaluation du projet est très positive. Concernant les 11 écoles visitées, les résultats atten-dus ont été atteints et les bénéficiaires ont exprimé leur satisfaction. La poursuite d’une intervention dans les conditions proposée par le programme Dubai-Cares est fortement recommandée.

L’évaluation suit le canevas classique d’une évaluation de programme et propose une analyse en cinq cri-tères conformément aux termes de référence. Notons toutefois qu’une attention particulière a été portée au critère d’impact, qui a été traité selon l’approche du Most Significant Change. La synthèse de l’analyse des cinq critères d’évaluation se décompose comme suit :

La pertinence : l’analyse est positive quant à l’adéquation du projet aux besoins (bénéficiaires et partenaires), et à son alignement par rapport aux orientations nationales. Le programme est soli-dement construit autours d’objectifs pertinents et d’activités clairement définies par un processus « Pas-à-Pas ». L’ensemble des standards de construction, d’intervention sont indiqués dans les Guide d’intervention remis et expliqués aux ONG et entreprises au démarrage de leur contrat. Ces guides d’intervention sont chaque année révisés en fonction du retour d’expériences terrain. Le programme est jeune, il doit être flexible ; effectivement, le programme a su améliorer et adapter ses outils et évoluer pour atteindre chaque année plus surement les résultats escomptés.

L’efficacité : l’analyse est également positive sur ce point, car les résultats visés par le projet sont atteints. Néanmoins il est important de mentionner que l’évaluation s’est déroulée une semaine seulement après la rentrée scolaire, ainsi le changement de comportement dans les écoles est peu visible et non représentatif des routines établies durant l’année. Les standards de qualité et les procédures de suivi/contrôle garantissent une qualité des interventions de construction et d’intermédiation sociale. L’accès aux équipements Wash dans les écoles est amélioré (latrine, point d’eau, lave-mains). Les nouvelles constructions de latrines tendent vers les ratios internationaux en termes d’élèves/latrine (45 filles/latrine ; 55 garçons/latrine) mais il n’a pas été observé que le « manque » d’infrastructures soit une cause de la reprise de la défécation à l’air libre dans les écoles. L’eau de boisson est largement consommée par les enfants et le niveau de connaissance des bonnes pratiques d’hygiène est présent, bien que leur application ne soit pas encore automatique.

L’efficience : les résultats de l’analyse sont bons mais l’analyse elle-même n’a été que partielle compte tenu du temps accordé à l’évaluation et de l’accent mis sur l’impact. La gestion administra-tive et financière du programme est relativement lourde, mais elle contribue également à l’atteinte des objectifs fixés, dans les délais impartis et les conditions fixées par le programme. Le recours à la sous-traitance de certaines activités de contractualisation, d’encadrement et de supervision des ONG nationales auprès des ONG internationales a permis ,de diminuer le nombre d‘accords de par-tenariat (PCA) signés et suivis par l’UNICEF, de réduire le nombre de visite de sites, et de dégager du temps au personnel de l’UNICEF à Bamako et dans les régions pour se concentrer sur d’autres tâches utiles.

L’impact : l’analyse est positive sur ce critère. Si les impacts indirects (sur le quartier au-delà des écoles) est difficilement mesurable mais palpable, l’impact direct sur les communautés scolaires est lui évident. Tout comme l’impact sur les partenaires d’exécution.

La durabilité et appropriation : l’analyse est ici plus mitigée. Le programme dans sa conception et dans les activités mises en œuvre a veillé à la durabilité des actions et à leur appropriation par les bénéficiaires et les partenaires du programme. Toutefois ce programme dispose encore actuelle-ment et du fait de l’instabilité des institutions maliennes depuis quelques années, d’un faible an-

Page 6: EVALUATION DU PROGRAMME WASH A L ECOLE AU MALI · 2020-04-29 · EVALUATION DU PROGRAMME WASH A L’ECOLE AU MALI Evaluation commanditée et financée par le Comité Espagnol UNICEF

HYDROCONSEIL

Evaluation du programme WASH à l’école -Spanish Natcom - Rapport d’évaluation Page 6

crage institutionnel ce qui ne permet pas d’asseoir formellement les méthodologies d’intervention comme normes et pratiques courantes des différents services techniques de l’Etat. Par ailleurs le suivi post-programme par les services de l’Etat ne se fait qu’avec le soutien technique et financier de l’UNICEF, et à raison d’une seule visite 6 à 12 mois après la fin du programme, ce qui est insuffi-sant pour assurer la pérennité et l’appropriation sur le plus long terme.

A.4. Bilan et recommandations

Nous tenons à rappeler que les conclusions de l’évaluation sont issues des entretiens réalisés, durant deux semaines de terrain, dans 11 complexes scolaires et ce, une semaine seulement après la rentrée scolaire. De manière générale, le bilan de l’évaluation est plutôt bon :

Le projet présente de très bons résultats sur l’analyse de ses caractéristiques principales : l’approche proposée est pertinente et répond à un réel besoin dans le secteur Wash dans les écoles, les moyens mis en œuvre sont adaptés, la standardisation des procédures et des infrastruc-tures garantissent la qualité des ouvrages et donc leur durabilité. Les écoles visitées disposent, en leur sein, d’un point d’eau fonctionnel, de latrines fonctionnelles et de dispositif de lavage des mains. L’utilisation de ses infrastructures par les enfants et plutôt bonne, même si parfois des dé-rives ont été constatées (utilisation des anciennes latrines, absence de lavage des mains après la la-trine, jeux avec les lave-mains, etc.).

En revanche, l’approche programme présente plusieurs lacunes : les principales concernent la du-rabilité du programme et la pérennité du suivi post-projet. Le faible ancrage institutionnel implique que le transfert/renforcement de capacités réalisés ont peu de portée au-delà du programme et que les personnes ressources clefs (CAP, mairie) ne sont pas suffisamment impliquées dans la mise en œuvre des interventions Wash à l’école (cf. formation des enseignants, etc.) et pas du tout dans le suivi post programme (soit après la dernière notation Ecole Propre).

Par ailleurs, le fait qu’il s’agisse d’un programme sectoriel (Eau et Assainissement) entraine parfois que les réponses apportées, si elles contentent les directeurs en matière d’infrastructures hydro-sanitaires, ne répondent pas aux besoins prioritaires de l’école que sont la construction de nou-velles salles de classe (qui permettrait d’éviter les effectifs pléthoriques et les mauvaises conditions d’apprentissage) ou la construction de clôtures.

En regard de cette analyse, plusieurs recommandations ont été formulées. Elles sont volontairement peu nombreuses (hui au total) et ciblées, afin d’adopter un esprit pragmatique et réaliste. Elles correspondent à deux niveaux d’action :

Quatre recommandations concernent la mise en œuvre du programme : elles visent à appuyer l’UNICEF dans sa démarche actuelle d’institutionnalisation du programme au sein du Ministère de l’Education afin d’optimiser les résultats dans le cas du passage à l’échelle des interventions Wash à l’école. Ces recommandations ont également pour objectif d’améliorer le suivi de la durabilité du programme : le programme est jeune, mais aucun dispositif de suivi post-intervention n’est prévu. Il convient de mettre en place un système de suivi simple et efficace permettant de prévenir d’un retour à des conditions de scolarisation et d’hygiène dégradées (panne du point d’eau, absence du lavage des mains, etc.)

Quatre recommandations concernent les réponses techniques et sociales apportées par le pro-gramme : celles-ci visent à conforter des axes d’intervention (construction standardisées plus chères mais plus durable, etc.) tout en tentant d’apporter une réponse aux dysfonctionnements constatés (non prise en compte de certains des besoins des écoles, sélection des sites d’intervention, utilisation des lave-mains, dynamisation des CGS, etc.) et doivent donc être prises en compte de manière prioritaire dans la conception des interventions futures.

Page 7: EVALUATION DU PROGRAMME WASH A L ECOLE AU MALI · 2020-04-29 · EVALUATION DU PROGRAMME WASH A L’ECOLE AU MALI Evaluation commanditée et financée par le Comité Espagnol UNICEF

HYDROCONSEIL

Evaluation du programme WASH à l’école -Spanish Natcom - Rapport d’évaluation Page 7

B. Introduction et méthodologie B.1. Contexte de l’intervention Dubai Cares dans les régions de Mopti et de

Koulikoro

B.1.1. Brève présentation du programme Dubai Cares et du cofinancement Spanish NatCom

Le programme Dubai Cares est mis en œuvre par l’UNICEF et d’autres organisations partenaires (Save the Children International, CARE International, OXFAM GB et WaterAid-Mali) appuyant le gouvernement du Mali dans la mise en place, dans 6 des 9 régions du Mali, d’un programme eau, hygiène et assainissement dans les écoles fondamentales publiques du premier cycle.

Les objectifs que le programme cherche à atteindre au niveau des écoles et communautés d’intervention sont résumés dans le tableau ci-dessous :

Figure 1 : Objectifs poursuivis par le programme Wash à l’école - UNICEF

Pour atteindre ces objectifs, l’UNICEF et les autres partenaires du programme ont mis en place un en-semble d’activités développé et enrichi grâce à un travail conséquent et continu de capitalisation des expé-riences de chacun.

Le paquet d’interventions se décline comme suit :

Fournir des installations sanitaires de base (blocs de latrines différenciées filles/garçons) permettant aux élèves et au personnel de se rendre aux toilettes sans contaminer le terrain de l’école ou ses ressources en eau.

Fournir des dispositifs de lavage des mains adéquats (localisation, praticabilité) permettant d’utiliser de l’eau et du savon après être allé aux toilettes et avant de manipuler des ali-ments.

Fournir de l’eau potable à partir d’une source d’eau souterraine protégée (source, puits ou forage) ou à partir d’une alimentation traitée et la garder en sécurité jusqu’à ce qu’elle soit bue.

Améliorer la connaissance des enfants sur l’importance de vivre et étudier dans un envi-ronnement sain et favoriser la diffusion des bonnes pratiques apprises à l’école dans la communauté

Améliorer les pratiques de gestion des infrastructures sanitaires et garantir la pérennité des activités de lavage des mains dans les écoles via la responsabilisation du corps enseignant, des Comités de Gestion Scolaire (CGS), des parents d’élèves, des autorités locales et des Centres d’Animation Pédagogique (CAP).

Page 8: EVALUATION DU PROGRAMME WASH A L ECOLE AU MALI · 2020-04-29 · EVALUATION DU PROGRAMME WASH A L’ECOLE AU MALI Evaluation commanditée et financée par le Comité Espagnol UNICEF

HYDROCONSEIL

Evaluation du programme WASH à l’école -Spanish Natcom - Rapport d’évaluation Page 8

A ce paquet d’activités spécifiquement mises en œuvre dans les écoles, s’ajoutent des mesures d’accompagnement favorisant la gouvernance locale et le suivi/évaluation interne au programme et le ren-forcement de capacité des services techniques concernés aux niveaux central et décentralisé, à savoir :

Dans le cadre de ce programme, le Spanish NatCom et le gouvernement de Navarre ont appuyé le pro-gramme Dubai Cares de manière qui a permis à l’UNICEF de combler ses besoins en co-financement. Le fi-nancement a été utilisé pour la construction/réhabilitation de blocs de latrines, la construc-tion/réhabilitation de points d’eau, la mise à disposition de kits d’hygiène (savon, dispositif de lavage des mains, etc.). Il n’était pas initialement prévu que le financement appuie la composante Sui-vi/Evaluation/Apprentissage et bonne gouvernance.

Au total, ce sont 1 626 écoles, soit 470 000 enfants et 10 000 enseignants, qui ont bénéficié de ce pro-gramme WASH à l’école, tous partenaires confondus. Parmi elles, 139 écoles des régions de Koulikoro et Mopti ont fait l’objet de réalisations cofinancées par le Gouvernement Régional de Navarre (GoN) et le Co-mité Espagnol pour l’UNICEF (Spanish NatCom).

B.1.2. Bref aperçu de la situation de base en Eau, Hygiène et Assainissement en milieu scolaire au Mali

En 2011, le programme Dubai-Cares a réalisé une enquête de base permettant de définir la situation de référence en eau, hygiène et assainissement dans près de 1 072 écoles3 réparties dans les régions de Ba-mako, Gao, Koulikoro, Mopti, Sikasso et Tombouctou. Une synthèse des résultats est présentée ci-dessous.

3 L’ensemble des conclusions de l’enquête de base ainsi que la méthodologie utilisée sont disponibles dans le rapport suivant : Rapport de l'enquête

de base Dubai Cares au Mali - juillet 2011 (31.12.11).docx

•Développer des outils de suivi desindicateurs d’impact/de résultats (santé etl’éducation).•Former les intervenants clefs a l’utilisationdes ces outils de collecte/traitement desdonnées dans les écoles.•Documenter les effets du WASH commestratégie pour améliorer la qualité del’éducation et de la santé à l’école•Assurer une documentation efficace etconcise des retours d’expériences du terrainet les partager•Etablir un système de gestion desinformations qui renforce les échanges lespartage d’expériences entre les partenairesstratégiques.•Préparer des rapports réguliers qui rendentcompte des progrès réalisés, de lapertinence et du niveau d’application desstandards

Activités Suivi/Evaluation/Apprentissage

•Développer les outils de communicationévolutifs pour :

•(i) promouvoir les changements decomportement à l’école et dans lescommunautés,•(ii) gouvernance du Wash dans lesécoles d’intervention

•Appuyer le gouvernement pour développeret intégrer l’éducation à l’hygiène au seindes modules de formation initiale desenseignants

IEC et gouvernance locale du Wash

Page 9: EVALUATION DU PROGRAMME WASH A L ECOLE AU MALI · 2020-04-29 · EVALUATION DU PROGRAMME WASH A L’ECOLE AU MALI Evaluation commanditée et financée par le Comité Espagnol UNICEF

HYDROCONSEIL

Evaluation du programme WASH à l’école -Spanish Natcom - Rapport d’évaluation Page 9

Accès à l’assainissement :

De manière générale, il a été observé que le nombre de la-trines est insuffisant par rapport à l’effectif de l’école et que, pour différentes raisons (intimité, propreté, sécurité, etc.), les élèves préfèrent se soulager derrière les latrines et les salles de classe, autour de l’école, chez les voisins ou en brousse, ou encore attendent de rentrer à la maison. Enfin, notons que 20 % des écoles enquêtées ne disposaient, en 2011, d’aucune infrastructure sanitaire. Cette situation est particulièrement exacerbée en milieu rural (23% des écoles visitées en milieu rural n’ont pas d’infrastructures sanitaires contre 3% en milieu urbain).

Par ailleurs, dans les écoles disposant de latrines :

72% des blocs de latrines ne sont pas séparés filles/garçons

80% des blocs de latrines visités sont sales (nettoyés seulement une fois par semaine ou plus rare-ment).

Le ratio élève/latrine moyen est 110, soit deux fois supérieur au ratio UNICEF/OMS4.

En élevant les exigences de l’enquête aux standards internationalement reconnus en matière d’assainissement scolaire, seules 10% des écoles visitées disposaient à l’époque de latrines séparée, fonc-tionnelles et aux normes.

Accès à l’eau de boisson En 2011, une école sur 2 n’avait pas de point d’eau à l’intérieur de son enceinte. Ce taux diminue s’il l’on tient compte de la fonctionnalité de ce dernier. Ce constat est exa-cerbé en milieu rural où le taux d’accès à l’eau tombe à 36%.

Par ailleurs, dans les écoles disposant d’un point d’eau fonc-tionnel :

Le ratio élève/point d’eau moyen est de 5855, ce qui est très élevé par rapport aux standards internationaux communément acceptés ;

Les points d’eau ne sont pas salubres dans 73% des écoles visitées (stagnation des eaux perdues notamment) ;

L’eau n’est pas accessible de manière continue (point d’eau cadenassé) dans 21% des écoles disposant d’un point

d’eau fonctionnel ; enfin

Le débit est largement insuffisant dans 21% des points d’eau enquêtés.

En élevant les exigences de l’enquête aux standards internationalement reconnus en matière d’accès à l’eau de boisson en milieu scolaire, seules 7% des écoles visitées disposaient, à l’époque, de points d’eau fonctionnels et aux normes.

4 50 élèves par latrines, et même de préférence 50 garçons et 25 filles par latrine

5 Le ratio maximum observé est de 5000 élèves/point d’eau. 17% des écoles visitées présentent un ratio élève/point d’eau supérieur à 1 000. Cette

situation est prédominante en milieu urbain.

Page 10: EVALUATION DU PROGRAMME WASH A L ECOLE AU MALI · 2020-04-29 · EVALUATION DU PROGRAMME WASH A L’ECOLE AU MALI Evaluation commanditée et financée par le Comité Espagnol UNICEF

HYDROCONSEIL

Evaluation du programme WASH à l’école -Spanish Natcom - Rapport d’évaluation Page 10

Hygiène et Education à l’hygiène Dans la plupart des écoles visitées (60%) dans le cadre de l’enquête de base, des séances d’éducation à l’hygiène ont été réalisées. Le thème le plus abordé est celui du lavage des mains ; viennent ensuite les thématiques de l’hygiène alimen-taire et de l’hygiène corporelle. Cette observation est d’autant plus vraie dans les écoles de l’échantillon concernées par le programme Dubai Cares.

Le passage de la théorie à la pratique du lavage des mains est peu probant : dans près de 70% des écoles il n’existe pas de dispositif de lavage des mains. Par ailleurs, dans les écoles disposant de lave-mains : 70% n’ont pas de savon, 55% n’ont pas d’eau au niveau du réservoir, 51% ne sont manifestement pas utilisés, et 45% sont insalubres ou non-fonctionnelles.

Au final, moins de 8% des lave-mains disponibles sont fonctionnels, et seuls 6,5% présentent des traces d’utilisation.

En termes de matériel, les écoles sont globalement démunies en seaux, postes d’eau potable et bouilloires avec seulement 50% des écoles visitées équipées. Le constat est encore plus frappant en ce qui concerne les consommables tels que le savon, l’eau de javel et le crésyl (seules 25% des écoles visitées en possède). La situation est encore plus délicate en ce qui concerne la présence de petit matériel d’entretien des la-trines (brosse, balai, gants, etc.)

B.2. Méthodologie de l’évaluation de Hydroconseil

B.2.1. Objectif de l’évaluation

Conformément aux Termes de Référence de la mission, l’objectif de cette évaluation est triple :

Objectif 1 : Fournir une analyse des activités réalisées dans le cadre du programme WASH à l’école et les confronter aux résultats obtenus, via le prisme des 139 écoles appuyées par le Spanish Nat-Com par l’utilisation des 5 critères de l’OCDE ;

Objectif 2 : Pour le critère d’impact : analyser la perception, le ressenti des bénéficiaires sur l’impact que le programme a pu avoir sur leur vie, par l’utilisation de la méthode du Most Signifi-cant Change (MSC). L’analyse est développée à l’école (lieu d’exécution du programme) et dans la communauté (lieu de vie des enfants, de leurs parents et des enseignants,) où une partie des inter-ventions se déroulent également) ;

Objectif 3 : Réaliser une évaluation globale programmatique et technique des approches suivies et proposer des recommandations pour l’amélioration du programme en le comparant avec d’autres expériences Wash à l’école mises en œuvre dans le monde.

Afin d’obtenir une vision globale du projet et de son intégration dans le secteur WASH au Mali, une atten-tion particulière a été accordée à une large consultation des acteurs ayant bénéficiés ou contribués à la mise en œuvre de ce programme (personnel scolaire, ONG d’exécution, gestionnaires UNICEF, cadres des directions régionales de l’assainissement, municipalités, associations de parents, associations des mères d’élèves, élèves, etc.).

Enfin, notons que la présente évaluation, bien que se concentrant sur les interventions cofinancées par les partenaires espagnols entre juillet 2011 et juillet 2014, prend en considération également les activités de l’UNICEF dans le cadre du programme Dubai-Cares dans son ensemble.

Page 11: EVALUATION DU PROGRAMME WASH A L ECOLE AU MALI · 2020-04-29 · EVALUATION DU PROGRAMME WASH A L’ECOLE AU MALI Evaluation commanditée et financée par le Comité Espagnol UNICEF

HYDROCONSEIL

Evaluation du programme WASH à l’école -Spanish Natcom - Rapport d’évaluation Page 11

B.2.2. Une méthodologie alliant revue documentaire, entretiens participatifs et observations de terrain

Conformément aux termes de référence présentés à l’Annexe G.6, l’étude s’est déroulée en trois phases consécutives.

a) Conceptualisation de l’évaluation

Une première réunion de démarrage a permis aux consultants de dresser, avec l’aide de l’UNICEF, la liste complète des documents à consulter ainsi que les contacts des principaux interlocuteurs ayant participé à la mise en œuvre du programme (gestionnaires, services déconcentrés de l’Etat, ONG d’intermédiation so-ciale, entreprises de construction, bureaux de contrôle, etc.).

Après quelques jours consacrés à l’analyse de ces documents, l’équipe d’évaluation a affiné sa méthodolo-gie d’intervention. Pour cela, une matrice d’évaluation a été construite. Elle est présentée au Chapitre F et reprend l’ensemble des questions auxquelles l’évaluation doit répondre.

Cette matrice a ensuite guidé l’équipe dans la construction de grilles d’entretien (semi-dirigés, dirigés) en fonction des interlocuteurs rencontrés et des informations recherchées. Ces grilles sont présentées à l’Annexe Erreur ! Source du renvoi introuvable.. Une attention particulière a été consacrée à la conception de supports d’entretien utilisant la Méthodologie du Most Significant Change. La méthodologie utilisée est détaillée au Chapitre B.2.3.

b) Collecte des données

Après avoir défini l’échantillon6 avec les équipes de l’UNICEF (National, Mopti et Koulikoro) selon la métho-dologie explicitée dans le rapport de démarrage remis à l’UNICEF7, l’équipe de consultants a réalisé les vi-sites terrain et les entretiens du 13 au 24 octobre 2014. Le planning de collecte des données n’a pas été perturbé, seule l’école de Fégoun (CAP de Koulikoro) n’a pas fait l’objet d’une visite approfondie, pour des contraintes liées à l’utilisation du bac reliant la ville de Koulikoro au village de Guni.

Figure 2 : listing des écoles concernées par la collecte des données sur le terrain

KOULIKORO AE de Kati ; CAP de Kalaban-

Coro

Niamana

N'Tabacoro

Kabalabougou

Dogodouman

AE de Koulikoro ; CAP de Kouliko-ro

Gouni

Sho

Fegoun

MOPTI AE de Mopti ; CAP de

Sevaré

Fatoma

Guirowel

AE de Mopti ; CAP de Djenne

Promani

Toumadiama

Enfin nous souhaitons relever la grande disponibilité des acteurs rencontrés, autant du côté des bénéfi-ciaires que du côté de l’UNICEF ou des CAP.

La liste complète des personnes rencontrées est présentée à l’Annexe G.18.

6 Pour rappel, ce dernier n’a pas vocation a être statistiquement robuste puisqu’au regard du temps imparti seul 11 groupes scolaires sur les 139

co-financés par le Spanish Natcom ont été ciblés. 7 Rapport de démarrage éval WASH à l'école - Hydroconseil_V3.pdf. Chapitre D.1. Sélection des sites d’analyse.

8 A noter que l’intégralité des entretiens prévus ont pu être réalisés, à l’exception de l’école de Fégoun (seulement une discussion commune direc-

teur/enseignants et interviews avec les élèves de 6ème), du CAP de Kalaban-Coro et de Protos.

Page 12: EVALUATION DU PROGRAMME WASH A L ECOLE AU MALI · 2020-04-29 · EVALUATION DU PROGRAMME WASH A L’ECOLE AU MALI Evaluation commanditée et financée par le Comité Espagnol UNICEF

HYDROCONSEIL

Evaluation du programme WASH à l’école -Spanish Natcom - Rapport d’évaluation Page 12

c) Analyse des données et production du rapport provisoire

De nombreuses études et évaluations thématiques et d’impact (notamment quantitatifs, sur la santé et l’éducation des élèves bénéficiaires) ont été réalisés par l’UNICEF et ses partenaires dans le cadre du pro-gramme Dubai Cares. Ainsi, d’un commun accord avec l’UNICEF, Hydroconseil a souhaité s’appuyer sur ces rapports et apporter une importance spéciale à l’analyse du « Ressenti : impacts qualitatifs » des bénéfi-ciaires et des ONG et entreprises travaillant sur le programme.

Ainsi, l’équipe d’évaluation a analysé le contenu des entretiens, mis en lumière les histoires personnelles alimentant le MSC. L’ensemble de ces informations a ensuite été compilé et recroisé pour produire le pré-sent rapport d’évaluation, dont les résultats sont présentés de la manière suivante :

Une présentation des principaux résultats des questions posées dans l’évaluation, selon les cinq thèmes principaux retenus,

Une présentation des principales recommandations hiérarchisées sur quelques axes clefs sélec-tionnés,

Un bilan clair sous forme de tableau matriciel permettant au lecteur d’appréhender aisément les principaux résultats de l’évaluation.

B.2.3. La Méthodologie du Most-Significant Change

Les entretiens réalisés avec la méthode du MSC ont été administrés à trois publics cibles, à savoir :

Les ONG de mise en œuvre du volet « intermédia-tion sociale » à Mopti et Koulikoro. Les ONG non concer-nées par les écoles spécifiquement co-financées par le Spa-nish NatCom ont également été conviées.

L’ensemble des prestataires de travaux (eau et/ou assainissement) à Mopti et à Koulikoro (bureaux d’études et entreprises),

Les membres des Comités de Gestion Scolaire et de l’association des mères d’élèves si elle existe, en tant que partenaires du programme dans l’école mais aussi en tant que membres de la communauté.

La méthodologie du MSC est détaillée dans le rapport de démarrage, une synthèse est proposée ici.

Les structures ont été invitées à partager leur expérience, en racontant, à tour de rôle : (i) les faits significa-tifs dont elles ont été témoin, (ii) les évolutions qu’elles ont observées, (iii) les histoires dont elles ont elles-mêmes entendu parler, etc. Lors de cette discussion, une histoire a entrainée d’autres histoires et les struc-tures se sont répondues en décrivant leurs propres expériences.

Une fois l’ensemble des thèmes abordés et des histoires racontées, les évaluateurs ont réalisé un bref rap-pel des principaux facteurs de risque/d’échec, les opportunités d’amélioration et les changements significa-tifs énoncés par les participants. Ces histoires ont ensuite été hiérarchisées par l’ensemble des participants afin qu’ils puissent eux-mêmes identifier les plus fiables, significatives et représentatives.

Les résultats sont présentés dans la partie D.4 du présent rapport.

Page 13: EVALUATION DU PROGRAMME WASH A L ECOLE AU MALI · 2020-04-29 · EVALUATION DU PROGRAMME WASH A L’ECOLE AU MALI Evaluation commanditée et financée par le Comité Espagnol UNICEF

HYDROCONSEIL

Evaluation du programme WASH à l’école -Spanish Natcom - Rapport d’évaluation Page 13

B.2.4. Equipe et agenda

L’équipe initialement proposée est composée de 3 personnes : l’évaluatrice principale et deux enquê-teurs/facilitateurs de terrain. Tous trois possèdent de bonnes connaissances du secteur WASH.

1. Evaluatrice principale : Melle Audrey Crocker est spécialiste institutionnelle du secteur de l’eau et de l’assainissement. Audrey a travaillé successivement, en 2010, 2011, 2013 puis 2014, sur le suivi et l’évaluation du programme National Village et Ecole Assainis mis en œuvre par le Gouvernement Congolais (RDC) et appuyé par l’UNICEF. Parallèlement à ce travail, Audrey a également réalisé une évaluation WASH pour le compte de la Croix-Rouge Espagnole (fonds Agence Andalouse de Coopé-ration Internationale [AACI] et Junta de Comunidades de Castilla La Mancha [JCCM]) dans les écoles d’un quartier défavorisé de la ville de Kinshasa.

M. Salif Ismaïla Traoré a assisté Melle Crocker dans toutes les phases de terrain et dans les rendez-vous nécessitant une discussion en langue locale. M. Salif Traoré a notamment travaillé (16 mois) pour la réalisation de l’étude d’impact de l’initiative Dubaï Cares. Il est à noter que dans le cadre de cette étude d’impact, M. Traoré n’a eu pratiquement aucun contact avec les partenaires de mise en œuvre du programme WASH à l’école, à l’exception de l’Université américaine d’Emory respon-sable technique de l’étude, qui est indépendante des partenaires de mise en œuvre du programme.

M. Abdoulaye Sow a également assisté Melle Crocker dans toutes les phases de terrain et dans les rendez-vous nécessitant une discussion en langue locale. M. Adboulaye Sow dispose d’une forma-tion en sciences économiques et sociales et possède une bonne connaissance des mécanismes d’enquêtes sanitaires. M. Sow a également fait partie de l’équipe indépendante d’évaluation mesu-rant l’impact du programme WASH à l’école pour le consortium Dubai Cares dans la région de Si-kasso.

La présence de ces deux enquêteurs ayant une bonne connaissance du programme a été un grand atout pour la mission d’évaluation car cela a considérablement réduit le temps d’adaptation au contexte et à la terminologie utilisée lors des entretiens MSC.

Enfin, de manière ponctuelle et pour appuyer l’équipe, notamment durant les phases de préparation des outils de collecte et dans la phase terrain, Hydroconseil a proposé et obtenu que Melle Laura Béal, consul-tante junior, complète l’équipe d’évaluation. Durant la semaine de terrain à Koulikoro, sa présence a per-mis la constitution de deux équipes mixtes d’évaluation, permettant ainsi d’augmenter, de fait, le nombre de sites visités/d’entretiens réalisés.

Les CV de ces quatre personnes sont présentés en Annexe G.7.

L’agenda de travail a été très concentré : l’équipe a disposé de deux semaines pour réaliser la collecte des données à Bamako et dans les deux régions concernées par le financement du Spanish NatCom. Le planning détaillé de la mission est présenté à l’Annexe G.2

B.2.5. Limites de l’évaluation

Il convient de replacer l’évaluation dans son contexte et ressortir les limites qui pourraient affecter les ana-lyses produites par Hydroconseil.

Temps de l’évaluation La collecte des données sur le terrain s’est déroulée une semaine seulement après la reprise des cours dans les écoles, période à laquelle les directeurs s’occupent prioritairement des inscriptions. Sans que cela re-présente une raison valable pour les directeurs pour la non-reprise de certaines activités EHA, il faut ce-pendant noter que bon nombre des observations qui ont été réalisées n’ont pas permis de se rendre compte de manière fiable des routines EHA mises en place par les école un peu plus tard après la reprise des cours.

Page 14: EVALUATION DU PROGRAMME WASH A L ECOLE AU MALI · 2020-04-29 · EVALUATION DU PROGRAMME WASH A L’ECOLE AU MALI Evaluation commanditée et financée par le Comité Espagnol UNICEF

HYDROCONSEIL

Evaluation du programme WASH à l’école -Spanish Natcom - Rapport d’évaluation Page 14

Taille de l’échantillon Le temps imparti pour la collecte des informations sur le terrain est réduite - 2 semaines - tout comme le budget alloué à l’étude, ce qui ne permet pas de mobiliser une équipe conséquente d’enquêteurs. Ainsi 11 complexes scolaires ont été ciblés pour réaliser les observations de terrain, ce qui n’est pas statistiquement robuste pour tirer des généralités sur l’ensemble des 825 écoles suivies par l’UNICEF dans le cadre du pro-gramme Dubai-Cares, ou des 139 écoles co-financées par le Spanish Natcom.

Néanmoins les très nombreux entretiens, notamment Focus-Group Discussion, réalisés au sein des écoles ont permis d’aller plus loin dans la recherche des explications autour d’une question et ont une réellement valeur qualitative.

Analyse qualitative plus que quantitative Comme précisé dans le chapitre B.2.2.c), de nombreuses études et évaluations notamment quantitatives, ont été réalisés par l’UNICEF et ses partenaires dans le cadre du programme Dubai Cares. Ainsi, l’UNICEF a demandé à Hydroconseil de tester la méthodologie du Most-Significant Change. Cette technique d’évaluation, nouvelle au Mali et pour Hydroconseil n’a pas particulièrement posé de problèmes d’implémentation, moyennant quelques adaptations, notamment auprès des enfants et des enseignants pour collecter les données. Les histoires collectées dans les écoles ont été recoupées (acteurs différents et observation terrain) afin de vérifier leur véracité.

Page 15: EVALUATION DU PROGRAMME WASH A L ECOLE AU MALI · 2020-04-29 · EVALUATION DU PROGRAMME WASH A L’ECOLE AU MALI Evaluation commanditée et financée par le Comité Espagnol UNICEF

HYDROCONSEIL

Evaluation du programme WASH à l’école -Spanish Natcom - Rapport d’évaluation Page 15

C. Description du programme Eau, Hygiène et assainissement à l’école de l’UNICEF

C.1. Fiche signalétique du programme

Localisation 3 régions : Mopti, Sikasso et Koulikoro - Co-financement Spanish NatCom : Uniquement Mopti et Koulikoro

Cible Régions et écoles à faible accès au WASH 1er cycle en priorité (les écoles de second cycle sont intégrées quand ils par-tagent la même cours d’école qu’un premier cycle) Ecoles publiques ou communautaires Ecoles dont l’effectif se situe entre 150 à 1 000 élèves en priorité

Bénéficiaires directs Bénéficiaires indirects

885 écoles : soit 294 000 élèves et 5 000 enseignants Co-financement Spanish NatCom : 139 écoles, soit 51 165 élèves et 750 enseignants (11%)

Les communautés associées à l’école Les CAP

Interventions Infrastructures sanitaires, sensibilisation à l’hygiène, formation des ensei-gnants

Partenaires Ministère de l'Éducation, Ministère de l'Eau, de l'Assainissement et de l'Environnement, Ministère de la Santé (National + Régional)

Les services techniques régionaux et locaux, les communes

Les ONG d’intermédiation sociale, les entreprises de construction et d'ingénierie privées et les comités de gestion des écoles.

Durée 36 mois de Juillet 2011 à Juillet 2014

Budget total 23 millions USD (tous bailleurs confondus, sur la période 2011-2014 Co-financement Spanish NatCom : 1 321 019,33 USD

C.2. Acteurs concernés par le programme

Les acteurs concernés par le programme sont nombreux. Ainsi :

UNICEF : conçoit, met en œuvre et suit les interventions Eau, Hygiène et Assainissement en milieu scolaire. Ils reçoivent les financements et mettent en œuvre les activités sur le terrain, en recrutant, formant et sui-vant les ONG d’exécution et les prestataires privés. Par son expérience et sa prise de recul sur la théma-tique (recherche, capitalisation), l’UNICEF guide les Ministères dans le développement d’une stratégie de mise à l’échelle et veille à mettre en place un cadre de suivi/évaluation valable au niveau national garantis-sant la pérennité des actions entreprises.

Les partenaires de mise en œuvre : Ce sont les ONG internationales et nationales (en sous-traitance des ONG internationales) en charge de l’intermédiation sociale, et les prestataires privés (entreprises de cons-truction et bureaux d’études en charge du contrôle des travaux) qui assurent la mise en œuvre du pro-gramme sur le terrain en suivant les guides d’animation et de construction fixant les standards de qualité des interventions et donnant des instructions pas-à-pas. Ces guides sont rédigés de manière collégiale par les membres de partenariat Dubai Cares et font l’objet de mises à jour annuelles qui sont préalablement discutées avec l’ensemble des partenaires de mise en œuvre, dans un souci d’amélioration constante du programme. Les partenaires de l’UNICEF intervenant dans les écoles financées par le Spanish NatCom sont :

ONG internationales : SNV et Protos ;

ONG nationales d’intermédiation sociale : GRAT, ODI-Sahel, Promethée, Alphalog, Asmadevi et Imadel;

Bureau de Contrôle : Sid-Sertas, contrôle les travaux de construction et vérifie la qualité des ou-vrages construits.

Page 16: EVALUATION DU PROGRAMME WASH A L ECOLE AU MALI · 2020-04-29 · EVALUATION DU PROGRAMME WASH A L’ECOLE AU MALI Evaluation commanditée et financée par le Comité Espagnol UNICEF

HYDROCONSEIL

Evaluation du programme WASH à l’école -Spanish Natcom - Rapport d’évaluation Page 16

Les autorités locales et déconcentrées : Le processus de décentralisation a redistribué les rôles entre les CAP et les Mairies. Ainsi, le CAP reste responsable de la formation et du suivi pédagogique des enseignants et la mairie devient responsable du bon fonctionnement et du développement de l’ensemble des écoles de 1er et 2nd cycle dans sa commune. Concrètement, c’est elle qui valide les projets d’école et prend les grandes décisions, recrute et gère le personnel enseignant. C’est également la mairie qui doit suivre et ap-puyer les CGS, y compris financièrement. Le CGS est composé de représentants de l’école et de la commu-nauté, et est chargé de gérer l’école au nom de la mairie. Au niveau des autres ministères, la Direction ré-gionale de l’assainissement et de l’Hydraulique et leurs démembrements au niveau local suivent les travaux de construction des latrines, des bornes-fontaines et des lave-mains (pour la première) et de forages (pour la seconde), et conduisent ou participent à certaines activités clefs de formation et d’intermédiation so-ciale, assistés souvent de la Direction régionale de la Santé et ses démembrements.

Les bénéficiaires du programme sont de trois types :

les bénéficiaires directs principaux (directeurs, enseignants, club d’hygiène, enfants) : ils sont au cœur du programme, ils participent à toutes les activités et sont moteur du changement à l’école après le retrait des ONG d’intermédiation sociale.

les bénéficiaires directs secondaires (CGS, APE, AME) : ils sont aussi concernés par les activités de sensibilisation et de formation. A côté du CGS, l’APE et/ou l’AME appuient le développement de l’école et représentent l’intérêt des parents d’élèves et de leurs enfants. Tous font partie de la communauté. Ils ont également un rôle clef à jouer après le départ de l’ONG.

les bénéficiaires indirects (communauté) : la communauté est considérée comme un bénéficiaire indirect puisqu’initialement non concernées par les activités EHA. Toutefois, elle bénéficie du chan-gement de comportement des enfants qui sont vecteurs de changement dans leur famille. Par ail-leurs, à partir de fin 2012 le programme a évolué vers une meilleure synergie entre l’école et la communauté environnante, en faisant bénéficier la communauté de toutes les activités de sensibi-lisation et d’intermédiation sociale dont l’école bénéficie.

Le schéma ci-dessous synthétise les relations existantes entre les différents acteurs du programme.

Page 17: EVALUATION DU PROGRAMME WASH A L ECOLE AU MALI · 2020-04-29 · EVALUATION DU PROGRAMME WASH A L’ECOLE AU MALI Evaluation commanditée et financée par le Comité Espagnol UNICEF

HYDROCONSEIL

Evaluation du programme WASH à l’école -Spanish Natcom - Rapport d’évaluation Page 17

Figure 3 : Relations institutionnelles entre les différents acteurs du programme Dubai Cares

MINISTERES DE TUTUELLE

Dubai Cares : 885 écoles bénéficiaires

SNV

ONG 1

ONG 2

ONG 3

ONG 4

ONG 5

ONG 6

Bénéficiaires

Ecoles Communautés

CGSAPEAME

CAP

Commune

Académie d’Enseignement

ProtosEntreprises

privées

Partenaires de mise en œuvre

UNICEF

280 écoles DRACPN

Autorités locales et déconcentrées

DRH

Sid-Sertas

Page 18: EVALUATION DU PROGRAMME WASH A L ECOLE AU MALI · 2020-04-29 · EVALUATION DU PROGRAMME WASH A L’ECOLE AU MALI Evaluation commanditée et financée par le Comité Espagnol UNICEF

HYDROCONSEIL

Evaluation du programme WASH à l’école -Spanish Natcom - Rapport d’évaluation Page 18

C.3. Cadre logique du programme Dubai Cares

Le schéma ci-dessous reprend l’arbre logique développé par le partenariat Dubai Cares. L’équipe d’évaluation s’est appuyée sur cet arbre logique pour développer la matrice et les questions de l’évaluation.

Figure 4 : Arbre logique développé par l’UNICEF et ses partenaires par rapport au programme Dubai Cares

Page 19: EVALUATION DU PROGRAMME WASH A L ECOLE AU MALI · 2020-04-29 · EVALUATION DU PROGRAMME WASH A L’ECOLE AU MALI Evaluation commanditée et financée par le Comité Espagnol UNICEF

HYDROCONSEIL

Evaluation du programme WASH à l’école -Spanish Natcom - Rapport d’évaluation Page 19

D. Principaux résultats de l’évaluation Les paragraphes suivants présentent les principaux résultats de l’évaluation. Ils sont repris de manière syn-thétique dans la matrice d’évaluation présentée au Chapitre F.

D.1. PERTINENCE : Evaluation des procédures de mise en œuvre du programme

D.1.1. Logique d'intervention : La logique d'intervention du programmes WASH à l'école est-elle cohérente?

a) Alignement sur les documents nationaux encadrant l’eau, l’hygiène et l’assainissement en milieu sco-laire

Le document de référence est le Plan Stratégique de Promotion de l’Education à l’Hygiène en Milieu Sco-laire (PS-PEHMS), conjointement développé par les ministères de l’Education, de la Santé, de l’Hydraulique et de l’Assainissement. Ce document, finalisé en 2011, a pour but d’encadrer, pour une durée de 5 ans, les actions EHA dans les écoles de 1er cycle. Il a pour vocation « de réduire la prévalence des maladies liées à l’eau et au manque d’hygiène/assainissement et d’augmenter le taux de rétention des élèves (des filles sur-tout) dans ces établissements par de meilleures conditions scolaires et sanitaires9 ». Les objectifs du PS-PEHMS sont au nombre de 7 :

1. Assurer l’approvisionnement en eau potable de toutes les écoles 2. Amener les écoles à adopter les bonnes pratiques d’hygiène 3. Renforcer la capacité des écoles dans la gestion des déchets solides, des eaux usées et excréta 4. Développer un partenariat dynamique entre les divers intervenants 5. Mettre en place le cadre législatif et règlementaire en matière d’éducation à l’hygiène en milieu

scolaire 6. Renforcer le plaidoyer et la mobilisation sociale en faveur de l’éducation à l’hygiène en milieu sco-

laire 7. Développer un mécanisme de suivi/évaluation

Ils sont présentés en Annexe G.2.

Outre les objectifs fixés par le PS-PEHMS, le document produit présente un diagnostic du contexte eau, hy-giène, assainissement au Mali et plus précisément dans les écoles de 1er cycle. Il décrit également les rôles de chaque institution dans le contexte de « l’école en mode décentralisée », sans pour autant être opéra-tionnel car très général.

Le programme Dubai Cares s’inscrit dans l’ensemble des préoccupations du PS-PEHMS, tant sur le plan de l’intermédiation sociale (le « Soft »), de la réalisation ou réhabilitation des infrastructures (le « Hard ») que du « suivi-évaluation-capitalisation ». Il va même plus loin en détaillant les méthodologies d’action. A l’inverse du PS-PEHMS, la proposition d’intervention Dubai Cares ne contient pas 7 grands axes d’intervention, mais 3 axes qui regroupent la très grande majorité des activités proposées par le PS-PEHMS. Le tableau ci-dessous présente l’alignement existant entre le programme Dubai Cares et les directives du PS-PEMHS.

9 PLAN STRATEGIQUE DE PROMOTION DE L’EDUCATION A L’HYGIENE EN MILIEU SCOLAIRE (2011 – 2015), Version finale du 15 mars 2011, suite à

l’atelier de validation du 9-10 mars 2011à Bamako – p8

Page 20: EVALUATION DU PROGRAMME WASH A L ECOLE AU MALI · 2020-04-29 · EVALUATION DU PROGRAMME WASH A L’ECOLE AU MALI Evaluation commanditée et financée par le Comité Espagnol UNICEF

Tableau 1 : Analyse de l’alignement entre la proposition d’intervention remis par l’UNICEF au Spanish NatCom par rapport au programme WASH à l’école - PROPOSAL_UNICEF Mali -NatCom Esp - Gvt Navarra-Avril 2011.docx

Objectifs spécifiques Résultats attendus Activités développées dans le cadre du programme Dubai-Cares Analyse des points d’alignement

1. Assurer l’approvisionnement en eau potable de toutes les écoles

1.1. Toutes les écoles disposent de points d’eau potable fonc-tionnels

« Au moins un point d’eau potable est disponible dans chaque école avec un accès facile et une qualité et une quantité suffisante pour la consommation, l’hygiène personnelle des enfants et des enseignants, la préparation des aliments, le nettoyage et la blanchisserie le cas échéant. »

L’objectif du programme est de fournir de l’eau potable, à moindre coût à une grande majorité des écoles du 1

er cycle. A cette fin, un

modèle de borne-fontaine et de pompe manuelle ont été produis. Par ailleurs le programme souhaite également faire la promotion des techniques simples de traitement de l’eau provenant de sources non protégées (l’ébullition, traitement au chlore, etc.).

1.2. Toutes les classes disposent de postes d’eau potable

2. Amener les écoles à adopter les bonnes pra-tiques d’hygiène

2.1. Les écoles dis-pensent des cours sur l’EHA

« Les modules de formation des enseignants du système d’éducation nationale intègrent plus d’éléments pertinents sur la promotion de l’hygiène »

Le programme Dubai-Cares ne souhaitent pas mettre en place de nouveaux modules d’enseignements EHA. Il souhaite utilisé les mo-dules existants, diséminés dans diffréentes matières, les compilés, les améliorer puis fournir à l’enseignant un guide de cours qu’il pourra suivre lors des cours traitant de ces thématiques

2.2. Les CGS, CSS AME et GE des écoles sont formés

« Des outils de promotion de l’hygiène et de la bonne gouvernance sont disponibles dans les écoles et actualisés régulièrement en fonction des meilleures pratiques identifiées

Les capacités des principaux acteurs de 130 écoles sont renforcées pour une utilisation optimale des outils

Les bonnes pratiques d’hygiènes, y compris la bonne utilisation et l’entretien des infrastructures sanitaires sont systématiquement encou-ragés auprès de tous les élèves et enseignants de 130 écoles

Le programme d’éducation parentale et les outils de mise en œuvre sont utilisés dans 130 communautés bénéficiaires 20,000 parents, fa-milles et communautés connaissent les bonnes pratiques de san-té/hygiène/nutrition/développement de leurs enfants. »

L’UNICEF, via un processus participatif a développé une série d’outils de communication à destination des différents intervenants des écoles (enseignants, CGS, AME, club d’Hygiène, etc.). Un accompa-gnement d’une 15aine de mois est également mis en place pour encadrer les enseignants et les directeurs a enseigner puis à suive les bonnes pratiques en matière d’hygiène, que cela soit dans la communauté scolaire ou dans le village.

2.3. Les élèves font la promotion de l’hygiène en milieu intra et extra scolaire

2.4. Les écoles entre-tiennent leurs locaux et les ouvrages d’eau et d’assainissement

2.5. Les gouverne-ments des enfants, les AME et les clubs de Santé Scolaire sont mis en place et sont fonctionnels.

« Le renforcement des capacités des acteurs de l’école pour établir des comités d’hygiène, des gouvernements d’enfants et autres formes d’associations pour garantir la durabilité des interventions. »

Il n’existe pas de développement particulier de cette activité dans le proposal UNICEF. Cela est développer dans le guide de l’animateur et dans les livrets Club d’Hygiène produit dans le cadre du pro-gramme.

Le programme ne s’appuie pas sur les gouvernements des enfants mais bien sur les Club d’Hygiène et sur les CGS/AME qu’il tente de redynamiser par la mise en place de formations spécifiques.

Page 21: EVALUATION DU PROGRAMME WASH A L ECOLE AU MALI · 2020-04-29 · EVALUATION DU PROGRAMME WASH A L’ECOLE AU MALI Evaluation commanditée et financée par le Comité Espagnol UNICEF

HYDROCONSEIL

Evaluation du programme WASH à l’école -Spanish Natcom - Rapport d’évaluation Page 21

Objectifs spécifiques Résultats attendus Activités développées dans le cadre du programme Dubai-Cares Analyse des points d’alignement

3. Renforcer la capacité des écoles dans la ges-tion des déchets solides, des eaux usées et excréta

3.1. les écoles dispo-sent de latrines con-formes

« Chaque école est dotée de blocs de latrines séparées physiquement par sexe en quantité suffisante pour atteindre au maximum un ratio de 70 filles/garçon par toilette.

Au moins un bloc de latrine par école est équipé pour permettre l’accès des personnes handicapées (rampe d’accès + barre de soutien)

Chaque bloc de latrine est équipé d’un dispositif lave-mains solide et pratique pour les enfants »

Le programme Dubai-Cares axe une partie de ses financements sur la construction et/ou réhabilitation de blocs latrines qui permettront aux enfants et enseignants de se rendre sereinement dans des in-frastructures sanitaires propres et adaptées. Pour cela un modèle de latrines amies des enfants à été produit.

3.2. les écoles dispo-sent d’un système ramassage des or-dures

Le programme ne considère pas cet aspect.

4. Développer un parte-nariat dynamique entre les divers intervenants

4.1. Un cadre de con-certation des inter-venants est mis en place et fonctionnel

Un cadre de concertation a été mis en place au travers l’organisation d’atelier d’échange et de capitalisation avec tous les partenaires de mise en œuvre Dubai-Cares selon des fréquences variables selon l’avancée du programme.

5. Mettre en place le cadre législatif et règle-mentaire en matière d’éducation à l’hygiène en milieu scolaire

5.1. Les textes rè-glementaires et nor-matifs en matière d’hygiène en milieu scolaire sont élabo-rés, adoptés et diffu-sés

« Le gouvernement du Mali sera un des principaux intervenants du pro-gramme et ses services techniques seront étroitement associés à sa mise en œuvre. Dans le cadre institutionnel établi au travers du Plan Stratégique de Promotion d l’hygiène en Milieu Scolaire, les principaux services concernés aux niveaux central et décentralisé sont ceux de l'éducation, de la santé, de l'approvisionnement en eau et de l'assainis-sement et enfin les communes.

L'UNICEF fournira une assistance technique et un financement appro-prié à ces homologues gouvernementaux pour mettre en œuvre des activités stratégiques de base »

L’objectif du programme est bien d’appuyer le gouvernement dans la mise en œuvre des activités EHA dans les écoles, notamment au travers de l’intégration de l’éducation à l’hygiène au sein des mo-dules de formation des enseignants et plus largement dans le cadre législatif et réglementaire encadrant l’EHA dans les écoles.

6. Renforcer le plaidoyer et la mobilisation sociale en faveur de l’éducation à l’hygiène en milieu scolaire

6.1. Les leaders et les relais de la socié-té civile sont mobili-sés en faveur de l’éducation à l’hygiène en milieu scolaire

Le programme, principalement orienté « Ecole » tente de mobiliser l’ensemble de la communauté. Cela se fait notamment grâce aux ONG d’intermédiation sociales au travers de séances de sensibilisation communes organisées à l’école ou bien encore d’activités de nettoyage du vil-

lage (mosquée, centre de santé, etc.) organisé par le directeur de l’école.

6.2. Les ressources pour la mise en œuvre du plan sont mobilisées

Le programme tente de renforcer le savoir faire des CGS et des directeurs dans l’élaboration d’un plan d’action et de son budget. Par la sensibili-sation et l’implication de la mairie ils essaient également de favoriser les discussions et les actions en faveur de la mobilisation des ressources.

Page 22: EVALUATION DU PROGRAMME WASH A L ECOLE AU MALI · 2020-04-29 · EVALUATION DU PROGRAMME WASH A L’ECOLE AU MALI Evaluation commanditée et financée par le Comité Espagnol UNICEF

HYDROCONSEIL

Evaluation du programme WASH à l’école -Spanish Natcom - Rapport d’évaluation Page 22

Objectifs spécifiques Résultats attendus Activités développées dans le cadre du programme Dubai-Cares Analyse des points d’alignement

7. Développer un méca-nisme de sui-vi/évaluation

7.1. Un plan de suivi/ évaluation est élabo-ré et exécuté

« Développer des outils de suivi des indicateurs d’impact/de résultats des programmes WASH sur la santé et l’éducation des enfants.

Former les intervenants clefs a l’utilisation des ces outils de collecte/ traitement des données recueillies a la base dans les écoles. »

L’UNICEF est parti prenante de nombreux programmes Wash à l’école au Mali (Dubai-Cares, DGIS, PADS, etc.). Pour assurer un bon suivi des interventions, il a développé un système de suivi évaluation transversal. L’implication des autorités nationales ou régionales dans le développement puis l’exploitation de ce système de suivi évalua-tion est souhaité mais difficilement mise en œuvre.

7.2. Une évaluation finale réalisée

« Une contribution au monitorage et à l'évaluation de l'ensemble du programme (les leçons apprises, de suivi des résultats et des impacts, etc.) »

Des évaluations ponctuent l’ensemble du programme.

Page 23: EVALUATION DU PROGRAMME WASH A L ECOLE AU MALI · 2020-04-29 · EVALUATION DU PROGRAMME WASH A L’ECOLE AU MALI Evaluation commanditée et financée par le Comité Espagnol UNICEF

Comme le montre l’analyse ci-dessus, le programme s’est aligné sur les documents nationaux encadrant l’EHA. Cependant, l’UNICEF et ses partenaires sont allés plus loin que le cadre défini par l’Etat. Ils ont, en un certain sens, dépassés leur mandat et se sont substitués aux responsables du PS-PEHMS en développant des outils et pratiques plus ambitieux ou opérationnels sans qu’ils ne soient systématiquement soumis à l’approbation du gouvernement. Cela s’explique en partie par le fait que :

durant la crise de 2011-2012, le gouvernement n’était pas reconnu par les bailleurs,

jusqu’à ce jour l’instabilité ministérielle a été relativement forte.

Cette situation n’est pas nécessairement négative car elle a permis une mobilisation rapide des fonds, une mise en œuvre rapide et facilitée sans pression politique ou administrative mais n’a pas, de fait, renforcer l’appropriation du programme par les ministères en charge de la question (Ministère de l'Éducation, Minis-tère de l'Eau, de l'Assainissement et de l'Environnement, Ministère de la Santé).

Toutefois, la volonté actuelle de l’UNICEF est justement de remettre le gouvernement malien au centre du programme et de redonner au Ministère de l’Education son rôle de pilotage du programme afin qu’il puisse être force de plaidoyer, moteur du changement (stratégie d’intervention) et solide dans le suivi du pro-gramme et de l’atteinte des objectifs fixés dans le PS-PEHMS. Ainsi l’UNICEF et ses partenaires se doivent progressivement de reprendre leur place d’Assistance à Maitrise d’Ouvrage en renforçant les capacités et le leadership gouvernemental.

Le programme s’aligne et dépasse les ambitions Nationales en matière d’eau d’hygiène et d’Assainissement en milieu scolaire. Néanmoins, le contexte du pays n’a, pour l’instant, pas permis de mettre le gouvernement au centre de cette démarche.

b) Adéquation du programme dans sa conception pour l’atteinte des objectifs poursuivis

Le programme Wash à l’école est solidement construit autour d’un arbre logique et d’activité à réaliser, elles mêmes très bien décrites dans les différents guides d’intervention produits par l’UNICEF et ses parte-naires.

Arbre logique Pour rappel, le cadre logique est présenté au chapitre C.3. Ce dernier est clair, il reprend les activités, les réalisations attendues et les impacts espérés. Il vise 3 principaux objectifs à savoir : améliorer l’accès aux infrastructures, améliorer l’utilisation de ces infrastructures et assurer leur durabilité.

Cycle d’intervention Le cycle d’intervention suit 14 étapes réparties sur 2 années scolaires, ce qui permet en année 1 le déclen-chement des activités et la mise en place des routines d’intervention et, en année 2, de vérifier la pro-activité de l’école à s’engager dans les activités EHA, vérifier les chances d’autonomisation et de durabilité et, au besoin de les réorienter et/ou de les redynamiser.

Activités soft Les activités soft sont encadrées par un manuel. Ce dernier est destiné aux ONG (coordinateurs et anima-teurs) ainsi qu’aux services techniques pour les aider dans la réalisation du package soft à dispenser dans les écoles concernées par le programme Wash à l’école. Ce manuel, structuré en fiche d’activités, est très clair et lisible. Pour chaque activité, les objectifs, la préparation nécessaire – préalable à la mise en œuvre de l’activité, le déroulement ainsi que la forme de compte-rendu attendu sont détaillées. Cette présenta-tion et ce contenu assurent aux ONG une bonne compréhension des activités à mener et permettent éga-lement à l’UNICEF, via les comptes-rendus d’activités et plus ponctuellement avec les discussions avec les bénéficiaires, de vérifier si l’ensemble du package soft a été réalisé.

Page 24: EVALUATION DU PROGRAMME WASH A L ECOLE AU MALI · 2020-04-29 · EVALUATION DU PROGRAMME WASH A L’ECOLE AU MALI Evaluation commanditée et financée par le Comité Espagnol UNICEF

HYDROCONSEIL

Evaluation du programme WASH à l’école -Spanish Natcom - Rapport d’évaluation Page 24

Par ailleurs, à la fin de ce guide, l’ensemble des rôles et responsabilités de l’ONG et de l’UNICEF sont rappe-lés et les documents additionnels à utiliser sont listés.

Ce guide est remis aux ONG et aux services techniques lors des formations10 qui leur sont dispensées. Elles sont directement animées par l’UNICEF, ou elles le sont en coopération avec des ONG ayant d’ores et déjà travaillées sur le programme ainsi qu’avec l’appui des services techniques les plus expérimentées, à mesure que leurs propres capacités se renforcent. Cette formation se déroule sur 4 jours et met principalement l’accent sur la bonne compréhension des objectifs du programme ainsi que sur l’utilisation du manuel soft et des autres ressources mises à la disposition des ONG. L’UNICEF profite également de cette formation pour rappeler à chacun les principes sur la gestion administrative et financière des fonds UNICEF11.

Activités hard Les activités Hard suivent le même modèle que les activités soft. Là encore, un guide technique a été réalisé à destination des entreprises de construction, des bureaux de contrôle et des fournisseurs contractés par l’UNICEF et ses partenaires dans le cadre du programme Wash à l’école. Ce dernier est composé de plu-sieurs parties comprenant les spécifications techniques attendues des différents ouvrages (= standards techniques), les plans-types et les devis à utiliser ainsi que des photos concernant différentes constructions réalisées dans le cadre du programme. Notons que pour chaque infrastructure, la fiche de réception de l’ouvrage est présentée ; ainsi les entrepreneurs ne peuvent pas contester par la suite les interventions du Bureau de contrôle de conformité des ouvrages aux standards établis par l’UNICEF.

La répartition des rôles et responsabilités sont également présentées à la fin du rapport, tout comme les documents additionnels fournis à l’entreprise par l’UNICEF.

Ce guide ainsi que l’ensemble des autres outils didactiques sont fournit à l’entreprise lors d’une formation d’une journée consacrée au rappel des obligations et clauses contractuelles liant l’entreprise à l’UNICEF, à la présentation et explication des orientations techniques ainsi qu’à la revue des documents12 de chantier.

Le programme est solidement construit. Le cycle d’intervention sur deux années scolaires est pertinent, tout comme la création d’un processus pas à pas très encadré pour la mise en œuvre des activités Soft et Hard. L’ensemble de ces précautions permet-tent un encadrement efficace des écoles vers une dynamique durable EHA

c) Omission d’activités qui auraient permis d’atteindre plus sûrement les objectifs

Le paquet d’activités Dubai Cares est complet et ne présente pas de manquement majeur. Nous ne parle-rons pas ici des activités qui permettent la durabilité du programme. Elles seront abordées dans le chapitre D.5.1.b).

Concernant les activités d’intermédiation sociale, aucune activité n’a été omise pour garantir l’atteinte des objectifs.

Les différentes activités Soft ou Hard sont définies dans les guides d’intervention. Toutes les activités nécessaires ont été mises en place pour assurer l’atteinte des 3 objectifs du pro-gramme

10

Le contenu des formations est présenté dans le document : Réunion de démarrage Entreprises latrines - Unicef+Sid-Sertas 09.04.14.pptx. Le pro-gramme de formation type est présenté dans le document : Agenda réunion de démarrage entreprises DAO DC4 - Lah 10.12.13.docx 11

Gestion admin+fin des fonds UNICEF (HS avec justifs).docx 12

Le contenu des formations est présenté dans le document : Formation ONG HS BKO (DC3+DGIS+Canada) - JT 18.12.13.pptx. Le programme de formation type est présenté dans le document : Agenda formation initiale ONG HS à BKO - Unicef 18.12.13.docx

Page 25: EVALUATION DU PROGRAMME WASH A L ECOLE AU MALI · 2020-04-29 · EVALUATION DU PROGRAMME WASH A L’ECOLE AU MALI Evaluation commanditée et financée par le Comité Espagnol UNICEF

HYDROCONSEIL

Evaluation du programme WASH à l’école -Spanish Natcom - Rapport d’évaluation Page 25

d) Ajout de certaines activités ayant permis d’atteindre les objectifs

La démarche de l’UNICEF et des partenaires Dubai Cares est très ouverte et permet chaque année de capi-taliser sur les interventions passées et d’améliorer de manière collégiale les documents produits. Ainsi, chaque année, les ONG/entreprises partenaires et les services techniques concernés par le programme se réunissent et proposent des axes d’amélioration qui sont ensuite confrontés aux contraintes stratégiques, administratives, financières et logistiques de l’UNICEF.

De manière générale : amélioration des modalités de gestion scolaire Le programme Dubai Cares a développé des activités supplémentaires (par rapport à d’autres programmes WASH) ayant pour objectif d'augmenter la durabilité du programme. Citons par exemple :

formation approfondie des comités de gestion scolaire sur leurs rôles et responsabilités en matière de WASH et sur leur bon fonctionnement.

appui à la création d'activités génératrices de revenus (caisse d'épargne et de crédit villageoise gé-rée par une association féminine),

mise en place d'une caisse pour le club d'hygiène alimentée par des sanctions administrées par les élèves eux-mêmes entre eux contre les mauvais comportements d'hygiène, et qui servira pour l'achat du petit matériel

De manière spécifique : le guide Soft Le processus d’amélioration débute par une phase de discussion sur les activités à ajouter ou les modifica-tions à faire au sein d’une activité. Citons par exemple les améliorations proposées par le REHA13 relative au budget et celles proposées par l’UNICEF entre la version 2013 et 2014.

Répartition de la prise en charge des dépenses entre le directeur, le CGS, etc. : insertion page 9 du guide « Quelles sont les dépenses que l’école est prête à prendre en charge » […] « Pouvez-vous écrire maintenant une lettre manuscrite datée, signée par le président du CGS et le directeur, […] précisant la contribution de l’école »

Implication des vendeuses d’aliments : insertion page 44 du guide « elles paient une amende au CGS, à l’école ou au club d’hygiène en cas de mauvais respect de l’hygiène »

Prise en compte des tensions entre les directeurs, les CGS et les APE lors des interventions des ONG : Intégré dans le module de formation initiale des ONG et services techniques (et celui des en-seignants et des CGS) pour l’année 2014-15 (écoles concernées par le nouveau financement Spa-nish NatCom), à travers plusieurs schéma explicatifs.

L’UNICEF a aussi capitalisé en interne, en listant de manière collégiale tout le long de l’année des améliora-tions à envisager pour l’année suivante. Voici quelques exemples :

1. Allonger la formation initiale UNICEF d'1 jour (total = 4 jours au lieu de 3)

2. Faire participer les ONG expérimentées comme formateurs lors de la formation initiale or-

ganisée par l'UNICEF

3. Ajouter la formation complémentaire dans le guide d'animation car pour l'instant elle n'appa-

rait pas (il s'agit d'une formation "pratique" de 3 jours qui suit immédiatement la formation

initiale) Activité 1

4. UNICEF devrait participer aux visites de courtoisie ainsi que le CAP (selon le budget dis-

po) et la mairie Activité 2

5. Inclure dans le guide un modèle de texte que les ONG devront lire pour décrire le pro-

gramme à leurs différents interlocuteurs lors des visites de courtoisie Activité 2

6. Signature d'un mémorandum d'entente entre l'école (directeur et CGS), la mairie, le CAP et

l'ONG où seront définies les responsabilités et contributions de chacune des parties Activi-

té 2 (à enlever de l’activité formation CGS)

7. Changer l'ordre de certaines activités : d'abord le déclenchement ATPC+E Activité 4, puis

le jour de foire et le lancement du concours "écoles propres" Activité 5, puis la formation

13

REHA : Réseau des ONG intervenant dans les activités eau/hygiène/Assainissement en milieu scolaire.

Page 26: EVALUATION DU PROGRAMME WASH A L ECOLE AU MALI · 2020-04-29 · EVALUATION DU PROGRAMME WASH A L’ECOLE AU MALI Evaluation commanditée et financée par le Comité Espagnol UNICEF

HYDROCONSEIL

Evaluation du programme WASH à l’école -Spanish Natcom - Rapport d’évaluation Page 26

des enseignants Activité 6 et du club d'hygiène Activité 7, puis les séances de sensibilisa-

tion sur le lavage des mains et l’hygiène alimentaire Activité 8, l'hygiène de l'eau Activité 9,

la gestion des déchets Activité 10 et liens entre maladies et manque d’hygiène Activité 11.

8. Mieux détailler dans le guide les différentes étapes du déclenchement ATPC+E et illustrer

avec des photos

9. Ajouter dans le guide un agenda détaillé de la formation des enseignants Activité 6, des

clubs d'hygiène Activité 7 et des CGS Activité 12

De manière spécifique : le guide Hard Le même principe est appliqué pour le guide Hard. De manière générale, une fiche de réception des travaux a été ajoutée au guide, elle permet d’informer les entreprises de construction des standards de construc-tion attendus pour l’ouvrage. Il s’agit en fait d’une amélioration de la partie « Normes minimales pour le suivi-évaluation » de la version 2013.

La deuxième modification consiste en la modification des plans types et devis. Par exemple, après plusieurs discussions, les latrines à double fosse alternée ont été retirées. Ainsi, un seul type de latrine est présenté dans le guide, ce qui permet une harmonisation des approches et une meilleure compréhension/lisibilité des entreprises de construction sur le travail à réaliser. Les modalités d’évacuation des eaux usées ont été améliorées. Des indications de dimensions, pentes et mesures de renforcement des murets des latrines et points d’eau ont été ajoutées.

Cela est également valable pour les lave-mains. Les modèles présentés dans le guide sont issus des résul-tats des activités de recherche opérationnelle réalisées par les membres du programme Dubai Cares.

Le programme est axé sur une démarche ouverte sur la capitali-sation et l’échange d’expérience. Cette orientation donne lieu, chaque année à l’amélioration collégiale des guides d’intervention et des process

D.1.2. Bonnes pratiques : Le programme a-t-il su intégrer les derniers développements et in-novations dans le domaine?

Le programme Dubai-Cares est basé sur les échanges d’expérience et sur la capitalisation des bonnes pra-tiques constatées en matière d’EHA dans les écoles. Il se nourrit de l’expérience des 6 partenaires de mise en œuvre au Mali mais aussi dans les pays ou ces derniers interviennent dans le WASH à l’école.

Par ailleurs, la cellule MEL est très active dans la recherche de document produit sur le WASH à l’école et échange régulièrement avec ces homologues dans d’autres pays. Citons notamment la République Démo-cratique du Congo (RDC) avec son programme National Ecole et Village Assainis (EVA) et la Côte d’Ivoire. Dans le cadre de l’analyse des bonnes pratiques, le consultant se basera essentiellement sur sa propre ex-périence évaluative du programme EVA en RDC.

a) Prise en compte de l’expérience des autres partenaires du programme ou de l’expérience d’autres programme WASH à l’école mis en œuvre par l’UNICEF dans le volet "construction"

En réaction à l’expérience d’autres pays, l’UNICEF Mali a mis, dès le début du programme Dubai-Cares, l'ac-cent sur le contrôle qualité du processus de mise en œuvre des activités : plans et spécifications techniques standardisés et de bonne qualité pour les ouvrages WASH. De la même manière, UNICEF insiste sur le con-trôle indépendant des travaux avec une checklist pour le suivi des chantiers de construction. Pour le volet solft : un guide d'animation standardisé "pas à pas" et une fiche de supervision des activités terrain.

Assainissement Le programme Wash à l’école de l’UNICEF a observé les différentes pratiques des acteurs intervenant dans les écoles. Certains programmes, tel que le Programme National Ecole Assainie en RDC, a testé l’auto-

Page 27: EVALUATION DU PROGRAMME WASH A L ECOLE AU MALI · 2020-04-29 · EVALUATION DU PROGRAMME WASH A L’ECOLE AU MALI Evaluation commanditée et financée par le Comité Espagnol UNICEF

HYDROCONSEIL

Evaluation du programme WASH à l’école -Spanish Natcom - Rapport d’évaluation Page 27

construction assistée. Cette expérience est justifiée par le fait que les matériaux locaux ou tôle sont dispo-nibles dans de nombreuses régions (bois, bambous) et que cette méthode permet, en plus de réduire les coûts, de limiter les problèmes logistiques des entreprises de construction pour l’acheminement des maté-riaux jusqu’aux sites isolés mais aussi et surtout de garantir la duplication des ouvrages par l’école (sans appui financier).

Figure 5 : Premières latrines EVA -plan standard béton (à gauche), 2ème

vague de latrines à moindre couts – ban-co/tôle par les ONG (au centre), auto-construction par les écoles après remplissage de la fosse (à gauche) – UNICEF

RDC

D’autres options techniques, mises en œuvre par les partenaires Dubai Cares, ont testé des solutions d’assainissement tenant compte des contextes d’intervention, par exemple :

WaterAid : Latrines VIP à simple fosse dans les petites cours d’écoles urbaines, Urinoirs ;

Oxfam : Cabine de latrines fermée (toit non surélevé) à Gao ;

CARE : Latrines surélevées et en pierre en pays dogon.

Figure 6 : Exemple de Latrines CARE (à gauche), Urinoir WaterAid (au centre), Oxfam (à droite) – UNICEF Mali

Au regard de ces observations, le programme a fait le choix de conserver la maitrise de la construction de la fosse et de la superstructure par des entreprises privées du BTP et d’ériger la construction en béton comme standard de construction. En effet, même si le coût de l’infrastructure et le temps de construction sont plus élevés, trop d’incertitudes persistent sur la qualité des auto-constructions, qui est d’une impor-tance capitale pour les lieux fortement fréquentés par des enfants comme les écoles. C’est avec cette ap-proche que le programme Dubai Cares souhaite met en place des standards de qualité élevés pour garantir la sécurité des enfants et la durabilité de l’ouvrage.

Comme le disait le coordinateur suivi-évaluation-capitalisation (MEL) du programme Dubai-Cares « Le ban-co n'est pas durable, et si on utilise le béton alors autant bien le faire donc avec des entreprises qualifiées qu'on peut mieux encadrer que si on devait superviser une multitude de petits chantiers autonomes éparpil-lés ». Ainsi, des standards Hard pour les Latrines ont été mis en place14 et les principes suivants ont été adoptés :

14

Cf. page 33 et suivantes du Guide Equipements Wash en milieu scolaire « Normes, spécifications techniques, plans-types et photos pour les en-treprises et les bureaux de contrôle »

Page 28: EVALUATION DU PROGRAMME WASH A L ECOLE AU MALI · 2020-04-29 · EVALUATION DU PROGRAMME WASH A L’ECOLE AU MALI Evaluation commanditée et financée par le Comité Espagnol UNICEF

HYDROCONSEIL

Evaluation du programme WASH à l’école -Spanish Natcom - Rapport d’évaluation Page 28

Latrines VIP à simple fosse avec toit surélevé, rampe handicapé et mur d’intimité

Latrines surélevées en terrain difficile : Test puis maintenus

Urinoirs : Test puis maintenus avec améliorations

Point d’eau Les réflexions autour des points d’eau consistent principalement à tenter de diminuer leur coût (afin d’augmenter le volume d’infrastructures construites) tout en maintenant leur qualité (pour garantir la du-rabilité et la pérennité des ouvrages). La diminution des coûts passe par l’intégration d’écoles qui disposent déjà d’un point d’eau et par la diminution des exigences. Ainsi, suite aux recommandations de Save the Children, de Care et d’Oxfam, le programme a « autorisé » la construction de puits busés équipés de pompe à motricité humaine, qui initialement n’étaient pas dans la liste des options techniques pour les écoles.

Le maintien de la qualité a été discuté en interne mais également avec d’autres programmes Wash à l’école. Des discussions ont eu lieu avec le MEL de la RDC et ont conforté le choix de l’UNICEF Mali de faire appel a des entreprises qualifiées pour la réalisation des forages et pour l’installation des pompes à mo-tricité humaine. Il en va de même pour le choix de faire appel à un bureau de contrôle. En effet, en RDC, durant les premières années du programme, il n’a apparemment pas suffisamment été accordé d’importance à la qualité, à la localisation des points d’eau construits et à la surveillance des travaux. Il en résulte que, quelques années seulement après leur mise en service, de nombreux points d’eau installés dans les écoles sont actuellement dysfonctionnels, et que des débats se sont multipliés pour identifier les responsabilités.

Là encore, l’équipe d’évaluation considère que les réflexions menées par le programme sur la question des points d’eau est intéressante et démontre une prise de conscience de l’importance d’avoir un point d’eau à l’école et des difficultés que génère la construction d’un point d’eau de qualité.

Lave main La question des lave-mains est particulière car plusieurs recherches opérationnelles ont été réalisées par les partenaires Dubai Cares afin de mettre en place les meilleurs dispositifs à disposition des enfants. Ainsi, il a été convenu de mettre en place des dispositifs amovibles de lavage des mains à proximité immédiate des latrines mais aussi devant chaque salle de classe.

Plusieurs types de lave-main ont également été testés. Les Tippy-Tap fonctionnent bien dans l’école comme activités ludiques de construction mais ne semblent pas, selon les enseignants et les directeurs rencontrés, faciles d’utilisation car fragile et surtout peu volumineux (ces réflexions issues du terrain reflète aussi un manque d’implication de certains). Des lave-mains collectifs ont été installés dans les écoles et sont testés. D’autres modèles collectifs et individuels, avec et sans robinets, ont également été testés.

Par ailleurs, une étude formative sur les facteurs bloquant sur l’utilisation des latrines et des lave-mains a été réalisée par Save the Children dans le cadre du partenariat Dubai Cares. Cette dernière, réalisée en 2012 a permis de confirmer les hypothèses avancées par les différents membres du consortium.

Contrôle des travaux Tel que dans d’autres pays, le recours aux services techniques de l'Etat pour le suivi rapproché des chan-tiers ne s'est pas révélé une option efficace, car faiblement qualifiés et peu disponibles. Le programme a donc opté dans un second temps, à partir de 2012, pour le recrutement d’un bureau de contrôle perma-nent recruté par l'UNICEF, sous la supervision et avec l’encadrement de l’UNICEF, qui effectue en plus un suivi ponctuel pendant la durée des travaux au moins 3 fois sur tous les chantiers. Cette approche de l’UNICEF-Mali a été également comparée à celles adoptées par les autres partenaires Dubai Cares, puis maintenue.

La mise en place de standards de construction axés sur la qualité des ouvrages et non sur le coût ; de procédures d’appel d’offres strictes à destination des entreprises de BTP reconnues ; et d’activités de contrôle qualité des ouvrages sont autant de pro-cédures capitalisées sur l’expérience d’autres activi-tés/programme Wash à l’école.

Page 29: EVALUATION DU PROGRAMME WASH A L ECOLE AU MALI · 2020-04-29 · EVALUATION DU PROGRAMME WASH A L’ECOLE AU MALI Evaluation commanditée et financée par le Comité Espagnol UNICEF

HYDROCONSEIL

Evaluation du programme WASH à l’école -Spanish Natcom - Rapport d’évaluation Page 29

b) Prise en compte de l’expérience des autres partenaires du programme ou de l’expérience d’autres programme WASH à l’école mis en œuvre par l’UNICEF pour le volet "intermédiation sociale"

Le volet Intermédiation sociale du programme Dubai-Cares suit les mêmes principes que le volet Hard. Tous les ans, un atelier de capitalisation avec les ONG d’exécution de l’UNICEF et les autres partenaires Dubai Cares permet un retour d’expérience. En cas de « sucess-story » ou de résultats encourageants, les avan-cées sont intégrées au tronc commun du programme. De la même manière, UNICEF a élaboré un guide d'animation standardisé "pas à pas" pour les ONG, et enfin des fiches d'évaluation des séances de sensibili-sation, des comptes rendus d'activités que les ONG doivent envoyer pour chaque activité menée dans chaque école et qui permettent de contrôler l'effectivité et la qualité de la mise en œuvre du guide d'ani-mation.

Standardisation des activités Les activités d’intermédiation sociale, contrairement à d’autres programmes Wash à l’école, sont extrê-mement standardisées. Les séances de sensibilisation se font dans les écoles, avec les enfants, sur les diffé-rents thèmes d'hygiène (ATPC, entretien des latrines, hygiène de l'eau, lavage des mains, hygiène alimen-taire, gestion des eaux usées, des déchets) et en se basant sur des méthodes inspirées de l'ATPC (mais sans explications techniques inadaptées pour un public faiblement instruit), pour essayer de provoquer un chan-gement durable de comportement.

Coupler ATPC et ATPC+E De nombreux programmes Wash ont fait des recherches concernant l’impact de coupler l’approche ATPC Ecole+Village, l’école étant le moteur du changement de comportements dans les villages, et inversement. Le plus important dans la démarche est que les communautés (village et/ou école) soient les principaux moteurs du changement, qu’ils adhèrent aux fondements du programme, qu’ils en fassent librement la demande après avoir été sensibilisés sur l’existence même de ce programme. Cette dimension a été inté-grée par l’UNICEF fin 2012.

Approche par la demande L'approche par la demande n'était pas une réalité au Mali, mais après étude de quelques études de cas et notamment du programme Ecoles et Villages Assainis de la RDC, l’UNICEF a souhaité concevoir un nouveau système de sélection des écoles bénéficiaires. L’approche est actuellement testée pour les écoles de 2014-2015 (sur le nouveau financement du Spanish NatCom). Ainsi, les districts éducatifs présélectionnent les écoles éligibles susceptibles de bénéficier de l'intervention sur la base de critères objectifs choisis par l'UNICEF, puis sont informés de leur éligibilité à un concours "écoles et villages propres" et des conditions préalables pour y participer. Elles ont 15 jours pour soumettre leur dossier de candidature accompagné d’une lettre de motivation, signés par tous les enseignants, le directeur d'école, le maire, le chef de village, le comité de gestion scolaire pour s'assurer qu'ils sont tous bien coordonnés et motivés, et par travers les-quels ils s’engage à assumer leurs rôles et responsabilités par rapport au bon déroulement du concours.

Sur le volet intermédiation sociale, la standardisation des activi-tés dans les écoles, le couplage du déclenchement Ecole/Village pour le FEDAL, ainsi que l’approche de la sélection par la de-mande sont autant de mécanismes mis en place à la suite des retours d’expériences dans le domaine du Wash à l’école

c) Prise en compte de l’expérience des autres partenaires du programme ou de l’expérience d’autres programme WASH à l’école mis en œuvre par l’UNICEF pour le volet "suivi-évaluation/capitalisation/coordination"

Le système de suivi-évaluation reprend les principes UNICEF en termes de monitoring de programme. Ce-pendant, le nombre d’écoles d’intervention de l’UNICEF et le nombre d’ONG, de services techniques et de prestataires privés mobilisés dans la réalisation et le suivi des activités a nécessité de mettre en place des mécanismes et outils plus systématiques par rapport aux autres partenaires Dubai Cares qui ont la capacité de faire davantage de suivi rapproché sur le terrain. L’approche proposée et les outils mis en place sont

Page 30: EVALUATION DU PROGRAMME WASH A L ECOLE AU MALI · 2020-04-29 · EVALUATION DU PROGRAMME WASH A L’ECOLE AU MALI Evaluation commanditée et financée par le Comité Espagnol UNICEF

HYDROCONSEIL

Evaluation du programme WASH à l’école -Spanish Natcom - Rapport d’évaluation Page 30

donc solides et rigoureux. Cependant, il serait utile d’envisager de développer un mécanisme de suivi-évaluation-capitalisation qui ne se limiterait plus seulement aux activités menées par l’UNICEF et ses parte-naires, mais qui aurait une vocation nationale et serait dans les mains de l’Etat, comme d’autres pays tels que le Nigéria ou la RDC tentent de mettre en place.

Sur le volet suivi/évaluation/capitalisation, les outils mis en place par l’UNICEF répondent aux besoins actuels du pro-gramme. Cependant, aujourd’hui, ils ne présentent pas un ca-ractère national et ils ne sont pas pilotés par les Ministères en charge de l’EHA dans les écoles.

d) Prise en compte des derniers développements de la recherche dans l’eau, l’hygiène et l’assainissement

La dimension Child-to-Child, approche nouvelle dans le Wash à l’école est expérimentée au travers la mise en place des Club d’Hygiène et de leur dynamisation. Dans le prolongement de cette approche le pro-gramme tente de mettre en place dans les écoles les plus dynamiques des concours « classes propres », financés par l’école elle-même et qui permettrait d’impliquer plus largement les enfants dans le suivi de la propreté de l’école et du respect des bonnes pratiques.

La dimension 3 Stars Approach, approche développée par l’ONG Fit for school, est une approche largement intégrée par l’UNICEF dans le cadre de ses programmes Wash à l’école. Afin de regarder si cette nouvelle méthodologie pourrait-être utilisé au Mali, le Mel Dubai-Cares s’est rendu du 30 juin au 11 juillet 2014 au Nigéria afin d’échanger sur ces pratiques. Certains pré-requis pour le passage d’une étoile à l’autre existent d’ores et déjà au Mali, néanmoins l’analyse réalisée par le MEL Dubai-Cares n’est pas favorable au dévelop-pement d’une telle approche au Mali.

Par la compilation et la lecture de nombreux documents collec-tés via le site UNICEF ou autres, ainsi que par des missions de capitalisation (ex Nigéria), le programme s’est tenu informé des avancées de la recherche.

D.1.3. Sensibilisation aux besoins : Le programme a-t-il pu satisfaire les préoccupations des différentes catégories de bénéficiaires et partenaires ?

a) Le programme répond-il correctement aux besoins prioritaires et attentes des bénéficiaires (élèves, enseignants, CGS, parents d'élèves, etc.) ?

Les établissements scolaires au Mali présentent tous de réels besoins en termes d’EHA, même si certains d’entre eux ont bénéficié dans le passé d’appuis extérieurs, principalement dans la construction de points d’eau ou de latrines (coopération bilatérale, multilatérale).

Les entretiens réalisés ainsi que les observations réalisées laissent à penser que les enseignants et les direc-teurs ne mesurent pas l’importance d’être formés, sensibilisés aux activités à réaliser pour entrainer un changement de comportement chez l’enfant. Ainsi, la formation des enseignants, la sensibilisation de toute la communauté scolaire (y compris parents d’élèves au travers du CGS, de l’APE et de l’AME) sont des activités qui ne répondent pas à un besoin exprimé par les bénéficiaires mais sont néanmoins très utiles pour obtenir un changement de comportement.

Enfin, dans certaines écoles, le corps enseignants dans son ensemble aurait souhaité donner la priorité à d’autres investissements que les infrastructures EHA. S’ils sont conscients que le programme Dubai Cares a pour objet l’amélioration des conditions sanitaires des élèves, les besoins exprimés concernent principale-ment l’amélioration des bâtiments scolaires, la construction de nouvelles salles de classe, la clôture de l’école et le maintien de la cantine scolaire.

Page 31: EVALUATION DU PROGRAMME WASH A L ECOLE AU MALI · 2020-04-29 · EVALUATION DU PROGRAMME WASH A L’ECOLE AU MALI Evaluation commanditée et financée par le Comité Espagnol UNICEF

HYDROCONSEIL

Evaluation du programme WASH à l’école -Spanish Natcom - Rapport d’évaluation Page 31

L’assainissement étant relégué au second plan dans leurs priorités, la prise en compte de ces besoins ne peut pas se faire sans une plus grande implication de la section Education de l’UNICEF, et sans une augmen-tation très significative des coûts d’intervention.

Le programme répond aux besoins des écoles en matière d’EHA. Les directeurs d’écoles et les enseignants sont satisfaits de l’intervention des ONG et des entreprises prestataires de tra-vaux. Cependant leurs attentes et priorités sont parfois ailleurs : construction de salles supplémentaires et d’une clôture, infras-tructures qui ne font pas parties du package Wash

b) Le programme répond-il correctement aux besoins prioritaires et attentes des partenaires de mise en œuvre (communes, services techniques, ONG, prestataires de travaux, etc.)

Les besoins et les attentes des partenaires de Dubai Cares ne sont pas les mêmes que les attentes et be-soins des bénéficiaires. Par ailleurs il convient de distinguer les communes et les organes déconcentrés de l’Etat d’une part et les partenaires techniques de mise en œuvre d’autre part.

Les communes et les organes déconcentrés des Ministères Aucune analyse ne sera faite en ce qui concerne les besoins des communes puisqu’elles n’ont pas pu être rencontrées dans le cadre de cette évaluation. Néanmoins, il est possible de dire que de manière générale les communes sont demandeuses d’appui dans l’amélioration des conditions sanitaires de leurs écoles. Cela est d’autant plus vrai qu’avec la décentralisation elles sont responsables de l’entretien et du développe-ment de ces équipements sociaux, sans pour autant en avoir les capacités méthodologiques et financières.

En ce qui concerne les CAP, seul le CAP de Koulikoro a pu être interrogé. S’ils sont contents d’être appuyés par un programme, et d’acquérir une nouvelle rigueur de travail en participant aux activités clefs, ils ne nous ont pas fait part de besoins spécifiques auxquels aurait répondu le programme.

Les ONG d’intermédiation sociale et les entreprises de construction Les ONG et les entreprises rencontrées n’ont pas, préalablement à la création du programme, exprimé de réels besoins. Néanmoins, il est important de dire qu’il semble que le programme Dubai Cares a devancé leurs attentes ou leur besoins en termes de survie économique, de renforcement de capacités techniques et organisationnelles mais aussi d’autonomisation, notamment :

survie économique : de nombreuses structures locales ont souffert économiquement de la crise politique et de l’effondrement d’une partie de l’économie malienne suite au retrait des bailleurs de fonds en 2012. Le principal besoin, avoué ou non, était alors de conserver une activité permettant de faire survivre ses structures et leur personnel. L’UNICEF-Mali en général, le programme WASH à l’école de l’UNICEF en particulier, ont poursuivi leurs activités pendant toute la durée de la crise et ont donc contribué à la survie économique de ces structures hautement dépendantes de l’économie de l’aide internationale.

renforcement de capacités techniques et organisationnelles : les entreprises locales cherchent à améliorer leurs compétences techniques pour gagner en crédibilité face aux clients. Le programme a mis en place des formations conséquentes et des ateliers d’échanges ainsi que des guides détail-lées d’intervention permettant de rehausser la qualité de leurs compétences et donc de leurs inter-ventions (meilleur enchainement des activités, gains d’échelle, standards de construction, etc.).

autonomisation : dans les écoles cofinancées par le Spanish NatCom, les ONG locales sont enca-drées par des ONG internationales. Le programme, au travers la coordination et la mise en réseau de ces ONG qui utilisent toutes les mêmes approches, les mêmes outils et participent aux mêmes réunions de coordination et de capitalisation, a développé leur envie d’indépendance et d’autonomisation. Cela a abouti à la création par ces ONG d’un « Réseau des ONG nationales pour l’Eau, l’hygiène et l’assainissement en milieu scolaire » (REHA), enregistré officiellement en tant qu’association depuis 2013. L’UNICEF soutient le REHA et renforce les capacités de ses membres.

Page 32: EVALUATION DU PROGRAMME WASH A L ECOLE AU MALI · 2020-04-29 · EVALUATION DU PROGRAMME WASH A L’ECOLE AU MALI Evaluation commanditée et financée par le Comité Espagnol UNICEF

HYDROCONSEIL

Evaluation du programme WASH à l’école -Spanish Natcom - Rapport d’évaluation Page 32

Le programme, dans sa conception, ses outils et l’ensemble des ajustements réalisés répond correctement aux attentes des par-tenaires de mise en œuvre. De fait de la situation critique de l’accès à l’eau et à l’assainissement dans les écoles au Mali, il répond également au besoin des communes et des organismes déconcentrés de l’Etat

c) Le programme a-t-il donné lieu à une implication suffisante des bénéficiaires et des partenaires ?

L’évaluation de Hydroconseil s’est concentrée sur les écoles cofinancées par le Spanish Natcom. Dans toutes ces écoles, les activités terrain ont débuté en 2012 ou plus récemment et ont donc tout récemment terminé le cycle projet (ou vont le faire dans les semaines à venir). Ainsi, s’il est facile d’analyser le degré d’implication des bénéficiaires dans le programme, il est difficile de mesurer si ces derniers l’ont été après le retrait de l’ONG par manque de recul.

Les méthodologies de sélection des sites et implication La méthodologie de sélection des sites évolue à chaque nouvelle vague d’école intégrant le programme. En effet le programme Dubai Cares tente d’améliorer le processus :

Le premier lot d’écoles a été choisi à partir d’une liste restreinte réalisée par les services tech-niques des DRACPN et des CAP en collaboration avec l’UNICEF et sur des critères établis par Dubai Cares15 A cette époque, les écoles n’avaient pas la liberté d’exprimer leur besoin. Le manque de données fiables sur les écoles, et le manque de critères objectifs et de méthodes de priorisation bien définis, ont laissé parfois la place à un « clientélisme politique/de pouvoir »,

Pour la prochaine sélection (2014-2015) bénéficiant du nouveau financement Spanish Natcom, l’UNICEF a décidé de remettre l’école et la communauté au centre du processus en laissant celles qui sont éligibles poser leur candidature, selon la procédure décrite plus haut. Cette nouvelle mé-thodologie facilite la sélection d’écoles motivées et capables de se mobiliser.

Choix des interventions - analyse des besoins Dans les écoles enquêtées, les directeurs, les enseignants et les élèves ont plutôt bien accueilli le pro-gramme du fait de son adéquation avec les besoins réels, à savoir améliorer les conditions de scolarisation des enfants et les conditions d’enseignement.

Toutefois, l’implication des directeurs, des enseignants et des élèves est faible au démarrage du projet. Les activités d’indentification des faiblesses de l’école ne sont pas réalisées par les bénéficiaires et/ou sont dic-tées par les standards/lignes de conduite du programme. En RDC, UNICEF a tenté de mettre en place une auto-évaluation des besoins de l’école puis l’élaboration des Plans d’Opération et de Maintenance des acti-vités (POM) jugé indispensables pour l’amélioration des conditions hydro-sanitaires de l’école afin de mieux impliquer les bénéficiaires (voir figure 7 ci-dessous).

Figure 7 : Extrait du processus pas à pas Ecoles Assainies en RDC16

Pas 3 : Diagnostic participatif initial : La troisième étape de l’assainissement de l’école consiste en la réali-sation d’un diagnostic participatif initial des conditions hydro-sanitaires de l’école par les brigadiers sco-laires démocratiquement élus, sous la supervision des enseignants.

Pas 4 : Analyse des résultats du diagnostic et Elaboration d’un Plan d’Opérations et de Maintenance : Le directeur de l’école, le comité de parents et les brigadiers analysent les résultats, planifient et élaborent un Plan d’Opérations et de Maintenance des activités (POM) devant être réalisées pour assainir le milieu sco-laire.

15 Le consultant n’a pas analysé ces critères. 16

http://www.ecole-village-assainis.cd/fr_programme-ea-etapes-processus-pas-a-pas-assainissement-ecoles.html

Page 33: EVALUATION DU PROGRAMME WASH A L ECOLE AU MALI · 2020-04-29 · EVALUATION DU PROGRAMME WASH A L’ECOLE AU MALI Evaluation commanditée et financée par le Comité Espagnol UNICEF

HYDROCONSEIL

Evaluation du programme WASH à l’école -Spanish Natcom - Rapport d’évaluation Page 33

Pas 6 : Diagnostic participatif final : Les brigadiers, sous la supervision des enseignants, réalisent un dia-gnostic participatif final des conditions hydro-sanitaires de l’école. Ce diagnostic permet de mesurer l’impact du Programme sur la diminution de la morbidité diarrhéique et d’estimer si les résultats atteints sont conformes aux objectifs du processus d’assainissement de l’école.

Néanmoins, le programme Ecoles Assainies, malgré l’auto-diagnostic réalisé est confronté lui aussi à des standards de construction ou des lignes directrices programme (orienté WASH) et non « amélioration de l’école dans son ensemble ». Ainsi il est parfois préconisé, dans une école en manque d’infrastructures sco-laire (salle de classe), la construction de nombreuses latrines plutôt que de réduire l’investissement sur le Wash et d’orienter le financement vers le besoin réel de l’école.

L’auto-diagnostic est donc d’un pas vers l’implication de la communauté bénéficiaire mais ne doit pas être une fin en soi.

Implication dans les activités d’intermédiation sociale Certains enseignants dans certaines écoles se sentent lésés de ne pas avoir participé aux formations pour des raisons de contraintes budgétaires. Pour montrer leur mécontentement, ils montrent peu d’enthousiasme pour la réalisation des activités. Toutefois, dans la plupart des écoles visitées, nous avons observé que le dynamisme des animateurs des ONG, ainsi que la méthodologie participative utilisée (sketch, etc.) avaient permis de surmonter cette réticence et de rassembler les efforts nécessaires à la mise en place des bonnes pratiques.

Implication lors de la construction des infrastructures L’implication des écoles lors de la construction des infrastructures est plus mitigée. En effet, les directeurs participent au choix de la localisation des ouvrages et suivent la réalisation des travaux pendant la période scolaire. Ils sont également impliqués lors de la réception provisoire, puis définitive des infrastructures. Toutefois, les entreprises de construction de latrines et points d’eau nous ont fait part de problème résul-tant, selon nous, d’un manque d’implication/surveillance du corps enseignant. En effet, certains ouvrages semblent avoir été utilisés par les écoles avant leur réception technique. Il a été impossible de quantifier le phénomène dans le cadre de cette évaluation mais il serait pertinent que l’entreprise fasse remonter cette information dans les comptes-rendus mensuels de chantier afin que les CAP, les DRACPN, l’entreprise et l’école tente de trouver une solution à ce problème. D’autre part, certains ouvrages ont été réceptionnés pendant la période des vacances scolaires alors que les directeurs étaient absents et les présidents de CGS occupés par les travaux des champs.

Implication des CGS Elle est difficilement perceptible a posteriori. Dans toutes les écoles, l’équipe d’évaluation a pu rencontrer A minima 1 membre du CGS. Au travers des discussions, il apparaît que le CGS a bien participé aux forma-tions/sensibilisations organisées par le programme, toutefois seuls quelques CGS peuvent-être considérés comme proactifs et moteurs du changement. Beaucoup de CGS ne sont pas très actifs en général ni parti-culièrement intéressés par les questions d’hygiène et d’assainissement malgré les formations dispensées, peut-être car ils n’en perçoivent pas les bénéfices.

Capitalisation Le programme organise chaque année des séances de capitalisation avec les ONG d’intermédiation sociale et avec les entreprises de travaux, mais n’organise pas de capitalisation avec les bénéficiaires. De tels ate-liers permettraient la remontée directe des informations du terrain, sans le filtre « ONG », renforcerait la redevabilité du programme et permettrait des améliorations directement demandées par les bénéficiaires.

Le programme a évolué au fur et à mesure pour permettre une meilleure implication des bénéficiaires, et ce malgré quelques faiblesses, notamment dans la prise en compte des besoins et la capitalisation avec les bénéficiaires. Le dynamisme des anima-teurs et les méthodes participatives avec l’ensemble de l’école et de la communauté garanti l’implication de tous. Après le dé-part de l’ONG, le constat est plus mitigé

Page 34: EVALUATION DU PROGRAMME WASH A L ECOLE AU MALI · 2020-04-29 · EVALUATION DU PROGRAMME WASH A L’ECOLE AU MALI Evaluation commanditée et financée par le Comité Espagnol UNICEF

HYDROCONSEIL

Evaluation du programme WASH à l’école -Spanish Natcom - Rapport d’évaluation Page 34

d) Le programme intègre-t-il les besoins des filles et des femmes ?

Genre et latrines Dans les écoles enquêtées, Hydroconseil a pu observer que les filles et les garçons disposaient de latrines strictement séparées sur lesquelles le public cible est claire-ment indiqué. Dans certaines écoles, après les formations qui leur ont été dispen-sées, les directeurs eux-mêmes ont fait cette demande à l’entreprise de construc-tion car ils avaient constatés des problèmes d’intimité et donc de fréquentation, notamment chez les filles (particulièrement durant leurs périodes menstruelles). D’après les entretiens réalisés, le confort et l’intimité apportés par ces équipements favorise la scolarisation des filles qui avaient jusque-là tendance à manquer ou abandonner l’école. Selon les jeunes filles interrogées durant l’évaluation, les me-

sures prises dans les écoles pour garantir cette séparation ont porté leurs fruits puisqu’elles n’hésitent plus à utiliser les latrines. Cependant, l’utilisation des latrines par les filles reste faible à la date de notre visite : très peu de filles ont été observées allant aux latrines et certaines infrastructures étiquetées « filles » sem-blent très peu utilisées (fosses vides par rapport aux fosses garçons par exemple). De la même manière, les latrines réservées aux enseignants sont généralement à part, ce qui leur permet (femmes particulièrement) de les utiliser sans avoir « honte » de le faire en présence des élèves.

Genre et Club d’Hygiène D’après les entretiens réalisés avec les directeurs d’école, les clubs d’hygiène sco-laires tendent vers une représentativité conséquente des filles. Les entretiens réali-sés avec les Club d’hygiène17 confirment ce constat : les filles sont aussi présentes (voir plus) que les garçons et les idées qu’elles avancent sont tout aussi écoutées par les autres enfants. D’autre part, les routines de nettoyage sont indifféremment faites par les filles ou les garçons. Le programme est donc un vecteur de rappro-chement social filles/garçons dans l’école

Genre et acteurs externes de l’école De nombreuses femmes gravitent dans l’environnement immédiat de l’école. Si nous avons observé que les CGS étaient majoritairement composés d’hommes, les Comités Villageois d’Assainissement, les AME et les vendeuses d’aliments sont eux principalement féminins. Le programme s’intéresse directement aux femmes au travers des activités spécifiques. Les acteurs interrogés estiment que les messages relatifs à la santé de l’enfant, diffusés auprès des mères d’élèves et plus largement des femmes de la communauté sont mieux transmis et intégrés que lorsqu’ils sont transmis aux hommes. Par ailleurs, les femmes de l’AME et les vendeuses d’aliments, directement au contact des élèves lors des récréations, ont toutes re-

çues une formation sur l’hygiène alimentaire. Certaines écoles, sous l’impulsion des ONG, se sont mobili-sées pour offrir à l’AME des dispositifs lave-mains. Malheureusement ces derniers étaient peu utilisés lors de notre visite.

Le programme encourage la prise en compte des filles notam-ment par l’implication de l’Association des Mères d’élèves et des vendeuses d’aliments. Les filles ont une bonne représenta-tion dans les clubs d’hygiène et les garçons participent active-ment au nettoyage des infrastructures (tâches prioritairement affectées aux filles au Mali). La séparation Filles/Garçons pour les latrines est effective, en théorie, mais la pratique par les en-fants est plus aléatoire

17

Six enfants à chaque école, dont au moins 2 filles.

Page 35: EVALUATION DU PROGRAMME WASH A L ECOLE AU MALI · 2020-04-29 · EVALUATION DU PROGRAMME WASH A L’ECOLE AU MALI Evaluation commanditée et financée par le Comité Espagnol UNICEF

HYDROCONSEIL

Evaluation du programme WASH à l’école -Spanish Natcom - Rapport d’évaluation Page 35

D.2. EFFICACITE : Evaluation des approches préconisées par le programme

D.2.1. Qualité et conformité : La mise en œuvre sur le terrain a-t-elle été en ligne avec ce qui été prévu ?

a) Respect des standards et qualité des ouvrages

Le respect des standards et la qualité des ouvrage sont deux thématiques liées car la mise en place de stan-dards assure (i)la qualité dans la construction des ouvrages dans le volet Hard, d’une part, et (ii)la qualité des interventions dans le volet soft, d’autre part.

Respect des standards pour le « volet Hard » Les entretiens réalisés par Hydroconseil et les comptes rendus des visites de terrain UNICEF montrent que les bénéficiaires accueillent, dans la quasi-totalité des cas, avec beaucoup d’intérêts les ouvrages et sont satisfaits de la qualité des constructions. La forte participation des différentes parties prenantes (services techniques, mairies, directeurs d’écoles et surtout CGS) aux réunions de suivi des travaux démontre l’intérêt particulier qu’accordent les bénéficiaires à la bonne marche des chantiers et à la pérennité des ou-vrages. Les recommandations données aux entreprises leur sont communiquées pour qu’ils puissent être garant de leur application.

Des formations techniques à destination des entreprises explique les standards techniques UNICEF et facili-tent leur assimilation, y compris par le personnel le moins expérimenté. Elles permettent également au Bu-reau de Contrôle de vérifier facilement la conformité technique des ouvrages construits avec ce qui avait initialement été prévu dans le cadre du programme. En cas de non respect, les entreprises sont contraintes de reprendre les travaux avant la réception provisoire18.

Si ces problèmes récurrents avec une entreprise mettent en question la bonne réalisation des ouvrages, l’UNICEF se réserve le droit de mettre en demeure les prestataires, voire de rompre leurs contrats. Ces me-sures ont été effectivement appliquées par l’UNICEF dans le cas des deux entreprises N’Tiobala et EBANCAM qui ont accusé d’importants retards et qui se sont vus dans l’impossibilité d’achever les travaux dans les délais raisonnables.

Figure 8 : Extrait d’un plan type de latrine (vue en plan), d’un constat de mauvaise réalisation et d’une reprise de travaux avant la réception provisoire des ouvrages – UNICEF Mali

Notons que durant les visites terrain réalisées, aucune malfaçon n’a été constatée dans les travaux réalisés par les entreprises.

18

Consultation des documents : Equipements WASH en milieu scolaire – Unicef-Mali 28.09.13.pdf / cf. Réunion de démarrage Entreprises latrines - Unicef + Sid-Sertas 09.04.14.pdf et des rapports de supervision réalisés par Sid-Sertas.

Page 36: EVALUATION DU PROGRAMME WASH A L ECOLE AU MALI · 2020-04-29 · EVALUATION DU PROGRAMME WASH A L’ECOLE AU MALI Evaluation commanditée et financée par le Comité Espagnol UNICEF

HYDROCONSEIL

Evaluation du programme WASH à l’école -Spanish Natcom - Rapport d’évaluation Page 36

Figure 9 : Exemple de latrines et de point d’eau observés durant les visites de terrain

Respect des standards pour le « volet Soft » Il est plus difficile de parler de standards de qualité sur le « volet soft ». Néanmoins, au regard du travail réalisé par les différents partenaires Dubai Cares, le Guide d’animation pour l’hygiène scolaire ainsi que les outils IEC développés constituent indéniablement des orientations visant à standardiser les interventions des ONG d’intermédiation sociale.

Par ailleurs, afin d’uniformiser les messages à faire passer aux communautés par les ONG, le programme a mis en place des outils de communication (boîte à image, livret du club d’hygiène, livret du GGS, affiches, etc.) utilisés par les animateurs lors de leurs activités de sensibilisation. Une fois les séances d’IEC termi-nées, ce matériel didactique est laissé à disposition au sein de l’école.

Figure 10 : Affiches de sensibilisation dans l’école de Niamana, CAP de Kalaban-Coro (13.10.2014)

Les entretiens réalisés avec les enseignants et les enfants démontrent qu’ils sont largement utilisés : la boîte à image, par exemple, est très appréciée des enseignants qui l’utilisent à tour de rôle pour illustrer les leçons d’hygiène.

Chaque activité menée par les ONG d’intermédiation sociale fait l’objet d’un compte-rendu illustré de pho-tos, dont la trame est commune entre les différentes ONG d’exécution de l’UNICEF. Le compte-rendu est transmis mensuellement à l’UNICEF afin de contrôler la conformité des activités, et, le échéant, de les re-prendre, les recadrer et/ou de suspendre le travail avec l’ONG.

Le concours Ecole Propre, standard de qualité ? Le concours Ecole Propre n’est pas à proprement parlé un standard de qualité. Toutefois, après examen du mécanisme de collecte de données et du contenu des fiches de contrôle, il est possible d’avancer que le ce dernier a permis d’instaurer un modèle d’hygiène scolaire au Mali. En effet, les critères formalisés dans les grilles d’évaluation des écoles ont imposé des normes et définis les conditions d’hygiène idéales à at-teindre. Par ailleurs, le système de notation facilite le travail d’évaluation des services techniques (SACPN) et permet à chaque école d’estimer la qualité de ses ouvrages et de ses pratiques et d’évaluer ses progrès. Ce système plus incitatif (car mené tout au long du processus) que coercitif est très bien accepté par les directeurs d’écoles, qui sont tous très motivés à recevoir une récompense.

Les standards ont été clairement fixés et longuement expliqués aux ONG et aux entreprises intervenant dans les écoles. En cas de non respect, le programme est en mesure de suspendre les activités/rompre un contrat. Au-delà, un contrôle régulier de la

Page 37: EVALUATION DU PROGRAMME WASH A L ECOLE AU MALI · 2020-04-29 · EVALUATION DU PROGRAMME WASH A L’ECOLE AU MALI Evaluation commanditée et financée par le Comité Espagnol UNICEF

HYDROCONSEIL

Evaluation du programme WASH à l’école -Spanish Natcom - Rapport d’évaluation Page 37

conformité des activités/travaux est réalisé par un bureau de contrôle ou par l’UNICEF elle-même. Les observations terrain ont permis de constater que, dans la grande majorité de cas, les standards et instructions de l’UNICEF sont respectés

b) De quelle manière les activités sont-elles planifiées, exécutées et supervisées ?

Comme indiqué plus haut, le programme Dubai Cares a su cadrer méthodologiquement les interventions des ONG et des entreprises, tant sur le plan des travaux de construction que sur le plan des actions d’intermédiation sociale. Un cadrage des activités dans le temps a également été mis en place pour per-mettre à la fois une certaine uniformité dans l’avancée de chacun des partenaires et un suivi plus facile et plus systématique des différentes étapes par des acteurs généralement peu impliqués par les bailleurs à ce type de programme (services techniques, mairies notamment).

Planification et exécution des activités d’intermédiation sociale L’ensemble des activités d’intermédiation sociale UNICEF sont entièrement réalisées par des ONG natio-nales, parfois sous la supervision d’ONG internationales (notamment dans le cas des écoles cofinancées par le Spanish NatCom), ce qui est un véritable défi. Cependant, une fois encore, le programme a su mettre en place des mesures afin de garantir une bonne exécution des activités.

Ainsi, les activités sont planifiées dans les guides d’intervention (cf. D.2.1.a)) au travers d’un calendrier indi-catif qui est également repris dans les PCA des ONG. La succession des activités s’adapte au fonctionne-ment des écoles et permet à une ONG et un animateur d’intervenir simultanément dans plusieurs écoles.

Figure 11 : Chronogramme des activités d’intermédiation sociale (guide soft 2013-2014)

Il est prévu que l’ONG effectue la visite préalable dans les écoles pré-identifiées en juin de l’année 1 et que, sur la base des résultats de cette évaluation rapide, le PCA soit signé avec l’UNICEF en août de la même an-née, pour un transfert des fonds en septembre. L’ONG procède parallèlement à la contractualisation du personnel et à l’acquisition du matériel et des équipements prévus dans le budget. En octobre, les forma-tions peuvent avoir lieu, et les activités terrain démarrer en fin de mois pour durer jusqu’au mois de no-vembre-décembre de l’année scolaire suivante.

Le suivi de la réalisation des activités sur le terrain est solide au niveau de l’organisation interne de l’ONG intervenant sur le terrain (compte rendu d’activités, reporting photo, etc.). Chaque mois, conseillers, super-viseurs et coordinateurs de chaque ONG se concertent en interne pour faire le point des activités menées le mois passé et préparer celles du moins suivant et assistent à chaque fin de mois à des réunions d’équipes mensuelles des ONG. Les comptes rendus de ces réunions régionales de suivi-coordination permettent à l’UNICEF d’identifier les retards, et le cas échéant, de prendre les mesures nécessaires (signature d’avenant, atelier de renforcement de capacité, séminaires de capitalisation/échange d’expérience, etc.) au niveau

Page 38: EVALUATION DU PROGRAMME WASH A L ECOLE AU MALI · 2020-04-29 · EVALUATION DU PROGRAMME WASH A L’ECOLE AU MALI Evaluation commanditée et financée par le Comité Espagnol UNICEF

HYDROCONSEIL

Evaluation du programme WASH à l’école -Spanish Natcom - Rapport d’évaluation Page 38

Régional et/ou National. A cela s’ajoute trois modalités de suivi, en fonction du mode de contractualisation entre l’UNICEF et les ONG locales :

SNV et Protos ont été chargés, en 2013, d’encadrer et vérifier le niveau d’avancement des activités de 6 ONG nationales dans le cadre du programme Dubai Cares19 : ils s’assurent de la mise en œuvre des activités selon le calendrier prévu et servent de relais pour l’UNICEF en faisant remonter l’information du terrain.

Dans les écoles de 2013-2014, l’UNICEF réalise directement un suivi des ONG qui ne sont pas su-pervisées par SNV et Protos20.

L’UNICEF, en sa qualité de partenaire et bailleur, supervise l’avancée des activités de l’ensemble des ONG via des visites de sites ou la programmation d’évaluations externes.

Chaque mois, l’UNICEF tient dans chaque région d’intervention une réunion de suivi et de coordina-tion de toutes les ONG intervenant dans la région.

Les modalités de suivi sont détaillées au chapitre D.2.3.

Le bon déroulement des activités est favorisé par l’essor d’un esprit de compétition entre les animateurs et les ONG qui se mobilisent pour que leurs écoles respectent les chronogrammes imposés et gagnent la com-pétition. Néanmoins, il peut arriver que la mise en place des activités soit décalée de quelques semaines du fait d’évènements du village (décès, baptême, travaux dans les champs, inondations, etc.).

Planification et exécution des activités de construction En ce qui concerne le volet construction, la nature et les conditions d’interventions des entreprises de tra-vaux sont définies par le programme à l’aide de standards et de chronogrammes (durée et séquençage des travaux). (cf. Réunion de démarrage Entreprises latrines - Unicef + Sid-Sertas 09.04.14.pdf).

Figure 12 : Chronogramme des activités de construction/réhabilitation d’infrastructure

La réalisation des ouvrages est privilégiée pendant l’hivernage, lorsque les enfants sont absents. Le grou-pement de bureaux SID/SERTAS a été chargé du suivi de l’organisation des chantiers et s’assure que les moyens entrepris par les entreprises garantissent l’avancement et la conformité des travaux selon les chro-nogrammes définis.

Les principales difficultés rencontrées par les prestataires de travaux sont d’ordre technique ou financier. Le mauvais état du matériel, le manque de personnel qualifié ou encore les difficultés d’approvisionnement du chantier ont dans quelques cas entraîné le retard sur certains chantiers. D’autres ont également été in-terrompus par des événements ponctuels (inondations ou crise sécuritaire à Mopti). Dans ces cas,

19

IMADEL, ASMADEVI, Alphalog pour SNV ; Prométhée, ODI-SAHEL et GRAT pour PROTOS. 20

Solidarité Plurielle, Right to Play et Action Mopti

Page 39: EVALUATION DU PROGRAMME WASH A L ECOLE AU MALI · 2020-04-29 · EVALUATION DU PROGRAMME WASH A L’ECOLE AU MALI Evaluation commanditée et financée par le Comité Espagnol UNICEF

HYDROCONSEIL

Evaluation du programme WASH à l’école -Spanish Natcom - Rapport d’évaluation Page 39

SID/SERTAS et l’UNICEF organisent des réunions de cadrage avec les entreprises pour trouver une solution. Lorsque le retard persiste, les entreprises sont alors contraintes de demander un avenant pour les reporter ou leur contrat est résilié.

Le programme a cadré dans le temps les interventions des ONG et des entreprises de construction. Un calendrier d’intervention réaliste est transmis à chacun dès la procédure de sélection. Le mécanisme de suivi des réalisations est solide et le bon dérou-lement des activités est favorisé par l’esprit de compétition qui anime les animateurs des ONG pour remporter le concours Ecole Propre.

D.2.2. Atteinte des résultats

a) Résultat 1 : L'accès aux équipements WASH dans toutes les écoles appuyées par le Spanish Natcom est-il amélioré ?

L’atelier de capitalisation Dubai Cares organisé en octobre 2014 a permis à chaque partenaire, dont l’UNICEF, de faire le point sur les réalisations. Le constat est très positif et les objectifs fixés sont largement atteints puisque, à la date de la présente évaluation, 94% des écoles visées ont reçu toutes les activités du paquet d’intervention devant permettre leur mise au standard Wash21.

L’analyse détaillée de chaque activité donne les observations suivantes :

Latrines : 2 486 latrines ont été construites et 1 122 ont été réhabilitées dans le cadre du pro-gramme Dubai Cares, soit en moyenne près de 4 latrines par école.

o Quelques constructions sont en attente de réception22 mais l’ensemble des interventions « latrines » seront réalisées avant la fin de l’année 2014,

o 153 écoles ne disposaient d’aucune latrine au démarrage du programme, elles sont toutes aujourd’hui pourvues en latrines améliorées et le ratio élèves/latrine à diminué dans toutes les écoles d’intervention,

Points d’eau : 423 nouveaux points d’eau ont été aménagés et 134 ont été réhabilités. o Quelques constructions sont en attente de réception mais l’ensemble des interventions se-

ront réalisées avant la fin de l’année 2014, o 431 écoles ne disposaient d’aucun point d’eau aménagé au démarrage du programme,

seules 54 n’ont pas d’infrastructure à la date de la rédaction du présent rapport, mais cet écart devrait se réduire avant la fin de l’année 2014,

o La construction ou la réhabilitation des points d’eau ont permis de diminuer le ratio élèves/point d’eau de 33%. Actuellement, 1 point d’eau dessert en moyenne 397 enfants.

Lave-mains : 1 320 dispositifs de lavage des mains ont été mis en place dans les écoles (soit près de 2 par école). Ces dispositifs sont divers (socle béton, récipient mobile, lave main collectif, etc.) en fonction de l’année d’entrée de l’école dans le programme et des résultats des actions de re-cherches opérationnelles réalisés par les partenaires Dubai-Cares.

Au total, 100% des écoles de l’UNICEF en général, et cofinancées par le Spanish NatCom en particu-lier, devraient avoir atteint le « standard WASH à l’école » en fin décembre 2014.

21

Atelier de capitalisation - 20/10/2014 22

L’ensemble des latrines construites sous la supervision de l’UNICEF sont réceptionnées (soit les latrines cofinancées par le Spanish NatCom). Seules les latrines de Save the Children accusent un retard de livraison.

Page 40: EVALUATION DU PROGRAMME WASH A L ECOLE AU MALI · 2020-04-29 · EVALUATION DU PROGRAMME WASH A L’ECOLE AU MALI Evaluation commanditée et financée par le Comité Espagnol UNICEF

HYDROCONSEIL

Evaluation du programme WASH à l’école -Spanish Natcom - Rapport d’évaluation Page 40

Néanmoins, la propreté des latrines reste encore à parfaire dans plusieurs des écoles visitées par le consultant. Une semaine après le démarrage des cours, plusieurs écoles n’avaient que très faiblement démarré les routines de nettoyage. Notons aussi que les anciennes latrines considérées comme non utilisables (cf. photo ci-contre) sont encore utilisées dans plusieurs écoles visitées23, le coût de la destruction de ces infrastructures n’étant pas compris dans les contrats des entreprises.

Principaux éléments analysés quantitativement par l’université d’Emory24

Constats Commentaires

L’accès à l’assainissement est largement amélioré dans les écoles appuyées par le programme Wash.

Les écoles suivies par l’UNICEF présen-tent un ratio stable autour de 60 élèves/cabines, ce qui est très positif.

Nous constatons que les postes d’eau sont présents dans les écoles (+ de 95% des écoles visitées), et ce, quel que soit le moment du contrôle. Tous ne sont pas toujours remplis même si le taux reste honorable (90%).

Les dispositifs de lavage des mains sont présents dans l’école et mis à la disposi-tion des élèves. La plupart de ces disposi-tifs sont provisionnés en eau (70%). L’accès au savon reste plus mitigé, no-tamment autour de la rentrée scolaire (round 13-18 mois).

L’accès aux équipements Wash dans les écoles est grandement amélioré. Toutes les écoles visitées ont un point d’eau fonction-nel et des dispositifs de lavage des mains mobile à disposition. Les nouvelles constructions de latrines permettent d’atteindre les ratios visés par le programme en termes d’élèves/latrine

23

Exemple de l’école de Kabalabougou, CAP de Kati ou les enfants font pipi dans les latrines qui ont été jugées comme irrécupérables, et ce à partir de la porte de cette dernière. 24

Données issues du fichier excel AppendixB_Final.data tables_19DEC14

0102030405060708090

100110120130140150

Jan-Mars 2013

Avril-Mai 2013

Oct-Dec 2013

Dec-Fev 204

Mars-Avril 2014

mai-14

Evolution du ratio élèves/latrine

Ecoles témoins

CARE

OXFAM

SAVE THE CHILDREN

UNICEF

WATERAID

0,0%

20,0%

40,0%

60,0%

80,0%

100,0%

120,0%

Jan-Mars 2013

Avril-Mai 2013

Oct-Dec 2013

Dec-Fev 204

Mars-Avril 2014

mai-14

Accès à l'eau potable : les dispositif existent et sont remplis d'eau de boisson

Ecoles témoins

CARE

OXFAM

SAVE THE CHILDREN

UNICEF

WATERAID

0,0%

10,0%

20,0%

30,0%

40,0%

50,0%

60,0%

70,0%

80,0%

90,0%

100,0%

Jan-Mars 2013

Avril-Mai 2013

Oct-Dec 2013

Dec-Fev 204

Mars-Avril 2014

mai-14

Accès aux infrastures d'hygiène (% d'écoles disposant d'une station lave-mains avec eau et savon)

Ecoles témoins

CARE

OXFAM

SAVE THE CHILDREN

UNICEF

WATERAID

Page 41: EVALUATION DU PROGRAMME WASH A L ECOLE AU MALI · 2020-04-29 · EVALUATION DU PROGRAMME WASH A L’ECOLE AU MALI Evaluation commanditée et financée par le Comité Espagnol UNICEF

HYDROCONSEIL

Evaluation du programme WASH à l’école -Spanish Natcom - Rapport d’évaluation Page 41

(soit 50 élèves/latrine), et ce malgré, les effectifs de certaines écoles et le manque de place dans certaines cours

b) Résultat 2 : La gestion et le suivi des équipements WASH dans les écoles sont-ils améliorés ?

Pour mesurer l’atteinte de ce résultat, plusieurs paramètres sont pris en considération :

Suivi des équipements par le programme / l’UNICEF ;

Gestion et suivi des équipements par les services techniques et mairies ;

Gestion et suivi des équipements par les communautés et les écoles elles-mêmes.

Suivi des équipements par le programme / l’UNICEF Le programme Dubai Cares a mis en place un système de Suivi/évaluation complet. Il permet notamment de suivre, pour l’ensemble des écoles, l’avancée dans la réalisation des activités du volet « Soft ». L’ensemble du dispositif de suivi-évaluation est détaillé au Chapitre D.2.3.

Gestion et suivi des équipements par les services techniques et mairies Bien que la décentralisation donne plus de pouvoir aux mairies en termes d’entretien des équipements sco-laire, le suivi et la gestion des équipements mis en œuvre n’est en pratique pas assuré par les services tech-niques. En effet, pour les écoles ayant terminées le programme depuis plus de 6 mois et visitées par Hydro-conseil dans le cadre de cette évaluation, aucune d’entre-elles n’avaient fait l’objet d’un suivi Wash post-programme. Cela s’explique notamment par l’absence de responsabilités claires entre les différents acteurs du programme en termes de suivi due à la faible institutionnalisation du programme.

Les DRACPN et les DRH sont elles impliquées dans le suivi de la construction des équipements sur finance-ment du programme Wash à l’école, mais n’ont pas les ressources humaines suffisantes et la motivation financière nécessaire pour intervenir après la fin du programme.

Enfin, les CAP sont les acteurs qui interviennent le plus régulièrement dans les écoles, notamment pour le suivi pédagogique à la rentrée ou la préparation des examens de fin d’année. Or actuellement, ce suivi pé-dagogique n’associe pas de contrôle des conditions sanitaires de l’école. En RDC, Hydroconseil avait appuyé à la création d’une fiche de suivi des écoles à partir des fiches des inspecteurs pédagogiques, que ces der-nières soient en processus, ou post-processus.

Gestion et suivi des équipements par les communautés et les écoles elles-mêmes Suite aux entretiens réalisés dans les écoles, il est possible d’affirmer que, pour l’année scolaire 2013/2014, l’ensemble des Clubs d’Hygiène avaient été créés. Le constat est plus mitigé pour l’année scolaire 2014/2015, notamment du fait que beaucoup d’ONG n’avaient pas repris les activités post-hivernage. Au-cun monitoring post-activité ONG ne permet de mesurer si les écoles ont reconduit les Club d’hygiène après le départ de l’ONG (soit 3 ans après le démarrage de la dynamique dans l’école).

Les visites dans les écoles et la rencontre des membres du CGS montrent que les dispositions ont été prises par les écoles pour garantir la gestion et le suivi des équipements hydro-sanitaire. Néanmoins, durant les visites, Hydroconseil n’a pas constaté la présence de plan d’action actualisé pour l’année 2014 - 2015. Les seuls plans d’actions visibles sont ceux réalisés avec l’appui de l’ONG.

Par ailleurs, en termes de présence de consommables et de matériels d’entretien, l’Université d’Emory a pu relever les données suivantes :

Page 42: EVALUATION DU PROGRAMME WASH A L ECOLE AU MALI · 2020-04-29 · EVALUATION DU PROGRAMME WASH A L’ECOLE AU MALI Evaluation commanditée et financée par le Comité Espagnol UNICEF

HYDROCONSEIL

Evaluation du programme WASH à l’école -Spanish Natcom - Rapport d’évaluation Page 42

Constats Commentaires

L’allocation d’un budget pour les dépenses Wash est globalement faible (moins de 10%).

Le projet Wash à l’école a permis d’augmenter significativement le nombre d’écoles disposant d’un budget Wash (45%). Toutefois, nous constatons une diminution dans le temps. La tendance suit celle des écoles témoins après 1 année de pro-gramme. Le résultat n’est donc pas probant concernant la prise en charge des dépenses Wash dans les écoles.

La présence du petit matériel d’entretien est bonne durant les 6 premiers mois du pro-gramme (don des ONG, ici balai par exemple), elle diminue ensuite, tout en res-tant bonne (+/-90%).

Notons la très bonne mise à disposition des bouilloires (utiliser pour la propreté annale), qui démontre l’intérêt des écoles vis-à-vis de ce matériel.

Les consommables suivent la même ten-dance. On constate une bonne présence lors des 6 premiers mois de programme, puis, une fois les réserves terminées, on observe une diminution importante (de 90% à 60%). Les écoles suivies par l’UNICEF semblent plus stables dans la mise à disposition des consommables que les écoles suivies par les autres partenaires du consortium.

Le renouvellement n’est pas encore suffi-samment prévu par les écoles.

0,0%

20,0%

40,0%

60,0%

80,0%

100,0%

Jan-Mars 2013

Avril-Mai 2013

Oct-Dec 2013

Dec-Fev 204

Mars-Avril 2014

mai-14

% d'école disposant d'un budget WASH

Ecoles témoins

CARE

OXFAM

SAVE THE CHILDREN

UNICEF

WATERAID

0,0%

20,0%

40,0%

60,0%

80,0%

100,0%

Jan-Mars 2013

Avril-Mai 2013

Oct-Dec 2013

Dec-Fev 204

Mars-Avril 2014

mai-14

Petit matériel (% d'écoles disposant de balais)

Ecoles témoins

CARE

OXFAM

SAVE THE CHILDREN

UNICEF

WATERAID

0,0%

20,0%

40,0%

60,0%

80,0%

100,0%

Jan-Mars 2013

Avril-Mai 2013

Oct-Dec 2013

Dec-Fev 204

Mars-Avril 2014

mai-14

Petit matériel (% d'écoles disposant de bouilloires)

Ecoles témoins

CARE

OXFAM

SAVE THE CHILDREN

UNICEF

WATERAID

0,0%

20,0%

40,0%

60,0%

80,0%

100,0%

Jan-Mars 2013

Avril-Mai 2013

Oct-Dec 2013

Dec-Fev 204

Mars-Avril 2014

mai-14

Consommables (% d'écoles disposant de grésil)

Ecoles témoins

CARE

OXFAM

SAVE THE CHILDREN

UNICEF

WATERAID

0,0%

20,0%

40,0%

60,0%

80,0%

100,0%

Jan-Mars 2013

Avril-Mai 2013

Oct-Dec 2013

Dec-Fev 204

Mars-Avril 2014

mai-14

Consommables (% d'écoles disposant de savon)

Ecoles témoins

CARE

OXFAM

SAVE THE CHILDREN

UNICEF

WATERAID

Page 43: EVALUATION DU PROGRAMME WASH A L ECOLE AU MALI · 2020-04-29 · EVALUATION DU PROGRAMME WASH A L’ECOLE AU MALI Evaluation commanditée et financée par le Comité Espagnol UNICEF

HYDROCONSEIL

Evaluation du programme WASH à l’école -Spanish Natcom - Rapport d’évaluation Page 43

Les entretiens réalisés dans les écoles ne laissent pas de doute sur la compréhension brute des messages transmis par les animateurs des ONG. Ce résultat est du aux méthodologies d’intervention participatives mises en place dans le cadre du programme qui font que les bénéficiaires ne sont pas spectateurs mais bien acteurs. Cela se traduit sur le terrain par un dynamisme nouveau chez les maires, les CGS, les AME et les directeurs d’écoles, et donc l’apparition de success story intéressantes (don de savons à l’école par les commerçantes, services de location de chaises et de tables par le CGS, etc.). Toutefois, il n’est pas certain que les conséquences d’une bonne ou mauvaise application des bons comportements (notamment les im-pacts sociaux, économiques) soient réellement compris de tous. Cela se traduit sur le terrain par un relâ-chement dans les écoles et les communautés, au départ des ONG et donc par un recul des bonnes pra-tiques observées en année 1.

Les conditions favorables à une bonne gestion et au suivi des équipements Wash dans les écoles ont été mises en place dans les écoles : les maires ont été sensibilisés et impliqués dans le concours Ecole Propre, les CGS ont été renforcés dans leur fonc-tion et les clubs d’hygiène ont été activés. Les résultats qualita-tifs de l’Université d’Emory - Atlanta montre un certain essouf-flement des indicateurs quelques mois après le retrait de l’ONG d’intermédiation sociale. Cela signifie que la prévision des dé-penses Wash et la provision de fond n’est pas systématique dans les écoles

c) Résultat 3 : La compréhension sur l'hygiène est-elle renforcée dans les écoles et dans les familles ?

ATPC et sensibilisation à l'hygiène Au fil des années le programme Wash à l’école de l’UNICEF a tenté de s’aligner et d’intervenir conjointe-ment dans l’école et la communauté. Il en résulte l’activité « Déclenchement de l’ATPC + E » réalisée con-jointement entre la communauté et les écoles, et l’ensemble des autres activités de sensibilisation qui se tiennent systématiquement dans les deux milieux.

L’observation la plus flagrante concernant la compréhension sur les bonnes pratiques EHA est que le nombre d’écoles dont les élèves arrêtent complètement la défécation à l’air libre continue d’augmenter même après la fin des activités terrain et le retrait des ONG (Figure 13). Il est également intéressant de no-ter que dans les écoles témoins, le simple fait de rendre visite à l’école impulse également un changement de comportement (Figure 13) : de 20% d’écoles sans observation de pratique de défécation à l’air libre, ce taux monte à 40%, 25 mois plus tard. Cela est très encourageant et montre la nécessité d’un suivi constant des écoles sur la question Wash au-delà d’un programme.

Page 44: EVALUATION DU PROGRAMME WASH A L ECOLE AU MALI · 2020-04-29 · EVALUATION DU PROGRAMME WASH A L’ECOLE AU MALI Evaluation commanditée et financée par le Comité Espagnol UNICEF

HYDROCONSEIL

Evaluation du programme WASH à l’école -Spanish Natcom - Rapport d’évaluation Page 44

Figure 13 : Changements observés par l’Université d’Emory - après 24 mois de projet

Intégration de l’hygiène dans les curricula Les entretiens réalisés dans les écoles confirment que les enfants reçoivent des cours d’hygiène, non pas spécifiques, mais intégrés aux enseignements dispensés par les enseignants. Le programme ne met donc pas en place des activités nouvelles et supplémentaires, mais permet aux enseignants, via du matériel di-dactique (boite à image, affiches, etc.), de traiter ces sujet facilement et de manière interactive avec les en-fants dans le cadre de leçons qui existent déjà.

Importance du concours "école propre" pour le changement de comportements Le concours école propre est un processus qui rythme la vie d’une école durant l’intervention de l’ONG (ac-tivité 13, 18, 27). Une dernière notation a lieu 6 mois après la fin du concours, et permet aux services tech-niques et à l’UNICEF de suivre le maintien des bonnes pratiques par les écoles 6 mois après le retrait de l’ONG, et de remotiver celles qui ont relâché leurs efforts.

Après discussion avec les directeurs et les enseignants, ce concours est primordial pour enclencher la dy-namique du changement dans les écoles et la proclamation des résultats est vecteur de fierté ou de honte selon les cas. Le lien école/communauté et bonnes pratiques est renforcé puisque si le village / quartier dans lequel se trouve l’école est « sale, sans solution d’assainissement », alors l’école ne peut en aucun cas, gagner le concours.

Sur les 11 écoles de l’échantillon, certaines (lot 3) n’ont pas encore eu la notation finale mais pour les autres les directeurs et les enseignants s’accordent tous à dire que ces visites à l’impromptu sont néces-saires « pour les surprendre25 » et redynamiser leur intérêt dans les activités EHA.

Les maladies liées à l’eau, l’hygiène et l’assainissement sont connues, les bonnes pratiques à observer aussi grâce aux ses-sions de sensibilisation, au matériel didactique disponible dans les écoles et au concours écoles propres. Ces observations sont valables dans l’école comme dans la communauté

25

Citation entendue lors des entretiens.

0,0%

20,0%

40,0%

60,0%

80,0%

100,0%

120,0%

Jan-Mars 2013

Avril-Mai 2013

Oct-Dec 2013

Dec-Fev 204

Mars-Avril 2014

mai-14

Fin de la défecation à l'air libre (% d'écoles ayant arrêté cette pratique)

Ecoles témoins

CARE

OXFAM

SAVE THE CHILDREN

UNICEF

WATERAID

Page 45: EVALUATION DU PROGRAMME WASH A L ECOLE AU MALI · 2020-04-29 · EVALUATION DU PROGRAMME WASH A L’ECOLE AU MALI Evaluation commanditée et financée par le Comité Espagnol UNICEF

HYDROCONSEIL

Evaluation du programme WASH à l’école -Spanish Natcom - Rapport d’évaluation Page 45

d) Résultat 4 : Le niveau de connaissance et d'implication des partenaires d’intervention et d’autres ac-teurs nationaux et mondiaux sur le WASH à l’école est-il augmenté ?

Connaissances et implication des acteurs Le résultat n°4 escompté par le programme n’est pas nécessairement le plus visible mais est de loin le plus important, notamment pour :

Garantir la qualité des infrastructures construites ou des messages diffusés,

Permettre le passage à l’échelle du programme.

Le chapitre D.2.3 détaille les mécanismes et les activités de suivi/évaluation réalisées dans le cadre du pro-gramme. Les entretiens réalisés auprès des ONG locales d’intermédiation sociale sont unanimes pour dire que ces activités leur ont permis d’acquérir une vision et une méthodologie d’intervention commune de qualité (cf. D.4.1).

Ce constat est le même concernant les entreprises de constructions (cf. D.4.1) et est confirmé par le bureau de Contrôle Sid-Sertas qui estime que les formations à destination des entreprises de travaux ont simplifié largement leur travail et limité de fait les litiges ou les malfaçons.

Plaidoyer Plus largement, le programme Dubai Cares n’a cessé de mettre en place des activités de plaidoyer au ni-veau national et dans les communautés. Un plan de plaidoyer de 9 activités à même été créé en octobre 2013 dans le cadre de l’initiative Dubai Cares (Tableau 2 ci-dessous).

Tableau 2 : Extrait du plan de plaidoyer réalisé par le Coordinateur MEL le 18 octobre 2013 – Initiative Dubai Cares

Activité

1 Mettre en place le CoPil du PSPEHMS au niveau central par décision interministérielle

2 Atelier de capitalisation et conférence de presse

3 Mise à jour du PSPEHMS

4 Intégration du WASH dans la formation initiale des maîtres

5 Constituer un pool de formateurs nationaux sur le WASH à l’école

6 Hygiène et assainissement comme critère d’évaluation des directeurs d’école

7 Concours national annuel « écoles propres »

8 Intégrer le WASH dans les normes de construction dans les écoles

9 Améliorer le système national de suivi du WASH à l’école

Le plaidoyer est réalisé principalement auprès du Ministère de l’éducation afin que ce dernier se saisisse de la thématique et soit moteur de l’harmonisation des actions au niveau national. Par exemple, l’harmonisation et la mise à l’échelle du programme passe par la mise en place de standards d’intervention mais aussi en interne par l’introduction des thématiques EHA dans le cursus de tous les Instituts de Forma-tion des Maîtres. Sur ces 9 activités, 3 ont été réalisée dans les 12 mois qui ont suivi ce plan de plaidoyer (activités 2, 4 et 5), 2 sont en cours (activités 1 et 9) et 4 sont prévues pour 2015 (3, 6, 7, 8).

Au niveau des communautés, le programme s’est appuyé sur des stars nationales connues de tous pour faire passer les messages clefs tels que le lavage des mains. Sur la photo ci-dessous, le footballer Frédéric Oumar Kanouté réalise une démonstration du lavage des mains dans une communauté lors de l’inauguration d’un village FDAL. Des clips vidéo ont également été réalisés par le musicien Habib Koité.

Page 46: EVALUATION DU PROGRAMME WASH A L ECOLE AU MALI · 2020-04-29 · EVALUATION DU PROGRAMME WASH A L’ECOLE AU MALI Evaluation commanditée et financée par le Comité Espagnol UNICEF

HYDROCONSEIL

Evaluation du programme WASH à l’école -Spanish Natcom - Rapport d’évaluation Page 46

Figure 14 : Frédéric Oumar Kanouté réalise une démonstration du lavage des mains dans une communauté lors de l’inauguration d’un village FDAL – Source UNICEF

L’équipe Dubai-Cares/cofinancement Spanish-Natcom été également active en termes de plaidoyer à l’international. Nous pouvons notamment citer les actions suivantes :

Présentation de l’expérience Wash à l’école – Mali, au Forum Mondial de l’Hygiène et de l’Assainissement en 2012 à Mumbai (Inde),

Participation à l’atelier d’échange d’expérience multi-pays organisé par Dubai Cares en 2012.

Présentation du programme et plaidoyer à une conférence de l’Université de Caroline du Nord en 2013.

Présentation de l’étude formation sur la Gestion de l’Hygiène menstruelle et plaidoyer à une autre conférence de la même Université en 2014.

Diffusion des outils et manuels auprès d’autres bureaux UNICEF : Guinée, RDC, Sierra Leone, Indo-nésie, Nigéria, RCA, Haiti, Egypte,

Diffusion large via le site internet washinschoolsmapping26

Le programme a contribué à l’amélioration du niveau de con-naissance et d’implication des acteurs (ONG, entreprise, parte-naires gouvernementaux). Pour les ONG et les entreprises, il leur a notamment permis d’acquérir une méthodologie d’intervention commune de qualité. Pour les services tech-niques et les ministères, le plaidoyer mis en place par le pro-gramme permet de remettre le Ministère de l’Education au centre du programme. Quelques actions de communication, de plaidoyer et de partage d’expérience ont été menées au niveau international

D.2.3. Efficacité des activités de coordination, de suivi, évaluation et capitalisation

a) Adéquation des mécanismes de coordination inter-acteurs au niveau local et national

Depuis 2011, l’UNICEF a mis en place des activités de concertation régulières, que cela soit des réunions formelles entre les partenaires Dubai Cares ou avec les structures d’exécution sur le terrain, que les mails et les appels téléphonique échangés. Les acteurs rencontrés lors de cette évaluation ont tous salués le dy-namisme du coordinateur MEL Dubai Cares logé à l’UNICEF. Selon eux : « rien n’aurait été possible sans le MEL Dubai Cares/UNICEF et même s’il nous a parfois bousculé, cela nous a permis de nous dépasser ».

26 http://www.washinschools.info/

Page 47: EVALUATION DU PROGRAMME WASH A L ECOLE AU MALI · 2020-04-29 · EVALUATION DU PROGRAMME WASH A L’ECOLE AU MALI Evaluation commanditée et financée par le Comité Espagnol UNICEF

HYDROCONSEIL

Evaluation du programme WASH à l’école -Spanish Natcom - Rapport d’évaluation Page 47

Figure 15 : Synthèse de la coordination entre les partenaires Dubai Cares

Le programme a ainsi formalisé un processus d’harmonisation puis de coordination/suivi important et ac-ceptés de tous. Il a tout d’abord permis d’harmoniser les approches de chacun pour concevoir des guides d’intervention Hard et Soft suivis par tous les partenaires de mise en œuvre contractualisés. Puis, progres-sivement, la fréquence a diminué pour atteindre aujourd’hui des rencontres semestrielles. Cette fréquence est suffisante car tous les acteurs ont appris à se connaitre et à travailler ensemble.

Le mécanisme de coordination et de communication avec les ONG et les entreprises de travaux est la se-conde activité formalisée. Ce dernier est largement inspiré des leçons apprises par WaterAid dans leurs ac-tivités de suivi sur le terrain. Il se décompose de la manière suivante :

Figure 16 : Mécanismes de communication, suivi, coordination des activités des partenaires d’exécution de l’UNICEF

Activité 1 => Compte rendu d’activitéActivité 2 => Compte rendu d’activitéActivité 3 => Compte rendu d’activitéActivité 4 => Compte rendu d’activitéActivité 5 => Compte rendu d’activitéActivité 6 => Compte rendu d’activitéActivité 7 => Compte rendu d’activitéActivité 8 => Compte rendu d’activitéActivité 9 => Compte rendu d’activité

………………

Activités sur le terrain

M1

M3

M6

M9

M12

M15

M18

M21

M24

Rapport d’avancement trimestriel

Visite terrain 1

Visite terrain 2

Réunions mensuelles avec les ONG et les entreprises Fréquence : Semestrielle (2011-2013)

puis annuelle (2013-2014)Objet :

Suivi des activitésEchange des activitésCapitalisation

Qui :Partenaires Dubai CaresPartenaire de mise en œuvreCoordination Dubai-CaresServices techniques

Evaluation et capitalisation

Activités de suivi de coordination et de partage d’expériences

Evaluation externes indépendantes

Evaluation interne participative

Page 48: EVALUATION DU PROGRAMME WASH A L ECOLE AU MALI · 2020-04-29 · EVALUATION DU PROGRAMME WASH A L’ECOLE AU MALI Evaluation commanditée et financée par le Comité Espagnol UNICEF

HYDROCONSEIL

Evaluation du programme WASH à l’école -Spanish Natcom - Rapport d’évaluation Page 48

Les visites sont structurées et standardisées autour d’un guide de visite élaboré par l’équipe MEL du pro-gramme. Il s’inspire du questionnaire de l’enquête de base, mais est enrichi de questions pour vérifier le respect des plans-types et les spécifications techniques minimales pour les équipements, et du manuel d’intermédiation sociale (ou guide d’animation). Il offre également l’occasion de discussions approfondies avec les différents acteurs scolaires.

Les mécanismes de coordination inter-acteurs au niveau local et national contribuent largement à la qualité des travaux et à la qualité des messages transmis, notamment grâce aux échanges d’expérience mis en avant dans le cadre de ces réunions. Ils ont également permis de leur donner les habitudes de travail et les compétences nécessaires à la perpétuation du programme

b) Adéquation des mécanismes et des outils de suivi-évaluation-capitalisation pour mesurer les progrès, la qualité, et procéder aux éventuels ajustements

Différents outils ont été mis en place par le programme Dubai Cares pour mesurer le progrès ou la qualité des interventions. Ils sont développés et utilisés non seulement par l’UNICEF mais aussi par tous les autres partenaires. Une partie de ceux-ci ont d’ores et déjà été développés dans les paragraphes précédents. Nous ne reviendrons pas dessus dans cette section.

Ainsi, différents tableaux de bord ont été créés et pour faire le suivi des volets Soft et du volet Hard par ré-gion, désagrégé par écoles et par activités (Cf. Figure 17). L’ensemble de ces éléments permet de produire des documents de suivi interne, mais aussi à destination des bailleurs pour justifier l’utilisation des fonds qui leur sont transmis.

Figure 17 : Extrait du tableau de bord du programme Dubai-Cares et des fichiers récapitulatifs produits

Un élément intéressant à noter est que, parallèlement au suivi quantitatif du programme, les outils de sui-vi-évaluation élaborés et les réunions trimestrielles permettent de documenter les leçons apprises. Ainsi, les rapports sont à la fois chiffrés mais aussi documentés sur les bonnes et mauvaises pratiques observées et les corrections apportées.

% d'écoles avec séances d'éducation à l'hygiène menées pour toutes les classes % d'écoles avec CGS formés % d'écoles avec checklist introduite (ou grille de notation "école propre") et responsables désignés

15/05/11 16/10/12 21/02/13 18/07/13 23/01/14 01/09/14 15/05/11 16/10/12 21/02/13 18/07/13 23/01/14 01/09/14 15/05/11 16/10/12 21/02/13 18/07/13 23/01/14 01/09/14

UNICEF 67,3 75,6 75 77 81 90 UNICEF 27,9 27,9 27,9 22,3 78 90 UNICEF 0 22,1 21,6 22,6 78 90

CARE 69,7 69,7 91,8 100 100 100 CARE 38,2 100 92,7 100 100 100 CARE 0 100 88,2 100 94 94

Save 17,7 17,7 17,7 92 100 100 Save 13,9 97 97 92 100 100 Save 0 26 100 93 100 100

Oxfam 64 64 64 67 78 78 Oxfam 59 100 100 88,5 100 100 Oxfam 0 0 0 66,7 100 100

WaterAid 86,7 89,7 100 62 100 100 WaterAid 26,7 26,7 100 100 100 100 WaterAid 0 0 0 0 0 0

0

20

40

60

80

100

120

UNICEF

CARE

Save

Oxfam

WaterAid

0102030405060708090

100

UNICEF

CARE

Save

Oxfam

WaterAid

0102030405060708090

100

UNICEF

CARE

Save

Oxfam

WaterAid

Page 49: EVALUATION DU PROGRAMME WASH A L ECOLE AU MALI · 2020-04-29 · EVALUATION DU PROGRAMME WASH A L’ECOLE AU MALI Evaluation commanditée et financée par le Comité Espagnol UNICEF

HYDROCONSEIL

Evaluation du programme WASH à l’école -Spanish Natcom - Rapport d’évaluation Page 49

Il est également intéressant de noter un effort de synthèse et de pédagogie réalisé par le programme via la rédaction du document Guide du MEL. Ce document reprend l’ensemble des points définissant un système de suivi-évaluation-capitalisation structuré et complet. Ce document, très clair, pourra par exemple être repris par le Ministère lorsque ce dernier reprendra le lead du secteur27.

Il est intéressant de noter que le programme a également identifié des thèmes de recherche à approfondir. Cette liste à été élaborée sur la base de consultations avec les ministères et les partenaires Dubai-Cares, et en fonction de l’état des recherches réalisées dans d’autres pays, celles qui sont actuellement en vogue, celles qui sont négligées et cependant utiles (knowledge gaps). Il s’agit de thèmes de recherche plus spéci-fiques, plus précis, ou des analyses de corrélations à creuser, qui nécessitent un protocole de collecte de données plus lourd. Citons par exemple les résultats de la réflexion menée par le programme Dubai Cares en 2011 (G.4, en annexe de ce document), dont les 5 premiers thèmes de recherche ont été menés à bien à ce jour.

Les outils développés dans le cadre du programme sont com-plets et permettent de mesurer les progrès accomplis. Les réu-nions mensuelles et trimestrielles sont essentielles pour faire remonter les difficultés et les success-story du terrain.les ate-liers de capitalisation permettent quant à eux, de proposer cer-tains ajustements sur le programme de manière participative et argumentée

27

L’UNICEF assure actuellement la mise en œuvre et la coordination des activités WASH à l’école pour le compte de différents bailleurs à sa-voir principalement le Canada, Pays-Bas, Danemark et les fondations Dubai Cares et Hilton. Le plaidoyer est réalisé pour que le gouvernement re-prenne dans les prochaines années le lead du programme et que celui-ci devienne un véritable programme National/Gouvernemental.

Page 50: EVALUATION DU PROGRAMME WASH A L ECOLE AU MALI · 2020-04-29 · EVALUATION DU PROGRAMME WASH A L’ECOLE AU MALI Evaluation commanditée et financée par le Comité Espagnol UNICEF

HYDROCONSEIL

Evaluation du programme WASH à l’école -Spanish Natcom - Rapport d’évaluation Page 50

D.3. EFFICIENCE

D.3.1. Utilisation des fonds : les ressources ont-elles été utilisées de manière efficiente ?

Dans le temps imparti pour la réalisation de la présente évaluation, il n’a pas été possible de réaliser une analyse financière fine du programme. Par ailleurs il n’est pas aisé de faire une analyse spécifique de l’efficience des Fonds Spanish Natcom puisque ces derniers ont été mutualisé avec d’autres fonds. Cepen-dant, d’après le dernier rapport d’activité envoyé au Spanish Natcom le 19.08.2014, nous pouvons tirer les données suivantes :

Taux d’utilisation des fonds

Fonds alloués Fonds utilisés % d’utilisation

Année 1 574 155 € 543 038 € 95%

Année 2 393 590 € 305 287 € 77%

Année 3 327 800 € 327 800 € 100%

Le taux de décaissement est très bon en année 1 et 3, moins bon en année 2.

Ventillation du budget (colonne AII => Construccionnes du budget Spanish Natcom)

Le graphique ci-dessous présente une comparaison entre le budget prévisionnel et le budget exécuté pour les 7 grands postes du budget Spanish Natcom.

Nous constatons que la ventilation du budget a évolué et à su s’adapter au contexte et aux besoins du pro-gramme Wash à l’école. Il nous est impossible d’avancer plus d’explications quant à ces changements, mais nous observons :

Forte diminution du budget alloué aux constructions,

Budget alloué au personnel stable

Forte augmentation du budget alloué aux voyages (mission de terrain depuis Bamako)

Par ailleurs, pour tenter d’entrer un peu plus en profondeur dans les coûts du programme, l’équipe d’évaluation s’est appuyée sur les calculs réalisés par le programme en ce qui concerne les activités d’intermédiation sociale28. Il sert à comparer les budgets proposés par les ONG d’exécution activité par ac-tivité et année après année, bien que les éléments de budget soient standardisés et alignés sur le guide

28 Issu des fichiers Comparaison budgets ONG DC3+PADS3 - JT 18.07.13.xlsx. Ces calculs ne sont pas spécifiquement liés au financement Spanish NatCom

0% 20% 40% 60% 80% 100%

Budgétisé

Utilisé

62%

49%

6% 16%

16%

9%

33%

5%

2%

2%

A.I. Terrenos y/o Inmuebles

A.II. Construcciones

A.III. Equipos, materiales y suministros

A.IV. Personal

A.V. Viajes, estancias y dietas

A.VII. Servicios técnicos y profesionales

A.IX.Otros

Page 51: EVALUATION DU PROGRAMME WASH A L ECOLE AU MALI · 2020-04-29 · EVALUATION DU PROGRAMME WASH A L’ECOLE AU MALI Evaluation commanditée et financée par le Comité Espagnol UNICEF

HYDROCONSEIL

Evaluation du programme WASH à l’école -Spanish Natcom - Rapport d’évaluation Page 51

d’animation. Ce travail démontre la préoccupation de l’UNICEF de vérifier les coûts et de les garder à un niveau raisonnable sans compromettre la qualité des activités sur le terrain.

Les résultats sont présentés dans le Tableau 3.

Tableau 3 : Comparaison des coûts des PCA 2014-11-17

Il en ressort que :

les coûts unitaires sont relativement homogènes par région entre les différentes ONG. Par exemple, pour la Région de Mopti qui présente la plus grande disparité, le cout/école varie de 3 000€ ;

Les ONG qui ont moins d’écoles ont un coût unitaire par école plus important car les coûts fixes in-compressibles sont répartis sur un nombre plus petit d’écoles. C’est le cas d’Action Mopti qui n’avait que 10 écoles.

Les ONG internationales tendent à être plus chères à cause des salaires (Right To Play) sauf si ces dernières cofinancent avec leurs fonds propres une partie du budget (Helvetas).

Helvetas Plan ADDA Action Mopti SP R2P

Région Sikasso Sikasso Mopti Mopti Koulikoro Koulikoro

Nombre d'écoles 60 42 30 10 20 19

Nombre d'animateurs 14 8 16 3 2 2

Budget total HS (FCFA) 177 179 075 141 406 454 81 883 894 46 719 261 67 085 847 81 978 410

/ école 2 952 985 3 366 820 2 729 463 4 671 926 3 354 292 4 314 653

Contribution UNICEF (cash) 146 744 955 119 126 790 78 647 290 38 294 261 64 788 500 60 638 865

Contribution UNICEF / école 2 445 749 2 836 352 2 621 576 3 829 426 3 239 425 3 191 519

% contribution ONG 17% 16% 4% 18% 3% 26%

Formation initiale UNICEF (en région !!) 5 643 400 4 228 000 2 268 150 925 600 1 457 000 1 093 975

/ école 94 057 100 667 75 605 92 560 72 850 57 578

Formation pratique 2 080 450 1 296 000 854 000 330 483 676 500 681 475

/ école 34 674 30 857 28 467 33 048 33 825 35 867

Visites de courtoisie 1 750 000 1 450 500 921 250 219 589 504 000 791 965

/ école 29 167 34 536 30 708 21 959 25 200 41 682

Déclenchement ATPC 12 639 800 11 448 000 8 256 500 2 731 066 4 251 000 3 466 500

/ école 210 663 272 571 275 217 273 107 212 550 182 447

Suivi, mise en service équipements, IEC 34 394 226 30 251 546 19 625 236 7 606 499 13 308 346 11 930 651

/ école 573 237 720 275 654 175 760 650 665 417 627 929

Formation des maîtres 6 201 036 4 362 716 5 346 326 1 307 510 2 210 456 2 952 529

/ école 103 351 103 874 178 211 130 751 110 523 155 396

Formation des clubs + vendeuses 908 640 2 169 400 2 232 800 412 483 1 459 000 348 700

/ école 15 144 51 652 74 427 41 248 72 950 18 353

Formation des CGS 10 334 000 5 454 200 5 352 000 1 113 037 4 067 000 1 633 000

/ école 172 233 129 862 178 400 111 304 203 350 85 947

JMLMS + activités extrascolaires 5 408 640 4 636 465 1 098 965 1 164 237 1 855 045 2 550 000

/ école 90 144 110 392 36 632 116 424 92 752 134 211

Notation finale, cérémonie 3 442 000 6 149 700 4 915 000 2 054 589 2 962 500 3 041 958

/ école 57 367 146 421 163 833 205 459 148 125 160 103

Superv, coord, capitalisation 17 823 200 3 700 000 7 985 000 4 056 750 5 275 000 2 820 000

/ école 297 053 88 095 266 167 405 675 263 750 148 421

Salaires 39 046 154 40 573 684 34 500 000 16 710 000 20 350 000 29 674 000

/ école 650 769 966 040 1 150 000 1 671 000 1 017 500 1 561 789

Transports 19 582 154 6 902 720 5 375 000 2 400 000 2 040 000 8 520 000

/ école 326 369 164 350 179 167 240 000 102 000 448 421

Frais de structures, équipements 9 516 923 10 580 000 3 910 000 1 785 000 3 420 000 4 069 000

/ école 158 615 251 905 130 333 178 500 171 000 214 158

% coûts support (total) 42 41 35 49 45 52

% coûts support (part UNICEF) 31 40 35 40 46 41

Page 52: EVALUATION DU PROGRAMME WASH A L ECOLE AU MALI · 2020-04-29 · EVALUATION DU PROGRAMME WASH A L’ECOLE AU MALI Evaluation commanditée et financée par le Comité Espagnol UNICEF

HYDROCONSEIL

Evaluation du programme WASH à l’école -Spanish Natcom - Rapport d’évaluation Page 52

Les coûts du volet construction sont maintenus raisonnables par le recours à des appels d’offres compétitifs et ouverts aux entreprises maliennes, et le strict respect des procédures de l’UNICEF relatives à la passation des marchés de construction.

En dehors de ces calculs, il est important de mentionner que les coûts de gestion interne à l’UNICEF sont modestes puisque 2 personnels internationaux sont affectés à plein temps sur le programme et assument à la fois la mise en œuvre des activités WASH à l’école de l’UNICEF depuis Bamako et la coordination et le suivi-évaluation des quatre autres partenaires Dubai Cares29. 3 ingénieurs nationaux répartis dans les ré-gions de Koulikoro, Mopti et Sikasso dédient une partie de leur temps au programme WASH à l’école30.

Une large part du budget a été allouée aux réalisations. Le taux de décaissement sur l’année 1 et 3 du programme est bon et ne présente pas de signe de sous-estimation budgétaire de la con-tribution du Spanish NatCom

D.3.2. Gestion administrative et financière du programme : aurait-il été possible d'atteindre les mêmes résultats à moindre coûts ?

La gestion administrative, financière et technique de ce type de programme est lourde. L’organisation mise en place par l’UNICEF en interne et l’utilisation de partenaires et prestataires pour la réalisation de cer-taines activités n’engendrent pas de surcoûts financiers importants, notamment si l’on considère le gain en qualité/suivi.

Gestion financière : des contraintes à la réalisation des travaux par les entreprises Certaines entreprises de travaux ont exprimé le souhait que certaines dispositions administratives et finan-cières de l’UNICEF soient changées pour permettre d’améliorer le taux d’avancement des travaux. Néan-moins cette perception est à prendre avec précaution car d’autres entreprises arrivent parfaitement à faire face aux contraintes financières de leur contrat et les procédures applicables sont celles recommandées par l’UNICEF au niveau mondial. Demander une caution de garantie à la signature du contrat et libéré à mi-parcours des constructions permettrait peut-être de minimiser les risques financiers et les retards dans la réalisation des travaux.

Toujours concernant les entreprises de travaux, des visites de sites préalables sont recommandées avant la soumission des DAO afin de pouvoir justifier l’utilisation de tel ou tel matériel ou un délai supplémentaire, etc. Toutefois, il semble que soit les entreprises ne tiennent pas compte de ces recommandations. Exiger un rapport de visite serait peut-être une solution à ce problème.

Gestion administrative : simplification de la contractualisation PCA/DAO Le temps consacré à la contractualisation avec les ONG/entreprises de construction est conséquent. La di-minution de ce poste est une préoccupation constante des gestionnaires du programme (UNICEF). Après une expérience difficile sur le 1er lot d’écoles, des modèles de PCA (contrats de partenariats entre UNICEF et ses ONG d’exécution) ont été élaborés (tant pour la partir narrative que le budget) et les dossiers d’appel d’offres ont été entièrement revus afin d’améliorer la qualité des dossiers soumis à l’UNICEF, et de per-mettre un examen plus rapide des dossiers produits par les ONG et les prestataires de travaux. Une étape supplémentaire sera franchie prochainement par l’UNICEF pour les prestataires de travaux de construction. En effet, pour raccourcir le temps consacré à leur recrutement, l’UNICEF a décidé d’abandonner la sélection

29

Le poste de coordinateur n’a pas été pourvu à plein temps ce qui, de fait réduit le budget de gestion mais a soit entrainé une surcharge de travail contre-productive pour les autres membres de l’équipe, soit freiné les activités. 30

Les 3 conseillers WASH dans les régions sont responsables de toutes les activités WASH de leur région, y compris ATPC, urgences, hydraulique rurale etc. et pas seulement du WASH à l’école

Page 53: EVALUATION DU PROGRAMME WASH A L ECOLE AU MALI · 2020-04-29 · EVALUATION DU PROGRAMME WASH A L’ECOLE AU MALI Evaluation commanditée et financée par le Comité Espagnol UNICEF

HYDROCONSEIL

Evaluation du programme WASH à l’école -Spanish Natcom - Rapport d’évaluation Page 53

par appels d’offres ouverts, et de réaliser une étude de marché approfondie aboutissant à une shortlist de prestataires de qualité qui pourront être consultés par appels d’offres restreints.

Optimisation de la gestion financière et administrative versus bonne gestion et/ou perte de qualité Dans ce type de programme (Hard+Soft), et notamment dans un contexte instable de post-crise, il est inu-tile de vouloir réduire absolument les coûts de gestion, par exemple en impliquant plus fortement les ser-vices techniques de l’Etat dans le suivi/contrôle de la qualité des ouvrages/activités réalisés. Les lourdeurs et lenteurs administratives, le manque de compétences, de motivation, de disponibilité (car manque de personnel et de moyens de transports), la faible capacité de gestion et de suivi, la nécessité de payer des per diem et le carburant (= fiches techniques trimestrielle est justification des fonds avancés), risques non négligeables de détournements de fonds, manque de communication entre les services locaux, régionaux et centraux, etc. sont autant de raisons qui n’ont pas encouragé l’UNICEF à rétrocéder la gestion du pro-gramme aux acteurs nationaux et Locaux. L’UNICEF assure donc l’ensemble des coûts inhérents à sa posi-tion de bailleur (visite de suivi régulier, staff réduit), mais aussi l’ensemble des coûts liés à l’exécution même du programme, tout en conservant les coût unitaires UN qui sont élevés.

Réduire les coûts liés à sa position de Maitre d’Ouvrage (coûts de gestion) Pour réduire les coûts de gestion interne à l’UNICEF, ces derniers ont délégué certaines tâches de mise en œuvre et de suivi à des partenaires tel que la SNV / Protos pour la partie Soft, et au prestataire de service Sid-Sertas pour la partie Hard. Après première lecture des faits, nous pourrions penser que l’introduction de nouveaux acteurs dans la chaine de supervision est un coût supplémentaire et qu’elle est redondante par rapport au travail réalisé par l’UNICEF. Ceci étant, après discussion avec ces prestataires et avec le per-sonnel de l’UNICEF, il apparait que ces structures ont été un vrai support au programme :

La contractualisation avec la SNV et Protos a réduit le nombre de PCA à signer puis à suivre par l’UNICEF : La SNV et Protos sont chargés de superviser les activités des ONG locales, avec qui ils ont eux-mêmes contractualisés (après validation de l’UNICEF) puis de réaliser les comptes rendus har-monisés à l’UNICEF. Les avantages sont les suivants :

o au lieu de 6 PCA, ce sont 2 PCA qui ont été signés, o le suivi sur le terrain de l’UNICEF est moins régulier, ce qui laisse plus de temps pour travail-

ler sur d’autres axes (plaidoyer, etc.) o 2 décaissements financiers à réaliser au lieu de 6 (simplification du suivi financier).

Par ailleurs, ces acteurs interviennent comme « tampons ». En effet, et même si l’UNICEF est toujours resté très ouvert à la communication avec les ONG locales, la gestion au quotidien des équipes (animateurs, con-seillers, etc.) revient à la SNV et Protos. Ainsi, le temps et le volume de discussion est donc réduit au niveau de l’UNICEF et peut être réaffecté à d’autres utilisations.

La contractualisation avec Sid-Sertas décharge également les superviseurs Wash provinciaux de l’UNICEF. Le suivi terrain du bureau de contrôle est permanent sur l’ensemble des chantiers, ce que l’UNICEF ne pourrait pas faire. Les décaissements des tranches intermédiaires de paiement ne sont effectués par l’UNICEF qu’après feu vert du bureau de contrôle indépendant, l’UNICEF n’étant plus obligé de se déplacer sur l’ensemble des chantiers avant d’effectuer un paiement (sauf pour le paiement final correspondant à la réception provisoire, à la libération de la caution de bonne exé-cution correspondant à la réception définitive).

La gestion administrative et financière du programme est bonne. La mise en œuvre d’un programme de cette envergure dans un contexte post-crise nécessite un personnel suffisant et la mise en place de « garde-fou » permettant d’assurer l’atteinte des résultats escomptés dans les délais et les conditions es-comptés. Le programme n’a pas fait d’économie mais ces dé-penses sont justifiées compte tenue de la situation du pays

Page 54: EVALUATION DU PROGRAMME WASH A L ECOLE AU MALI · 2020-04-29 · EVALUATION DU PROGRAMME WASH A L’ECOLE AU MALI Evaluation commanditée et financée par le Comité Espagnol UNICEF

HYDROCONSEIL

Evaluation du programme WASH à l’école -Spanish Natcom - Rapport d’évaluation Page 54

D.4. IMPACT : effets directs et indirects du projet

D.4.1. Ressenti interne : Quels sont les impacts qui ont été perçus par les différents acteurs du programme ?

Le chapitre Impact est traité ici de manière qualitative, grâce aux informations révélées lors des Focus Group MSC. Comme expliqué au point B.2.3, la méthodologie MSC consiste à recueillir des histoires auprès d’un public cible, puis de les hiérarchiser en fonction de leur importance.

Dans le cadre de cette évaluation, le consultant a réalisé cet exercice avec trois types de public :

1. Les bénéficiaires dans les écoles ; 2. Les ONG d’intermédiation sociale ; 3. Les entreprises de construction (latrines et forage).

Pour chacun des publics, l’équipe d’évaluation a tenté de regarder quels ont été les changements perçus dans l’école, dans la communauté, dans les pratiques professionnelles de chacun et dans la vie personnelle de tous. S’il a été plutôt facile de réaliser cet exercice avec les 2 premières catégories de public, la discus-sion avec les entreprises de construction n’a pas nécessairement conduit à des histoires significatives con-cernant les changements apportés par le programme.

a) Principaux changements (effets positifs/négatifs) du programme perçus par les différentes catégories de bénéficiaires

Le tableau ci-dessous synthétise les principaux changements évoqués par les bénéficiaires au cours des séances MSC dans les écoles visitées dans le cadre de la présente évaluation.

Tableau 4 : Synthèse des MSC énoncés par la population bénéficiaire dans les 11 écoles visitées

Le détail est donné dans les paragraphes ci-dessous.

PRINCIPAUX CHANGEMENTS

Nia

man

a (1

3.10

.14)

N'T

abac

oro

(14.

10.1

4)

Kab

alab

ougo

u (1

5.10

.14)

Dog

odou

man

(15

.10.

14)

Sho

(16/

10/1

4)

Gou

ni (

17/1

0/14

)

Fego

un (

17/1

0/14

)

Fato

ma

(20/

10/2

014)

Gui

row

el (

21/1

0/20

14)

Prom

ani (

23/1

0201

4)

Toum

adia

ma

(24/

1020

14)

TOTAL par

type

d'impact

(sur 11)

Classement

Sur le plan sanitaire

Valorisation et Responsabilisation de l'enfant à l'école et dans la communauté X X X X X X X X X X X 11 1er

Implication des acteurs

Mobilisation et synergie des acteurs X X X X X X X 7 3e

Implication croissante du CGS en matière d'EHA X X X X X X X X 9 2e

Valorisation et responsabilisation des femmes dans la communauté X X 2 7e

Valorisation de l'école X 1 8e

Valorisation de la Scolarité des enfants X 1 8e

Sur le plan institutionnel et financier

Mobilisation des ressources financières endogènes/internes X X X X X 5 6e

Qualité des équipements

Entretien et qualité des infrastructures (adaptabilité aux PMR, cantine scolaire, potager, etc.) X X X X X X 6 4e

Transmission à la communauté X X X X X X X 6 4e

TOTAL par école (sur 9) 4 6 1 5 6 3 2 3 6 5 7

Page 55: EVALUATION DU PROGRAMME WASH A L ECOLE AU MALI · 2020-04-29 · EVALUATION DU PROGRAMME WASH A L’ECOLE AU MALI Evaluation commanditée et financée par le Comité Espagnol UNICEF

La valorisation et la responsabilisation de l’enfant à l’école et dans la communauté (Acquisition des connaissances) :

Constats

Le programme Wash à l’école cible avant tout le changement de pratiques chez l’enfant. Il permet d’initier la prise de conscience des élèves et éveiller leur intérêt pour les bonnes pratiques d’hygiène. Ces leçons sont intégrées au programme scolaire classique à travers les leçons de morale, de sciences natu-relles et d’observations environnementales.

Changements observés

Les leçons d’hygiène font partie intégrante des enseignements dispensés par les enseignants des écoles appuyées par Dubai Cares, grâce notamment à la formation des enseignants et à la mise à disposition de matériel didactique (boite à image notamment). Ce qui est très important est que dans les écoles ap-puyées par le programme les leçons d’hygiène entrent maintenant dans une routine et sont mises en pratique quotidiennement dans l’école (lavage des mains, utilisation des latrines, consommation d’eau potable, entretien des latrines).

Le club d’hygiène responsabilise les enfants et, à tour de rôle, ils deviennent garants des bonnes pra-tiques de leurs camarades. De cette manière, la nouvelle génération acquière à l’école certains réflexes qu’elle transmet au-delà de l’enceinte scolaire, dans les familles. Dans plusieurs écoles, les enfants peu-vent être à l’initiative de l’équipement de la famille en matériel d’hygiène (savon, OMO, crésyl, etc.) et en infrastructures (latrines, dispositifs lave-mains) qu’ils contribuent parfois à réaliser (tippy-taps) grâce aux séances de sensibilisation réalisées à l’école.

Témoignages

« Une fois des mamans sont venues se plaindre. Elles me disaient que, depuis l’arrivée de l’animateur de l’Imadel, leurs enfants les rappellent à l’ordre lorsqu’elles ne suivent pas leurs conseils. L’une d’elles m’a même dit que ses enfants utilisaient le savon qu’elle avait acheté pour la lessive, pour se laver les mains… Et que ça lui coûtait cher ! J’ai essayé de lui expliqué que c’était bon pour la santé des enfants et pour faire des économies parce que ça coûtait moins cher que les médicaments. » Directrice de l’école Dogo-douman, CAP de Kalaban-Coro

« L’animateur de Solidarité Plurielle nous a appris les bonnes pratiques à respecter, mais je voudrais avoir une nouvelle formation pour mieux expliquer à ma famille les règles à suivre. J’ai dit aux copains avec qui je joue au foot qu’ils ne devaient pas quitter le terrain sans se laver les mains. J’ai aussi expliqué à mon petit frère qu’il fallait se laver les mains, mais il ne le fait pas, il dit qu’il ne sera jamais propre comme un blanc ! » Club d’hygiène scolaire de l’école de Gouni, CAP de Koulikoro

« Nous avons inventé une chanson qui parle du lavage des mains. On la chante au village, en français, en bambara et en peulh ! » Club d’hygiène de l’école de Fatoma, CAP de Sévaré.

Le programme a permis la valori-

sation de l’enfant, l’émergence d’un sen-

timent d’importance et la prise de cons-

cience de son rôle comme un acteur si-

gnificatif dans le changement des

normes et pratiques scolaires, familiales

et communautaires.

Page 56: EVALUATION DU PROGRAMME WASH A L ECOLE AU MALI · 2020-04-29 · EVALUATION DU PROGRAMME WASH A L’ECOLE AU MALI Evaluation commanditée et financée par le Comité Espagnol UNICEF

HYDROCONSEIL

Evaluation du programme WASH à l’école -Spanish Natcom - Rapport d’évaluation Page 56

La valorisation et la responsabilisation des femmes dans la communauté :

Constats Les femmes se sentent plus concernées que les hommes par la santé de leurs enfants. Les femmes repré-sentent un acteur et un vecteur principal du changement de comportement en matière d’eau, d’hygiène et d’assainissement.

Changements observés

Les interventions des ONG au sein des AME, des vendeuses d’aliments et des groupements de femmes ont permis une certaine reconnaissance de leur place et de leur travail dans les écoles et dans la communauté. Dans de nombreuses localités, les femmes ont reçu une formation aux bonnes pratiques, au même titre que le corps enseignants, les élèves et le CGS. De nouvelles initiatives ont été prises dans quelques associations féminines : le nettoyage du village et des équipements communautaires (Centres de santé, etc.), la partici-pation à la construction des latrines (transport de l’eau), la mise en place de réunions régulières et d’une véritable collaboration avec le CGS.

Témoignages

«L’AME a reçu une sensibilisation EHA par Mariko, l’animateur de l’Alphalog. Ensuite, une femme du Comité Villageois d’Assainissement a utilisé la boîte à images de l’école pour sensibiliser l’AME et les vendeuses du marché. Aujourd’hui elles sont conscientes de l’intérêt d’adopter de bonnes pratiques d’hygiène. Et elles se lavent les mains avant de préparer à manger aux enfants de l’école. » Les enseignants de l’école N’Tabacoro, CAP de Kalaban-Coro

«Mariko nous a incité a donné une bouilloire à l’AME pour que les femmes se lavent les mains avant de tou-cher la nourriture. Nous avons aussi regroupé les élèves de l’école dans la cour pour leur rappeler les règles d’hygiène alimentaire. L’année dernière plusieurs enfants ont été malades en mangeant du poisson du mar-ché ; d’autres ont retrouvé des chenilles dans leur manioc ! Comme l’AME est maintenant sensibilisée, nous avons conseillé aux enfants d’acheter la nourriture auprès de l’AME et non au marché. Aujourd’hui peu d’enfant se plaignent de mal au ventre.» Club d’hygiène scolaire de l’école N’Tabacoro, CAP de Kalaban-Coro

« Quand on doit faire la formation dans la communauté, on s’adresse surtout aux femmes, car dans les vil-lages, les hommes ne sont pas là la journée. Il n’y a pas d’AME partout, mais il y a toujours un groupement de femmes. Ce sont elles qu’on sensibilise car elles sont plus attentives à la santé et à l’hygiène de leurs en-fants. Dans certaines localités, le prix du concours Ecoles Propres a été donné à l’AME qui fabrique des sa-vons pour l’école et la communauté. Moi, je préfère qu’on le donne aux femmes, elles sont plus engagées que les hommes et plus accessibles pour intervenir dans les activités. Je crois qu’il y a plus de chance pour que l’argent soit investit dans le programme WASH. » un animateur de l’ONG IMADEL qui intervient dans les écoles de Koulikoro.

Le programme a souligné le rôle

de la mère dans la tenue du foyer et

leur responsabilité en matière

d’hygiène alimentaire et corporelle de

la famille.

Page 57: EVALUATION DU PROGRAMME WASH A L ECOLE AU MALI · 2020-04-29 · EVALUATION DU PROGRAMME WASH A L’ECOLE AU MALI Evaluation commanditée et financée par le Comité Espagnol UNICEF

HYDROCONSEIL

Evaluation du programme WASH à l’école -Spanish Natcom - Rapport d’évaluation Page 57

La valorisation de l’école et de la scolarisation des enfants :

Constats Les bonnes conditions d’enseignement limitent l’absentéisme et l’abandon scolaire. La réalisation d’infrastructures d’hygiène dans les écoles et particulièrement de latrines permet d’assurer une meilleure fréquentation des enfants et notamment des jeunes filles durant leur période menstruelle.

Changements observés

Le programme a permis la construction de latrines différenciées filles/garçons et d’un point d’eau de bois-son facilement accessible par les enfants.

Témoignages

« J’ai vu l’impact du programme sur les parents d’élèves. Le problème de l’école c’est de récolter les cotisa-tions scolaires, il y a des parents qui refusent de payer. L’année dernière, le père d’un élève qui n’avait pas payé le CGS est venu à l’école. Il a vu tous les changements : la pompe, les lave-mains et le reste, et il a payé tout de suite ! Il a compris que cet argent était bien utilisé. » Directrice de l’école Dogodouman, CAP de Ka-laban-Coro

Une école plus propre dont on peut être fière :

Constats

La mise en compétition des écoles à travers le concours Ecoles Propres est moteur de changement. Le prix que peut remporter l’école, la perspective de l’organisation d’une fête, ainsi que la satisfaction de battre l’école voisine participent à la motivation de chacun (corps enseignants et animateur de l’ONG qui accom-pagne l’école).

Changements observés

Le concours « Ecoles Propres» a fortement contribué à la dynamisation de l’ensemble des équipes scolaires, des enfants et de la communauté (à condition que ces derniers soient informés de l’existence de ce con-cours).

Témoignages

« Je veux que mon école gagne le concours Ecoles Propres, on aura bientôt les résultats : notre école est très impliquée, les enfants nettoient les latrines et les classes tous les soirs à l’OMO. Les garçons participent au-tant que les filles. Les citernes pour le lavage des mains sont sorties tous les matins et les élèves savent bien les utiliser. J’avais peur que l’école de Gouni nous devance alors je suis allée regarder par moi-même : j’ai trouvé un prétexte pour rendre visite au directeur, j’ai traversé le fleuve et j’ai observé le matériel et les pra-tiques des élèves ! On a une chance de gagner. » Directrice de l’école de Sho, CAP de Koulikoro

« Le programme fait la fierté des enseignants et fait ressortir le nom de l’école. » Club d’hygiène de l’école de Kabalabougou (CAP de Kalaban-Coro) Le programme contribue à la

notoriété des écoles et à l’apparition

d’une fierté communautaire.

Le programme contribue à facili-

ter la mobilisation des cotisations des

parents d’élèves par l’école, à augmen-

ter les ressources financières de l’école

et à augmenter le nombre d’arguments

du CGS en faveur de la scolarisation des

filles, adolescentes notamment et des

enfants en général. Cela est d’autant

plus important dans les communautés

hostiles à l’école.

Page 58: EVALUATION DU PROGRAMME WASH A L ECOLE AU MALI · 2020-04-29 · EVALUATION DU PROGRAMME WASH A L’ECOLE AU MALI Evaluation commanditée et financée par le Comité Espagnol UNICEF

HYDROCONSEIL

Evaluation du programme WASH à l’école -Spanish Natcom - Rapport d’évaluation Page 58

La transmission à la communauté et le renforcement de sa collaboration avec l’école:

Constats

La communauté est le second bénéficiaire du programme. D’une part, elle fait l’objet d’une intervention directe des ONG qui forment le CVA et l’AME du village aux bonnes pratiques d’hygiène et d’assainissement. D’autre part, elle bénéficie d’une intervention indirecte par l’intermédiaire des enfants qui transmettent aux familles les leçons apprises à l’école.

La collaboration entre le CGS et le CVA permet aussi de diffuser au village les connaissances, les bonnes pratiques et les équipements mis en place à l’école via les séances de sensibilisation communes.

Changements observés

Progressivement, une prise de conscience communautaire émerge. Dans certaines familles, les messages de l’ONG sont entendus et quelques réflexes sont pris concernant l’hygiène corporelle, l’hygiène alimentaire et la propreté du foyer. Le rôle des femmes est déterminant dans la mise en place des bonnes pratiques. La communauté se mobilise également pour la construction d’équipements d’hygiène et d’assainissement tels que des latrines et des tippy-taps. Peu à peu, l’impact sanitaire se fait sentir, la communauté recense moins de fièvre, de diarrhée et plus généralement le programme permet la prévention du paludisme et de la fièvre Ebola.

Le concours « Ecoles Propres » facilite également la mise en contact et la cohésion de l’équipe scolaire et de la communauté. En effet, l’école perd des points dans la note du concours si le village ou le quartier ne dis-pose pas d’infrastructures sanitaires (latrines, lave-main) ou qu’il n’est pas entretenu (présence de déchets, divagation des animaux, défécation à l’air libre constatée).

Témoignages

« Lors du déclenchement ATPC, tout le village est invité, même l’équipe scolaire des écoles qui ne font pas partie du programme. Parfois, lors des activités de sensibilisation les autres écoles du village demandent à participer aux activités pour montrer qu’elles souhaitent entrer dans le programme. Bon, on sait que sou-vent, elles veulent surtout le prix qui va avec le concours Ecoles Propres, mais parfois elles se mobilisent aus-si car elles espèrent un jour en faire partie. Par exemple, certaines ont adopté le cahier des consultations médicales avec lequel elles peuvent mesurer l’impact des activités WASH. » Un animateur de l’ONG ASMADEVI qui intervient dans les écoles de Koulikoro.

Le programme renforce la

collaboration entre l’école et la

communauté. Il a facilité

l’association des équipes scolaires et

des groupements villageois pour la

promotion de l’hygiène au sein des

écoles et au-delà.

Page 59: EVALUATION DU PROGRAMME WASH A L ECOLE AU MALI · 2020-04-29 · EVALUATION DU PROGRAMME WASH A L’ECOLE AU MALI Evaluation commanditée et financée par le Comité Espagnol UNICEF

HYDROCONSEIL

Evaluation du programme WASH à l’école -Spanish Natcom - Rapport d’évaluation Page 59

Plan d’action de l’École de Dogodouman - CAP de Kati-2013

L’enclenchement d’une dynamique d’auto-mobilisation des écoles et communautés :

Constats La pérennisation de la dynamique EHA nécessite l’autonomisation financière de la communauté scolaire pour l’achat annuel des intrants et petits matériels d’entretien.

Changements observés

Les animateurs des ONG, via la formation des CGS, ont contribué à la mobilisation de nouvelles ressources financières (mise en place de sanctions financières, incitation à cultiver un jardin partagé, mise en place d’autres activités génératrices de revenus pour l’école, etc.). Progressivement, certaines écoles ont adopté une logique proactive et lèvent les fonds de la communauté (généralisation de la cotisation scolaire, quête auprès de l’équipe enseignante, du CGS, vente de parcelles, location de tables ou chaises pour les récep-tions, récupération des intérêts des micro-crédits gérés par l'AME). Par ailleurs et pour favoriser la pro-activité des écoles et casser le cercle vicieux de l’attentisme face à l’aide au développement, le programme Dubai Cares a modifié ses interventions et ne donne plus les kits d’hygiène aux écoles. Certaines écoles l’ont bien compris et n’attendent plus les partenaires extérieurs pour s’organiser. Cela contribue également à la pérennité des actions et à termes, au passage à l’échelle des actions EHA dans les écoles.

Témoignages

« On sait que garder l’école propre ça coute cher, mais il faut que chacun comprenne que c’est à nous de payer. Quand la pompe est tombée en panne l’année dernière, j’ai payé les réparations, et ensuite le CGS m’a remboursé. Le CGS demande aussi à la jeunesse de participer à l’entretien en désherbant par exemple. » Directrice de l’école Dogodouman, CAP de Kalaban-Coro

« Pour nous, la question de l’assainissement est très large et toute la communauté doit s’en préoccuper. Nous essayons de faire participer toutes les associations communautaires aux différentes tâches. Il y a la vidange des latrines, le traitement de l’école contre les termites, la culture d’un champ d’un hectare de mil et d’un potager pour l’école. L’AME est mobilisée pour la réalisation des repas de la cantine scolaire ou pour l’approvisionnement en bois de chauffe. La jeunesse du village aussi a contribué en désherbant la cour d’école. Et la communauté a construit des latrines dans les familles qui n’en avaient pas, plus de 160 latrines ont été réalisées dans le village ! » Membres du CGS de l’école de Promani, CAP de Djenné

Le programme favorise la créa-

tion d’un plan d’action et d’un véritable

budget dédié aux dépenses liées à

l’eau, l’hygiène et l’assainissement. Les

CGS des écoles ont été formés à la ges-

tion d’un budget et ont compris que la

mobilisation financière relève de plus

en plus d’une initiative des bénéfi-

ciaires.

Page 60: EVALUATION DU PROGRAMME WASH A L ECOLE AU MALI · 2020-04-29 · EVALUATION DU PROGRAMME WASH A L’ECOLE AU MALI Evaluation commanditée et financée par le Comité Espagnol UNICEF

HYDROCONSEIL

Evaluation du programme WASH à l’école -Spanish Natcom - Rapport d’évaluation Page 60

Le sentiment de propreté et de sécurité :

Constats

La réalisation ou la réhabilitation des infrastructures hydro-sanitaires est l’impact le plus visible du pro-gramme. Ces travaux sont accompagnés, dans certaines écoles, d’un premier pas vers l’accès des handica-pés à l’école (rampe d’accès aux latrines, siège handicapé, etc.). La réalisation par des entreprises soigneu-sement sélectionnées par l’UNICEF et suivi par un BET de contrôle qualité est un gage de qualité de ces in-frastructures qui rassure la communauté.

Changements observés

L’école n’est parfois pas le seul bénéficiaire de ces infrastructures. C’est généralement le cas des pompes à eau qui sont utilisées par la communauté, que l’eau soit distribuée gratuitement ou avec une contribution financière. Par ailleurs, les latrines sont davantage utilisées car les animateurs leur ont appris à les utiliser, les enfants ont également moins peur (notamment les plus petits) et les filles ont de plus d’intimité. Ces réalisations font généralement la satisfaction de la communauté et la fierté de l’équipe scolaire.

Témoignages

« Maintenant qu’on a adopté de bonnes pratiques d’hygiène, l’école est propre. Avant il y avait des déféca-tions partout dans la cour et juste derrière la direction. Je ne pouvais pas entrer dans mon bureau à cause de l’odeur. Aujourd'hui on peut marcher la tête haute et je peux recevoir des invités dans mon bureau.» Direc-trice de l’école Dogodouman, CAP de Kalaban-Coro

« Parfois, je forme un ou deux homme du village, ou un enseignant de l’école, à l’entretien ou aux petites réparations de la pompe. Certains prennent l’habitude de vérifier tous les matins si les infrastructures sont en bon état et propres. Et lorsqu’il y a un problème, ils interviennent ou font appel une entreprise. Ca garan-tie la durabilité des infrastructures. » un technicien CISSE Forage pour la réalisation de pompe à eau à Kou-likoro

Les principaux changements perçus par les bénéficiaires sont nombreux. Chacun des changements perçus font l’objet d’une conclusion distincte. Ils tournent essentiellement autour des connaissances acquises par l’enfant et de sa responsa-bilisation dans les routines d’entretien (11/11 écoles), de l’implication et le travail de tous les acteurs ensemble pour créer un meilleur environnement scolaire, de la meilleure mobilisation/valorisation des ressources et enfin de l’amélioration de la qualité des équipements

Les infrastructures d’hygiène et

d’assainissement représentent un gain

de confort, de sécurité et garantissent

de meilleures conditions d’hygiène à

l’école.

Page 61: EVALUATION DU PROGRAMME WASH A L ECOLE AU MALI · 2020-04-29 · EVALUATION DU PROGRAMME WASH A L’ECOLE AU MALI Evaluation commanditée et financée par le Comité Espagnol UNICEF

HYDROCONSEIL

Evaluation du programme WASH à l’école -Spanish Natcom - Rapport d’évaluation Page 61

Mobilisation et synergie des acteurs et le renforcement du rôle et de la crédibilité des CGS :

Constats

La question de l’hygiène et de l’assainissement à l’école et dans la communauté concerne de très nombreux acteurs au Mali. Le manque de communication entre eux est parfois un véritable obstacle à la mise en œuvre des projets. Le programme Dubai Cares rappelle les rôles de chacun et grâce à des ateliers et des formations a renforcé les liens entre acteurs institutionnels et avec les bénéficiaires au travers de la mise en place de différents outils (convention triennale entre la mairie et le CGS, plan d’action du CGS, etc.).

Changements observés

Dans plusieurs écoles l’équipe d’évaluation a constaté une certaine prise de conscience et une implication générale sur les questions EHA. Il semble que la problématique de l’assainissement devienne l’affaire de tous. Le dialogue et la collaboration des acteurs locaux se systématisent. Quelques acteurs émergent, c’est le cas du CGS, et notamment de son président, dont le rôle s’est affirmé dans de nombreuses écoles. Le WASH est un domaine qui lui est accessible grâce lequel il lui est facile de rendre visibles et appréciés les résultats de ses actions. Lorsqu’il est actif, il fait le lien avec les différents partenaires et devient, en collabo-ration avec le directeur de l’école, le pilier sur lequel repose en grande partie la réussite du programme.

Témoignages

« Certains anciens enseignants sont vexés de ne pas avoir été formés, alors ils laissent ceux qui ont suivi la formation s’occuper des activités de promotion de l’hygiène. Mais dans certaines écoles, les enseignants non formés sont présents lors de ces activités, alors j’essaie de les inciter à participer. Au début ils sont retissant, mais je leur demande de faire de petites choses, de dire une phrase ou deux avec les enfants et ça leur donne envie d’en faire plus. Je ne peux pas former tout le monde, mais parfois les directeurs obligent les en-seignants formés à faire une restitution au reste de l’équipe scolaire. » une animatrice de l’ONG Right to Play qui intervient dans les écoles de Koulikoro.

« Le CGS est très investi dans notre école. Il a tenté de reboiser la cour de l’école, il a participé à la construc-tion de la cantine, du magasin et du hangar. Et il offert une boîte à pharmacie à l’école. Il s’est même enga-gé à construire 31 latrines dans le village, cinq sont déjà réalisées. » le directeur de l’école de Guirowel, CAP de Sévaré

« C’est difficile de savoir si le programme aura un impact sur le long terme, mais j’ai bon espoir. Je suis allée visiter une école quelques mois après la fin du programme et je crois qu’ils sont sur la bonne voie. Les ensei-gnants ont pris des habitudes, des réflexes. Certaines activités vont perdurer car elles ont eu du succès, comme la réalisation de tippy taps. Mais d’autres risquent de voir leur rythme ralentir ou prendre fin comme la gestion des eaux usées des latrines ». une animatrice de l’ONG Right to Play qui intervient dans les écoles de Koulikoro.

Une dynamique d’action se met en place principalement entre les acteurs locaux (le CAP, la mairie, l’AME, le CVA, le CGS, l’école) qui sont les bénéfi-ciaires directs du programme.

Page 62: EVALUATION DU PROGRAMME WASH A L ECOLE AU MALI · 2020-04-29 · EVALUATION DU PROGRAMME WASH A L’ECOLE AU MALI Evaluation commanditée et financée par le Comité Espagnol UNICEF

b) Principaux changements (effets positifs/négatifs) du programme perçus par les partenaires de mise en œuvre

La méthode du MSC a également été appliquée auprès des ONG d’intermédiation sociale. Il résulte des dis-cutions les éléments hiérarchisés suivants :

Figure 18 : MSC issus des entretiens avec les ONG d’intermédiation sociale - Oct. 2014

Figure 19 : MSC issus des entretiens ave les entreprises privées de construction - Oct. 2014

Le détail des changements significatifs observés sont détaillés ci-dessous. Nous attirons l’attention sur le fait que les Changement 1 et 2 ne sont pas traités ici car ils ont d’ores et déjà été développés (y compris les témoignages des ONG d’intermédiation sociale et des entreprises) au point D.4.1.1. Pour éviter les répéti-tions nous avons donc préférer nous concentrer ici sur les MSC 3 et 4 pour les ONG et les l’ensemble des MSC entreprises de travaux.

Page 63: EVALUATION DU PROGRAMME WASH A L ECOLE AU MALI · 2020-04-29 · EVALUATION DU PROGRAMME WASH A L’ECOLE AU MALI Evaluation commanditée et financée par le Comité Espagnol UNICEF

Le renforcement de la communication, connaissance mutuelle et l’émergence d’une culture de la coordination et de l’échange d’expérience entre les ONG ou les entre-prises de travaux :

Constats Le programme a mis en place un système de suivi-évaluation dense centré sur le retour d’expérience et la recherche de solution par tous. Ainsi, lors des différents ateliers de formation, sur le terrain, et trimestriellement, les différentes ONG d’intermédiation sociale d’une part et les entreprises de travaux d’autre part, se sont rencontrées, ont échangé et ont apprécié ces moments de partage.

Changements observés

Les ONG qui étaient présentes dès le lancement du programme (ou qui avaient d’ores et déjà un savoir faire EHA scolaire) ont appuyées les nouvelles arrivantes et une forme de solidarité s’est mis en place : les ONG se sont rendues mutuellement services en cas de difficultés. Par ailleurs, leurs ren-contres régulières ont permis la concertation et la capitalisation de leur travail.

D’autre part, la création du REHA qui regroupe une quarantaine d’ONG qui œuvrent pour la promotion de l’eau, l’hygiène et l’assainissement au Mali, permet la mise en place d’un plan d’actions stratégique durable. Le REHA contribue au rapprochement des capacités et donne une meilleure visibilité aux ONG.

Au-delà des bénéfices liés à l’amélioration des pratiques d’hygiène et des conditions de santé, ces différents acteurs ont fait part d’enrichissements per-sonnels indirects. Les animateurs des ONG ne sont pas tous natifs des zones d’intervention de leur ONG, ainsi le programme a aussi été l’occasion de découvrir de nouvelles localités, avec des modes de fonctionnement différents des leurs et de tisser des liens avec la communauté (maire, directeur d’école).

Témoignages

« On ne réalise pas exactement les mêmes prestations mais on vise tous le même objectif. On est complémentaires donc on s’entraide.» un animateur de l’ONG Alphalog qui intervient dans les écoles de Koulikoro.

« C’est mon premier emploi, j’ai découvert que j’étais capable d’être actrice de l’EHA.» une animatrice de l’ONG Right to Play qui intervient dans les écoles de Koulikoro.

« Sur le terrain, je suis dans la même zone d’intervention que Right to play, quand j’ai vu ce qu’ils faisaient comme jeux EHA avec les enfants, j’ai observé et demandé conseille et ensuite j’ai fait la même chose dans mes écoles ». un animateur

« Lors de l'atelier de formation organisé par l'UNICEF, tous les chefs de travaux ont reçu la même formation. Et ça facilite beaucoup l'entraide des entre-prises : on se connait et on fonctionne tous de la même manière, donc on peut discuter des procédures administratives ou des normes techniques à res-pecter par exemple. » Conducteur de travaux de l'entreprise N'Tiabola qui intervient dans la région de Mopti.

Page 64: EVALUATION DU PROGRAMME WASH A L ECOLE AU MALI · 2020-04-29 · EVALUATION DU PROGRAMME WASH A L’ECOLE AU MALI Evaluation commanditée et financée par le Comité Espagnol UNICEF

HYDROCONSEIL

Evaluation du programme WASH à l’école -Spanish Natcom - Rapport d’évaluation Page 64

La création d’emploi, garantie UNICEF et réseau :

Constats

La crise a contraint de nombreuses ONG ou entreprises maliennes de réduire drastiquement leur personnel. Les services techniques de l’Etat, face à l’interruption de l’aide au développement par la plupart des bailleurs de fonds, se sont retrouvé sans activité ni budget. Le programme Dubai Cares, de par l’ampleur des écoles à couvrir, à fait appel à de très nombreux de prestataires nationaux, d’ONG et de services techniques pour la réalisation des activités EHA dans les écoles. Par ailleurs, l’UNICEF et ses partenaires ont essayé, dans la mesure du possible, que les prestataires de travaux dont les interventions avaient été jugées satisfaisantes, puissent accéder aux marchés des lots suivants.

Changements observés

Ces contrats ont tout d’abord assuré l’activité économique des ONG et prestataires, même durant la période de retrait des autres bailleurs Eau et assai-nissement. D’autre part, l’exigence de l’UNICEF étant un gage de qualité, ces contrats ont permis d’améliorer les références des entreprises et ils ont aussi été l’occasion de développer leur réseau professionnel (auprès d’autres bailleurs notamment). Enfin, les formations de l’UNICEF ont permis de conforter les connaissances des entreprises et des ONG en matière de procédures administratives. Les animateurs des ONG et techniciens de travaux ont pu traverser la période de crise économique sans chômage, continué à faire vivre leur famille et, pour un certain nombre d’entre eux, se marier et fonder une famille.

La professionnalisation des entreprises de travaux

Constats

Cet aspect est principalement visible par l’UNICEF mais aussi et surtout par l’entreprise en charge du suivi/contrôle des travaux : Sid-Certas. Un chan-gement significatif est visible dans la méthodologie d’intervention. Suite aux formations dispensées en début de programme (mise à niveau des techni-ciens), les entreprises de travaux et Sid-Certas disposent de la même compréhension des travaux à réaliser, des délais à respecter ainsi que des stan-dards de qualité exigés : un vocabulaire commun est créé. Cela est évidemment très utile dans le cadre du programme mais plus largement dans l’ensemble des marchés publics de construction de latrines et de points d’eau. Cela est d’autant plus vrai que la communication avec l’UNICEF dans le cadre de la réalisation des travaux est fluide et régulière (fiche hebdomadaire à compléter, sur le modèle transmis par le programme Dubai Cares)

Changements observés

Ainsi, selon les directeurs de ce groupement de Bureau d’études, les formations techniques dispensées aux entreprises de forages et de construction de latrines sont essentielles pour la bonne réussite du programme et plus largement pour la professionnalisation des entreprises depuis le manœuvre jus-qu’au dirigeant.

Page 65: EVALUATION DU PROGRAMME WASH A L ECOLE AU MALI · 2020-04-29 · EVALUATION DU PROGRAMME WASH A L’ECOLE AU MALI Evaluation commanditée et financée par le Comité Espagnol UNICEF

HYDROCONSEIL

Evaluation du programme WASH à l’école -Spanish Natcom - Rapport d’évaluation Page 65

Professionnalisation des ONG nationales et acceptation des activités par les communautés

Changements observés

La SNV31 est une ONG internationale qui intervient dans le programme Dubai Cares (cofinancement SPanish NatCom) dans le volet d’intermédiation so-ciale, où elle a recruté et encadré sur le terrain à Koulikoro 3 ONG nationales (Asmadevi, Imadel et Alphalog). Les deux enseignements retenus par la SNV dans le cadre du programme sont :

la professionnalisation des ONG intervenant dans le Wash à l’école, c’est d’ailleurs leur premier objectif dans le cadre du contrat qu’ils ont si-gné avec l’UNICEF : « Notre rôle est de renforcer et de former les ONG nationales en techniques de communication »,

la création d’émulation autour des actions EHA : mettre des actions de communication en place pour une meilleure prise en compte de l’assainissement dans l’école mais plus largement dans les consciences de tous « nous avons animé le concours entre les journalistes sur le meil-leur article de presse sur le lavage des mains. Cette activité a regroupé 20 journalistes qui ont eux-mêmes travaillé en étroite relation avec les DRACPN et les DRS. Au final trois d’entre-eux ont été primés »

la création d’une véritable famille : Dans la plupart des écoles visitées, les agents sont considérés comme des membres à part entière de la fa-mille. La SNV a confirmé ce ressenti : « les animateurs ont su s’intégrer dans les écoles et dans les communautés. C’est toute une famille que vous avez créé dans le cadre du programme ». Selon lui le signe le plus visible de cette famille est la création du réseau REHA. Le REHA est un groupe d’ONG Wash à l’école qui se sont fédérées et travaille ensemble pour relayer les actions de plaidoyer et les actions de learning-by-doing.

Le programme a apporté des changements significatifs dans le travail et dans la vie personnelle des partenaires de mise en œuvre. Pour les ONG et les entreprises, le caractère « pédagogique / pas à pas » du programme et les exigences de qualité, leur ont permis de se professionnaliser. De même l’existence du programme, a accru la résistance économique de nombreuses structures permettant, tant bien que mal de conserver le lien social et l’espoir. Plus spécifiquement pour les ONG, le programme leur a permis de créer une famille, à la fois dans la communauté (comme en témoigne les bénéfi-ciaires) et dans le secteur de l’intermédiation sociale au Mali (comme en témoigne la création du réseau REHA)

31

Paroles receuillies auprès de Sako Bani – Coordinateur WASH SNV

Page 66: EVALUATION DU PROGRAMME WASH A L ECOLE AU MALI · 2020-04-29 · EVALUATION DU PROGRAMME WASH A L’ECOLE AU MALI Evaluation commanditée et financée par le Comité Espagnol UNICEF

D.4.2. Ressenti externe : Les écoles du programme ont-elles suscitées un intérêt particuliers?

Les principaux bénéficiaires du programme sont les écoles ciblées. Néanmoins, l’arrivée d’animateurs IEC dans les villages, les cercles peut susciter une prise de conscience collective ou tout du moins un vif intérêt dans les écoles voisines et non bénéficiaires.

Dans les communautés « écoles propres » Le programme est dans la majorité des cas très bien accueilli puisque la communauté adhère aux initiatives de l’école ; dans le meilleur des cas, il fait l’objet d’une appropriation de la part des ménages. Progressive-ment ces derniers, à leur propre initiative ou avec l’aide du Comité Villageois d’Assainissement ou de l’ONG, adoptent les bons réflexes concernant l’hygiène corporelle, l’hygiène alimentaire et la propreté du foyer. Le déclenchement commun ATPC +E dans le village et dans l’école favorise la mobilisation de la communauté pour la construction d’équipements d’hygiène et d’assainissement tels que les latrines et les tippy-taps. Toutefois, certains directeurs nous ont confié qu’ils recevaient parfois des « plaintes » (mais rare) de pa-rents qui n’ont pas ou peu de moyens financiers, pour poursuivre ce qui a été entamé à l’école. Globale-ment, tout le monde s’accorde à dire qu’il s’agit d’un manque de volonté.

L’intérêt suscité par le programme dans la communauté est aussi illustré par l’initiative du maire de la commune de Mandé qui a demandé à la SNV (avril 2014) comment faire pour reproduire le concours écoles propres dans les écoles de sa commune. Après discussion avec l’ensemble des parties, un protocole d’accord a été signé entre le maire, le CAP, le CSCom et les CGS afin de pouvoir renouveler l’organisation du concours chaque année. Plus de précision seront données au chapitre D.5.1.

Dans les communautés et écoles non bénéficiaires Le déclenchement de l’ATPC dans les villages et l’organisation du concours « école propre » permettent, comme nous l’avons vu plus haut de créer une forme d’émulation dans les communautés concernées, de les impliquer dans la dynamique et de leur communiquer l’esprit de compétition né dans les écoles. Mais c’est aussi un évènement privilégié pour de susciter chez les directeurs d’écoles non bénéficiaires l’envie d’intégrer le programme, ou même de mettre en place les bonnes pratiques d’hygiène et d’assainissement de manière autonome dans leurs établissements. Le prix que peut remporter l’école, la perspective de l’organisation d’une fête, ainsi que la satisfaction de battre l’école voisine participe à la motivation de ces écoles.

Citons par exemple la commune de Banamba32, dans lequel certaines communautés ont demandé à l’ONG comment créer des Comité Villageois d’Assainissement alors qu’ils ne sont pas ciblés par le programme. Au regard de cette mobilisation et pour ne pas freiner cette dynamique, l’ONG à accompagner sommairement la communauté dans la constitution d’un CVA et dans sa prise de fonction (qui fait quoi, pourquoi). Ce tra-vail n’a pas donné lieu à la signature d’un avenant dans le contrat de l’ONG et n’a bien sur pas donné lieu à la mise en place du paquet complet d’activités, mais représente une très belle preuve d’engagement des communautés et des ONG pour le transfert des bonnes pratiques et leur dissémination.

Le travail dans les écoles a en premier lieu suscité un intérêt particulier (positif ou négatif selon les ménages) dans la com-munauté. Cet intérêt a grandi au fur et à mesure des activités conjointe Ecole / Village de l’ONG, et de l’amélioration visible des conditions de l’école. Plus largement, le programme a éga-lement su susciter l’intérêt dans les communautés et les écoles non bénéficiaires, grâce notamment au concours Ecole Propre

32

Témoignage recueilli auprès de la SNV

Page 67: EVALUATION DU PROGRAMME WASH A L ECOLE AU MALI · 2020-04-29 · EVALUATION DU PROGRAMME WASH A L’ECOLE AU MALI Evaluation commanditée et financée par le Comité Espagnol UNICEF

HYDROCONSEIL

Evaluation du programme WASH à l’école -Spanish Natcom - Rapport d’évaluation Page 67

D.5. DURABILITE et appropriation du programme

D.5.1. Durabilité, appropriation : La conception du programme et ses modalités de mise en œuvre permettent-ils de maximiser les chances de durabilité ?

Le programme est relativement récent. Il est donc difficile d’analyser la pérennité des actions entreprises jusqu’à ce jour. En outre, comme énoncé plus haut, cela est d’autant plus délicat que la mission d’évaluation a été réalisée en tout début d’année scolaire et que le fonctionnement normal de l’école n’avait pas encore totalement repris. Pour plus de données sur la durabilité du programme Dubai-Cares, nous orientons le lecteurvers le rapport d’impact quantitatif (réalisé sur 2 ans) produit par l’Université d’Emory (Atlanta, USA).

Néanmoins, dans le cadre de cette évaluation, il est intéressant de regarder quels ont été les mécanismes et outils mis en place par le programme Dubai-Cares afin de maximiser les chances de sa durabilité.

a) Adéquation des stratégies, mécanismes, outils mis en place au niveau des bénéficiaires comme des partenaires d'intervention pour assurer une durabilité maximale des résultats compte tenu du con-texte du pays?

Le programme a largement su capitaliser les expériences des membres du consortium et les expériences d’autres programmes WASH à l’école pour développer des outils, approches ou mécanismes favorisant la durabilité des résultats du programme. 4 points fondamentaux sont ressortis comme étant de bonnes me-sures pour pérenniser les actions entreprises, à savoir :

1. La mise en place d’un concours « école propre » dès le démarrage des activités, 2. L’implication des services techniques et des mairies 3. La formation des enseignants et des élèves-enseignants, 4. L’auto-mobilisation et l’inclusion de la communauté dès le démarrage des activités, 5. La professionnalisation des entreprises de travaux et de supervision technique des ouvrages.

Le concours école propre comme gage de durabilité D’après les directeurs rencontrés, l’annonce du concours Ecole Propre, ou tout du moins du mécanisme de contrôle des bonnes pratiques / diffusion de conseil, mis en place dans le cadre du programme est bon. En effet, les visites à l’improviste et l’observation de l’état, du fonctionnement, de la propreté et de l’utilisation des ouvrages par les enfants sont très bénéfiques. Ainsi les directeurs, les enseignants, les CGS et les clubs d’Hygiène ne se reposent pas sur des acquis mais, au contraire, entretiennent une dynamique EHA dans l’école.

Toujours dans ce cadre, il est très intéressant de noter que les services techniques sont impliqués dans toutes les phases de la notation. Cet apprentissage sur le terrain, aux cotés des ONG d’intermédiation so-ciale, garantie la durabilité méthodologique du suivi. Néanmoins, actuellement, l’intervention des Services Techniques sur le terrain suppose un appui budgétaire externe et un suivi (cf. D.5.1.b)) conséquent.

La notation du concours Ecole Propre, en fin de processus et 6 mois après le retrait de l’ONG, est un bon mécanisme permettant de réaliser une validation des acquis et d’identifier les facteurs limitant la durabilité du programme (vision court terme – recul de 6 mois). C’est aussi un outil qui, couplé et harmonisé avec le suivi post-implémentation par les services techniques, pourrait permettre de mesurer le niveau de pérenni-té des résultats à 6 mois. C’est donc principalement au travers de cet outil que l’équipe d’évaluation sou-haitait analyser la durabilité des résultats du programme. Cependant :

Les notes finales (en fin de processus) ont été conservées par les ONG et sont difficilement acces-sibles.

Les notes post-suivi (6 mois après le retrait des ONG) existent mais elles ne sont pas harmonisées au niveau des régions, ou en fonction des lots,

Dans le temps imparti à l’évaluation, ces deux constats ont rendu cette analyse difficile, néanmoins le gra-phique ci-dessous présente le bilan du premier lot d’écoles financé par Dubai-Cares, 6 mois après le retrait de l’ONG (l’étude concerne 158 écoles). Il ne concerne pas les écoles du lot 2 et 3 (qui font l’objet du co-financement Spanish Natcom), mais permet de donner une tendance sur les grandes thématiques notées

Page 68: EVALUATION DU PROGRAMME WASH A L ECOLE AU MALI · 2020-04-29 · EVALUATION DU PROGRAMME WASH A L’ECOLE AU MALI Evaluation commanditée et financée par le Comité Espagnol UNICEF

HYDROCONSEIL

Evaluation du programme WASH à l’école -Spanish Natcom - Rapport d’évaluation Page 68

dans le cadre du concours « Ecoles Propres ». Malheureusement pour les raisons évoquées plus haut, il ne peut pas être comparé avec les notes obtenues à la fin du processus.

Figure 20 : Scoring des écoles (moyenne par cercles) lors du concours écoles propres – 6 mois après le retrait de l’ONG

Le graphique montre que 6 mois après le retrait des ONG, et à la reprise de l’hivernage les principales acti-vités liées à l’EHA dans les écoles sont mises en œuvre par les écoles. Les critères les plus difficiles à main-tenir sont :

1. la présence d’eau potable et les bonnes pratiques en termes de conservation de l’eau (en moyenne 74% des écoles),

2. le maintien de la propreté des latrines (en moyenne 79% des écoles) 3. le maintien des routines de lavages de mains aux moments clefs (en moyenne 83% des écoles)

Notons que les écoles suivies par Alphalog dans le cercle de Kati présentent des faiblesses plus prononcées que les autres écoles, notamment en matière de lavage des mains (52%) et d’accès à l’eau potable (40%).

Formation des enseignants et des élèves-enseignants Le processus de formation des enseignants est également un facteur de durabilité pour la poursuite de la mise en œuvre des bonnes pratiques EHA dans les écoles. Dans chaque école, 3 enseignants, dont le direc-teurs sont formés (formation initiale), mais les autres enseignants acquièrent également des connaissances théoriques et sur les méthodologies d’animation (sketch, etc.) qu’ils peuvent reproduire auprès des en-fants, grâce aux outils adaptés, illustrés et plastifiés qui leur sont donnés.

Il faut toutefois noter un bémol concernant la formation : elle concerne 3 enseignants par école (dont le directeur) et suppose une restitution à l’ensemble des enseignants. Or, nous avons constaté, lors des visites de site, que bon nombre d’enseignants étaient réticents à mettre en place cette démarche. A cela s’ajoute les mutations aléatoires des enseignants, qu’ils soient ou non formés au Wash à l’école. Ainsi, le nombre limité d’enseignants formés sur l’ensemble du territoire ne permet pas de garantir un nombre suffisant d’enseignants formés par école. L’UNICEF a décidé de révisé cette approche à partir de la rentrée d’octobre 2014 et de consacré un budget plus important pour la formation de tous les enseignants qui le souhaitent dans les écoles concernées par le nouveau financement du Spanish NatCom.

0%

10%

20%

30%

40%

50%

60%

70%

80%

90%

100%

Lavage des mains

Eau potable et hygiène de l’eau

Latrines

Propreté de l’écoleClub d’hygiène

Enseignants

CGS

Cercle de Kati (ALPHALOG)

Cercle de Kati (IMADEL)

Cercle de Mopti (Action Mopti)

Cercle de Bandiagara (Action Mopti)

Cercle de Bankass (Action Mopti)

Cercle de Koro (Action Mopti)

CAP de Sevaré (ODI-SAHEL)

CAP de Djenné Sofana (GRAT)

Page 69: EVALUATION DU PROGRAMME WASH A L ECOLE AU MALI · 2020-04-29 · EVALUATION DU PROGRAMME WASH A L’ECOLE AU MALI Evaluation commanditée et financée par le Comité Espagnol UNICEF

HYDROCONSEIL

Evaluation du programme WASH à l’école -Spanish Natcom - Rapport d’évaluation Page 69

A court terme, il s’agit donc d’un risque pour les écoles propres de s’essouffler avant la stabilisation durable des changements de comportement dans les établissements, mais représente, à terme, une opportunité forte de reproduction, même si à plus faible échelle, de bonnes pratiques dans des écoles hors programme. Notons que cela est surtout vrai pour la mutation des directeurs, et plus particulièrement dans le cas des directeurs pro-actifs et c’est pourquoi l’UNICEF a demandé au Ministère de l’Education d’inscrire une clause de limitation des mutations dans le mémorandum d’entente.

L’introduction de la formation EHA dans les cursus des élèves-maitres en cours de formalisation contribue à la durabilité du programme et à un ancrage fort, à moyen et long terme dans les communautés scolaires, et constitue également un tremplin essentiel vers le passage à l’échelle du programme (D.5.2.a)). Le renfor-cement de la formation de base permettra de lisser la situation en Gap de connaissance constatée ci-dessus lors des mutations.

Auto-mobilisation et inclusion de la communauté Le programme offrait dans ses 3 premières phases de nombreux intrants aux écoles : ouvrages, supports didactiques ou petits matériel d’entretien. Actuellement, les orientations du programme s’orientent plus vers l’auto-mobilisation. En effet, en théorie, plus une école est appuyée financièrement et matériellement, plus elle se positionne en position d’attentisme et de passivité. Or, l’objectif du programme est tout autre. Il s’agit de mettre en place, autour de la construction de gros ouvrages (dont le coût de construction dé-passe bien généralement les ressources mobilisables par la mairie et la commune), différents mécanismes permettant à l’école, à la commune et aux CGS de perpétuer le programme années après année.

Ainsi plusieurs initiatives prises pour renforcer la durabilité sur ces aspects spécifiques semblent perti-nentes :

Sélection des sites bénéficiaires : l’école, conjointement avec la commune et la communauté, doi-vent exprimer leur intérêt d’améliorer les conditions de scolarisation des enfants et des conditions EHA de la communauté.

Mobilisation des « leaders naturels » selon l’approche ATPC, aussi bien parmi la communauté que parmi les élèves, pour devenir membres respectivement du comité villageois d’assainissement ou du club d’hygiène scolaire, et ainsi continuer à porter la voix de l’hygiène en l’absence de l’animateur ou après le retrait de l’ONG

Autoconstitution des Kits d’entretien (petit matériel) : il revient à la commune et à l’école de fa-briquer et/ou s’approvisionner en matériel d’entretien. Cela passe par la mobilisation des fonds communaux mais peut également passer par la mobilisation du savoir-faire de la communauté : au-to-fabrication de poubelles, tippy-taps fabriqués avec des bidons en plastique, savon local fabriqué par les associations de femmes formées aux méthodes traditionnelles etc. Cet investissement né-cessaire pour adhérer au programme démontre l’engagement de tous dans la dynamique du chan-gement.

Mise en place de MJT et d’activités génératrices de revenu (AGR) : le guide des activités encadrant l’intermédiation sociale, au travers de l’activité 21 du guide 2013-14, prévoit la mise en place d’activités génératrice de revenu permettant de mobiliser les écoles, et plus particulièrement les CGS, à mobiliser des financements pour répondre aux besoins en intrants de l’école. Plusieurs op-tions s’offrent aux communautés sur le type d’activités à réaliser. Néanmoins, il est important que cette dernière s’appuie sur des structures/comités préexistants et reconnus. Ainsi, nous pouvons citez le CGS de l’école de Kolokani qui a développé une activité de location de chaise, mais aussi les activités mis en œuvre par l’ONG ACOD dans les CAP de Kadiolo, Bougouni et Yanfolila dans la ré-gion de Sikasso : un appui au micro-crédit de groupement de femmes qui s’engagent de leur coté à « A faire des contributions directes à la prise en charge des dépenses WASH à l’école afin de soute-nir les efforts du CGS selon les modalités prévues dans son règlement intérieur ou négociées avec ce dernier ».

Page 70: EVALUATION DU PROGRAMME WASH A L ECOLE AU MALI · 2020-04-29 · EVALUATION DU PROGRAMME WASH A L’ECOLE AU MALI Evaluation commanditée et financée par le Comité Espagnol UNICEF

HYDROCONSEIL

Evaluation du programme WASH à l’école -Spanish Natcom - Rapport d’évaluation Page 70

Professionnalisation des entreprises de travaux et supervision technique des ouvrages : les formations réalisées auprès des entreprises de construction et des BE de contrôle permet au programme de réduire les risques de certaines mauvaises pratiques professionnelles, sans pour autant les éliminer. En effet, le fait d’informer très clairement les ONG et les entreprises des procédures compensatoires en cas de non-respect des contrats permet notamment à l’UNICEF d’utiliser, si nécessaire, la mise en demeure, et donc d’avancer dans le processus en réattribuant les marchés à d’autres entreprises. Petit à petit, les ONG et les entre-prises apprennent donc les méthodes de travail d’un bailleur exigeant et progresse vers une meilleure pro-fessionnalisation.

Temps d’intervention des ONG d’intermédiation sociales : l’ONG d’intermédiation sociale intervient sur une durée minimale de 14 mois (Octobre N+1 – Novembre N+2). Ce temps d’intervention guidé par les con-trats de financement avec les bailleurs, est long par rapport à d’autres programmes Wash, mais plutôt court par rapport aux temps d’intervention des autres partenaires Dubai-Cares. Couplés à une forte intensi-té d’activités, cela est bénéfique et permet l’encadrement des écoles lors de la rentrée scolaire suivante. Un temps plus long d’intervention avec un échelonnement des activités dans le temps permettrait d’obtenir de meilleurs résultats en termes de durabilité.

Le programme a mis en place des stratégies, mécanismes, outils auprès des bénéficiaires et des partenaires pour assurer une du-rabilité maximale des résultats, et ce dès le démarrage des acti-vités : l’ancrage du programme dans les écoles, dans les cycles de formation des enseignants ainsi que la professionnalisation des entreprises et des ONG sont de bons exemples. Un temps plus long d’implémentation renforcerait néanmoins l’accompagnement des écoles dans la pérennité des actions et la mise en place de routine de gestion

b) De quelles manières le programme pourrait-il avoir de meilleures chances de durabilité ?

Sur la demande de l’UNICEF Mali, une brève analyse croisée est réalisée sur les facteurs pouvant impacter la durabilité. Lesdits facteurs sont issus du travail réalisé par Hydroconseil en RDC sur le programme Village et Ecole assainies (2013 - 2014). Ces facteurs sont confrontés aux analyses de la présente évaluation et des résultats de l’étude d’impact réalisée en parallèle par l’Université d’Emory – Atlanta.

La synthèse de ce travail est présentée dans le Tableau 5 ci-dessous.

Page 71: EVALUATION DU PROGRAMME WASH A L ECOLE AU MALI · 2020-04-29 · EVALUATION DU PROGRAMME WASH A L’ECOLE AU MALI Evaluation commanditée et financée par le Comité Espagnol UNICEF

Tableau 5 : Analyse des facteurs de durabilité RDC/Mali

Thèmes Hypothèse

N° Hypothèses principales à tester Sous-hypothèses

Note (de 0 à 2)

Justification et Commentaire

Appui ONG et entreprises H1 La probabilité que l’école maintienne son statut est étroitement liée à la qualité de l’appui externe de l’ONG

SH1.1 : L’ONG a réalisé les activités principales d’appui prévues par le programme

2 Les dispositions sont prises, les entretiens réali-sés (11) sont positifs mais l'échantillon est trop restreint pour généraliser

SH1.2 : La qualité de l’appui des entreprises pour la cons-truction d’ouvrages pérennes favorise le maintien du statut

2

Les dispositions sont prises, les observations réalisées (11) sont positives mais l'échantillon est trop restreint pour généraliser Cf analyses thématiques. D.2.2

Dynamisme de la direction de l’école

H2 Une direction de l’école dynamique contribue à maintenir le statut assaini de l’école

1

La durabilité sera assurée à minima dans cer-taines écoles. Mais cela ne dépend pas du pro-gramme, il s'agit d'une histoire de personne et de motivation. La modification du processus de sélection devrait permettre de limiter le risque Cf analyses thématiques. D.2.2

Dynamisme du Club d'Hy-giène de l’école

H3

Une Club d’élèves dynamiques et impliqués dans le programme contri-bue à maintenir le statut assaini de l’école

-

Non noté car les clubs d'Hygiène n'avaient pas encore été formés lors de nos visites - Entretien avec les Club d'Hygiène de l'année scolaire passée

Dynamisme du CGS de l’école

H4 Un Comité des Parents dynamique contribue à maintenir le statut assaini de l’école

SH4 .1 : Présence d’un CGS 2 Toutes les écoles visitées avez un CGS Données Emory : + de 35% des écoles ont un CGS qui se réuni après 24 mois de programme

SH4.2 : Dynamisme du CGS -

Impossible à évaluer sur 1 visite. Peu de critique des directeurs. Le dynamisme dépend vraiment des personnes qui composent le CGS Cf analyses thématiques. D.2.2

Présence d’un village ATPC H5

La présence de l’école dans un vil-lage assaini contribue à maintenir son statut assaini grâce à leur inte-raction (influence positive du village assaini sur le statut de l’école)

- Non noté car non évaluer dans le cadre de cette évaluation

Appui des CAP H6

L’implication effective CAP dans le programme et dans l’appui à l’école (conformément aux rôles et activités lui incombant et définis par le pro-gramme) contribue au maintien du statut

1 Peu être amélioré avec l'intitutionnalisation du programme

Page 72: EVALUATION DU PROGRAMME WASH A L ECOLE AU MALI · 2020-04-29 · EVALUATION DU PROGRAMME WASH A L’ECOLE AU MALI Evaluation commanditée et financée par le Comité Espagnol UNICEF

HYDROCONSEIL

Evaluation du programme WASH à l’école -Spanish Natcom - Rapport d’évaluation Page 72

Thèmes Hypothèse

N° Hypothèses principales à tester Sous-hypothèses

Note (de 0 à 2)

Justification et Commentaire

Ouvrages H8

Des ouvrages réalisés dans le res-pect des règles de l’art ET un entretien régulier des ou-vrages ET la proximité d’un point d’eau qui favorise le lavage des mains et l’entretien des latrines contribuent au maintien du statut

SH8.1 : Les ouvrages sont réalisés dans les règles de l’art

-

Non noté. Pas d'évaluation technique réalisé dans le cadre des observations terrain. Pas d'observation de malfaçons. Garantie du BET de contrôle. Echantillon trop restreint

SH8.2 : un entretien régulier des ouvrages contribue au maintien du statut

-

Non visible car pas de routine de nettoyage à la date de la visite dans de nombreuses écoles + programme très récent donc peu de problème majeure. La qualité des infrastructures limite le risque

SH8.3 : la proximité d’un point d’eau qui favorise le lavage des mains et l’entretien des latrines contribue au maintien du statut

2

Toutes les écoles visitées dispose d'un point d'eau dans l'enceinte de l'école. C'est un gage de durabilité des bonnes pratiques. Confirmé par les entretiens directeurs + enseignants. Améliore également les conditions de scolarisa-tion des enfants (eau de boisson)

Appropriation H9

Des directeurs, enseignants, parents et élèves qui :- s’approprient le programme - et en comprennent les bénéfices (impact sur leur santé, sanitaire) contribuent au maintien du statut

SH9.1 : Des directeurs, en-seignants, parents et élèves qui s’approprient le pro-gramme contribuent au main-tien du statut

1 Mitigé du fait des formations partielles des en-seignants qui "boudent le programme"

SH9.2 : Des directeurs, en-seignants, parents et élèves qui comprennent les béné-fices du programme (impact sur leur santé, sanitaire) contribuent au maintien du statut

1 Les séances de sensibilisation communes Ecole + Communauté limite le risque mais ces séances ne sont pas suivies dans le temps

Conflit H10

Des conflits au sein de la commu-nauté, ou externe à la communauté (mais dans son proche environne-ment) sont défavorables au maintien du statut

- Non noté - Pas de données

Durée post concours Ecole Propre

H11 Les bonnes pratiques se perdent après une certaine période (depuis la date du concours)

0 Aucun dispositif de suivi post-programme au-delà de la visite des services technique 6 à 12 après le retrait de l’ONG d’intermédiation sociale

Page 73: EVALUATION DU PROGRAMME WASH A L ECOLE AU MALI · 2020-04-29 · EVALUATION DU PROGRAMME WASH A L’ECOLE AU MALI Evaluation commanditée et financée par le Comité Espagnol UNICEF

HYDROCONSEIL

Evaluation du programme WASH à l’école -Spanish Natcom - Rapport d’évaluation Page 73

Thèmes Hypothèse

N° Hypothèses principales à tester Sous-hypothèses

Note (de 0 à 2)

Justification et Commentaire

Durée du processus Ecole Propre

H12 Une durée de processus longue ren-force le maintien du statut en post certification

1

Pourrait être améliorée en fonction des conven-tions de financement. La durée actuelle de l'ap-pui de l'intermédiation sociale est le minimal acceptable

Aspect géographique H13 Une distance importante séparant le bureau CAP de l’école est un facteur contribuant au non maintien du statut

-

Non considéré car les CAP sont impliqués à minima dans le suivi du programme et non im-pliqués en post-programme (sauf la visite 6 à 12 mois après le retrait de l’ONG)

Comme indiqué au point D.5.1, de nombreux aspects ont été traités afin de s’assurer, dès les premières années du programme, de la durabilité des actions entre-prises. Néanmoins, parler de durabilité nécessite de distinguer la durabilité des actions entreprises et la durabilité de la dynamique « Wash à l’école » impulsée dans le pays.

Trois facteurs contribueraient selon l’équipe d’évaluation à la durabilité des actions entreprises, à savoir : 1. Mutation des enseignants, stabilisation des actions entreprises dans l’école, 2. Implication de la mairie et décentralisation, 3. Suivi post-programme : utilisation et entretien des ouvrages par les communautés scolaires

Trois facteurs contribueraient, selon l’équipe d’évaluation, à la durabilité de la dynamique Wash à l’école, à savoir : 4. Quid de la pérennité des financements en faveur du Wash à l’école ? 5. Implications des ministères 6. couplage stratégies Education/Wash à l’école

Ces facteurs sont explicités ci-dessous.

Page 74: EVALUATION DU PROGRAMME WASH A L ECOLE AU MALI · 2020-04-29 · EVALUATION DU PROGRAMME WASH A L’ECOLE AU MALI Evaluation commanditée et financée par le Comité Espagnol UNICEF

Amélioration de la durabilité des actions entreprises – Constat 1 à 3 La durabilité des actions entreprises a progressivement été améliorée au fil des années. Quelques craintes subsistent, notamment en lien avec le « contexte pays » dans lequel évolue le programme. Elles ne sont donc ne sont pas nécessairement du ressort de l’UNICEF ou de ses partenaires, même si des actions de plaidoyer sont entreprises en ce sens.

Mutation des enseignants, stabilisation des actions entreprises dans l’école : Comme énoncé plus haut, l’une des craintes majeures des ONG d’intermédiation sociale intervenant sur le terrain dans les écoles consiste en la non-maitrise des mutations des enseignants à chaque année scolaire. Dans le cadre de cette évaluation, il n’était pas possible d’analyser la proportion d’enseignants mutés hors des écoles en programme, mais attirer l’attention des CAP et des AE en ce sens est important. La mutation des enseignants est évaluée chaque année par les directeurs des écoles (fiche de ren-trée) qui envoient par la suite ces données aux CAP. Malheureusement, ces données ne sont pas analysées et aucune action n’est entreprise par les CAP ou les SACPN pour appuyer une école qui verrait son effectif d’enseignants formés au WASH à l’école diminuer drastiquement. Seule l’implication d’un directeur ne suffit pas et, dans ce cadre, l’essoufflement du pro-gramme/relâchement des communautés scolaires est à craindre.

Implication de la mairie et décentralisation : Le processus de décentralisation dans lequel s’est en-gagé le Mali touche également le secteur de l’éducation. Les mairies se sont vu octroyer de nou-velles responsabilités et de nouvelles charges financières sans avoir observé une augmentation substantielle de ses moyens. Le programme fait en sorte que les Maires soient sensibilisés sur l’importance du suivi de la pérennité du programme (rencontre avec le CGS, visite de site et rappel à l’ordre des directeurs si nécessaire, contribution financière au renouvellement des intrants Wash, etc.). Si cela est un succès dans quelques communes (Cf. D.4), dans la plupart des cas, les mairies sont dépassées et n’arrivent pas à faire face aux questions de la scolarisation des enfants de la commune. Leur demander de veiller au maintien d’un niveau d’équipement et de bonnes pratiques EHA paraît donc assez difficile, mais nécessaire dans la configuration administrative actuelle du pays.

Suivi post-programme : utilisation et entretien des ouvrages par les communautés scolaires. Le recul sur l’utilisation et l’entretien des ouvrages (points d’eau, latrine, lave-main) n’est pas encore possible au regard de la jeunesse du programme. Dans d’autres programme WASH (ex : RDC), il a été constaté que la dynamique EHA s’essoufflait d’elle-même sans suivi de la part de la hiérarchie scolaire (inspection, CAP, etc.). Or actuellement, au Mali, aucune action dans ce sens n’a été prévue dans le cadre du programme Dubai Cares et plus généralement dans le cadre du programme WASH à l’école.

Amélioration de la pérennité/durabilité des actions futures - Constats 4 à 6 Le dernier constat amène tout naturellement à parler des actions permettant de garantir la durabilité des actions futures.

Quid de la pérennité des financements en faveur du Wash à l’école ? Après discussion avec l’équipe de l’UNICEF, il semblerait que malgré une reprise timide de l’implication financière des bailleurs internationaux au Mali, le financement des activités Wash à l’école n’est pas garanti. Le gouvernement ne consacre qu’une partie infime de son budget éducation à des activités de WASH à l’école. D’autre part, les capacités financières du gouvernement ne permettraient pas de mettre en œuvre un tel programme ou d’autres activités plus modeste mais utiles sans un appui financier et/ou technique de la part des bailleurs internationaux dont l’UNICEF notamment.

Implications des ministères : De fait, au regard du contexte pays, l’implication des ministères a été limitée dans le cadre des phases 1, 2 et 3. Bien qu’ils aient été conviés à toutes les discussions et au suivi des activités clés sur site, ce ne sont pas eux qui sont porteurs et gestionnaires du programme mais bien l’UNICEF et ses partenaires. La transition d’un portage de programme par des structures internationales (budget conséquent avec le recrutement d’une équipe dédiée) et un portage à la mise en œuvre d’un véritable Programme National piloté et suivi par les autorités est un véritable défi à relever tant en termes de structuration institutionnelle, de renforcement de capacités mais

Page 75: EVALUATION DU PROGRAMME WASH A L ECOLE AU MALI · 2020-04-29 · EVALUATION DU PROGRAMME WASH A L’ECOLE AU MALI Evaluation commanditée et financée par le Comité Espagnol UNICEF

HYDROCONSEIL

Evaluation du programme WASH à l’école -Spanish Natcom - Rapport d’évaluation Page 75

aussi en termes plus opérationnel (temps de l’action, maintien des procédures garantissant la qua-lité des interventions, conflits d’activités, etc.)

Coupler stratégie Education/Wash à l’école : Dans différents programme Wash à l’école, la ques-tion est de savoir s’il est nécessaire ou non de coupler les interventions EHA avec les interventions plus structurelles sur les écoles entreprises par la section Education (construction/réhabilitation). En approfondissant la réflexion, la question est liée à la cohérence des interventions : l’accès aux toilettes, tout comme la présence de cantine scolaire, sont des facteurs positifs impactant sur la fréquentation des établissements scolaires, notamment chez les filles. Néanmoins, des bâtiments décents et un enseignement de qualité sont les premiers garants de la fréquentation d’une école. Ces paquets d’intervention ne peuvent pas être directement mis en œuvre par le programme (car trop ambitieux) mais pourraient être appuyés/coordonnés au niveau de l’UNICEF (idéalement des CAP ou des Cercles) ou bien pourraient être appuyé par la mise en relation des CGS avec des orga-nismes de micro-crédit. Cela permettrait aux écoles d’augmenter la qualité de leurs infrastruc-tures/services tout en améliorant la qualité sanitaire

Malgré de gros efforts fournis pour garantir la durabilité du pro-gramme plusieurs facteurs contraignant persistent. Ils sont à la fois endogènes au programme tel que l’absence d’un suivi ter-rain post programme ou exogène à savoir la mutation des en-seignants, ou bien encore le processus de décentralisation en cours au Mali

D.5.2. Mise à l'échelle : La conception du programme et ses modalités de mise en œuvre per-mettent-ils de maximiser les chances de mise à l'échelle ?

La mise à l’échelle d’un programme est complexe, notamment si ce dernier n’est pas porté haut et fort par un Ministère de Tutelle qui pourrait obliger l’ensemble des partenaires du secteur à s’aligner sur des direc-tives nationales soft et hard.

a) Les stratégies, mécanismes, outils mis en place au niveau des bénéficiaires comme des partenaires d'intervention sont-ils à même d'être mis à l'échelle compte tenu du contexte du pays?

Même si le programme ne peut pas encore s’appuyer sur une instance ministérielle forte au niveau natio-nal, les gestionnaires de programme Dubai Cares ont amorcé une synergie des actions et des financements qui contribuent au passage à l’échelle du Wash à l’école : en 4 ans ce sont plus de 1 625 écoles qui obser-vent de meilleures conditions de scolarisation des enfants. L’UNICEF a conduit certaines activités de plai-doyer auprès des bailleurs présents au Mali (Union Européenne, Banque Mondiale, autres bailleurs du sec-teur de WASH et de la Santé participants aux cadres de concertation thématiques), surtout après le retour des bailleurs au Mali. De même, lorsque le programme organise des formations structurantes, des invita-tions sont lancées aux 8 ou 9 ONG avec lesquelles l'UNICEF ne travaille pas (ACF, InterVida, World Vision, IRC, Solidarités International etc.), ce qui permet le partage d’expérience et d’uniformiser les démarches.

Au niveau local, cette synergie des interventions est progressivement mise en place par les CAP et les AE (exemple de Koulikoro). En effet, ces dernières assurent le suivi/l’identification de l’ensemble des ONG lo-cales ou internationales n’intervenant pas sous la bannière « Wash à l’école/UNICEF ». Une fois identifiées, il leur ait demandé dans certains cas d’aligner leur méthodologie de travail sur celle développée par l’UNICEF et les partenaires Dubai Cares.

Le programme est ouvert à tout type de collaboration. La syner-gie des actions entre les partenaires / Bailleurs ont permis d’atteindre 1 626 écoles en 4 ans, ce qui est considérable et très positif

Page 76: EVALUATION DU PROGRAMME WASH A L ECOLE AU MALI · 2020-04-29 · EVALUATION DU PROGRAMME WASH A L’ECOLE AU MALI Evaluation commanditée et financée par le Comité Espagnol UNICEF

HYDROCONSEIL

Evaluation du programme WASH à l’école -Spanish Natcom - Rapport d’évaluation Page 76

b) De quelles manières le programme pourrait-il avoir de meilleures chances de généralisation ?

Cette vision plutôt optimiste doit être contrebalancée par le fait que la plupart des grosses ONG au Mali sont saturées en termes de charge de travail acceptable. Bien que les ONG locales se professionnalisent progressivement, elles ont également une charge de travail non négligeable. Les surcharger (sans suivi rap-proché) afin de pouvoir multiplier le nombre de sites touchés reviendrait à mettre en danger la qualité de leur travail et de leurs capacités de gestion de programme. Afin de palier cette situation, l’UNICEF a appuyé le REHA (réseau des ONG EHA en milieu scolaire) pour assurer sa montée en puissance et lui permettre à termes de mobiliser des financements et de leur donner les outils méthodologiques (formation des forma-teurs en septembre 2014 par exemple) afin de former progressivement les ONG dans la mise en place du paquet d’activités EHA dans les écoles

Afin d’améliorer ses chances de généralisation, le programme ne peut pas se contenter de toucher de nou-velles régions car presque toutes sont déjà concernées par les interventions à l’école, même celles sujet-tent à l’instabilité. Il s’agira donc de réfléchir aux possibilités d’extension au sein d’une même commune ou d’un cercle, tout en veillant à ce que l’intérêt des écoles soit réel.

Comme indiqué au point D.5.2.a), le programme Dubai Cares a su mettre en place certains éléments pour faire du paquet d’intervention Hard + Soft un outil incontournable et apprécié par l’ensemble des acteurs du secteurs, que cela soit les ONG de mise en œuvre (internationale ou locale) ou bien par les services techniques (ex du CAP de Koulikoro). Cela est un véritable atout pour la généralisation du Wash à l’école car cela signifie que les écoles non appuyées par Dubai Cares, mais remise aux standards (Cf.75D.5.2.a)) Hard pourraient uniquement bénéficier d’une remise à niveau Soft (à termes par les CAP) pour ensuite être intégrées à la « Base de donnée » Ecole propre.

Le suivi renforcé des enseignants mutés, pourrait également être un atout non négligeable pour la générali-sation du programme. En effet, si un suivi assidu est fait par les CAP, il serait possible de voir comment ap-proché les écoles dans lesquelles un nouvel enseignants « formé Wash à l’école vient d’être muté ». Cette personne pourrait devenir une personne ressource et faciliter le processus d’amélioration des conditions d’hygiène. Cela serait notamment renforcé par la formation des élèves-maitres qui est elle aussi un facteur de réussite pour la généralisation du programme.

Le passage à l’échelle du programme est souhaitable mais il doit être fait dans un cadre institutionnel ancré politiquement au ni-veau National. Par ailleurs, un risque de perte de qualité peut subvenir avec la surcharge en travail des ONG et des entreprises de construction dont l’organisation interne et les capacités ma-nagériales restent fragiles. Le passage à l’échelle doit donc se faire progressivement et doit impérativement être associé à un fort renforcement de capacité des services techniques décon-centrés

Page 77: EVALUATION DU PROGRAMME WASH A L ECOLE AU MALI · 2020-04-29 · EVALUATION DU PROGRAMME WASH A L’ECOLE AU MALI Evaluation commanditée et financée par le Comité Espagnol UNICEF

HYDROCONSEIL

Evaluation du programme WASH à l’école -Spanish Natcom - Rapport d’évaluation Page 77

E. Principales recommandations En prenant en compte les objectifs principaux et les résultats attendus du programme, le contexte pays ain-si que la volonté des partenaires de renforcer l’institutionnalisation du programme WASH à l’école, l'équipe d'évaluation préconise une série de recommandations, formulées de manière transversale sur des thèmes couverts par l'évaluation.

E.1.1. Procédures de mise en œuvre du programme

a) Cadre institutionnel et coordination sectorielle

Mettre en place un cadre formel de planification et de coordination au niveau national et régional avec les acteurs clés du Wash à l’école (CAP/Mairie/DRACPN/DRH) afin de tendre vers une prise de responsabilité plus importante des acteurs institutionnels et un rôle minoré de l’UNICEF ;

Élaborer un plan prévisionnel de transfert de compétences aux institutions nationales, tout en maintenant un suivi-accompagnement important de la part de l’UNICEF ;

Renforcer la synergie entre les programmes Wash et éducation de l'UNICEF pour identifier les zones prioritaires de planification, favoriser la complémentarité des interventions, notamment en répondant aux besoins exprimés par certains directeurs pour la construction d’infrastructure hors paquet Wash ;

Poursuivre la démarche de création d’un pool-fund multi-bailleurs permettant la mutualisation des fonds et leur décaissement selon une même procédure, la mutualisation des gestionnaires de pro-gramme et les mêmes aspirations techniques/sociales en matière de mise en œuvre du pro-gramme.

b) Renforcement des capacités et transfert de compétences

Poursuivre le renforcement de capacités (learning-by-doing et formation des formateurs) des ONG d’intermédiation sociale qui est très positif et permet d’augmenter le nombre de partenaires fiables pour la mise en œuvre du programme ;

Accentuer le transfert de compétence avec les CAP qui sont au plus proche du terrain : ce sont eux qui pourront, à terme, prendre le relai et suivre le programme en lieu et place d’un organisme in-ternational ;

Permettre aux CAP de devenir formateurs des enseignants ;

c) Mise en place d’un suivi post - programme

Harmoniser les notations obtenues par les écoles et les inscrire dans une base de données natio-nale permettant de faire un benchmark des écoles critère par critère. Cela permettrait également de documenter les difficultés rencontrées par l’ONG dans la mise en œuvre de tel ou tel activité et/ou de documenter la performance de l’ONG,

Institutionnaliser un concours école propre chaque année avec l’ensemble des écoles de 1er cycle, via la mobilisation des inspecteurs des CAP. Plusieurs options peuvent être testées :

o Concours couplé aux tournées de suivi des examens ou de la rentrée réalisés chaque an-née par les CAP. L’annexe G.5propose la grille utilisée par les inspecteurs (fiche C8) et la grille modifiée proposée par Hydroconseil en RDC. Ce travail pourrait aisément être répli-qué au Mali moyennant une forte institutionnalisation du programme au sein du Ministère de l’éducation qui pourrait ensuite instruire les CAP (de manière hiérarchique) pour réaliser ce travail et également. Cela demanderait également de travailler sur les fiches de contrôle pédagogique pour y intégrer les quelques éléments clefs nécessaires à la pérennisation des actions EHA dans les écoles. Sans pour autant utiliser un autre formulaire

o Concours indépendant, pose alors la question du financement pérenne dans le temps (budget national ?), mais permet l’utilisation de la fiche « Ecoles Propres » et la continuité de la notation.

Page 78: EVALUATION DU PROGRAMME WASH A L ECOLE AU MALI · 2020-04-29 · EVALUATION DU PROGRAMME WASH A L’ECOLE AU MALI Evaluation commanditée et financée par le Comité Espagnol UNICEF

HYDROCONSEIL

Evaluation du programme WASH à l’école -Spanish Natcom - Rapport d’évaluation Page 78

Former les CAP à la réalisation du concours école propre : vision commune de la notation à adopter et du reporting à effectuer.

Doter les CAP des outils pour la réalisation de ce travail : il est recommandé l’utilisation d’un PDA qui permettrait la collecte des informations facile et fiable, la prise de photo, d’un point et des ho-raires de début/fin de travail (=contrôle de l’agent en charge), puis l’intégration des données dans une base de données.

Créer un système d’alerte sur la base de données créée (seuil minimum à respecter par une école) et déclencher un système de visites approfondies, recyclage des messages, recherche des causes qui permettent de vérifier la durabilité des bonnes pratiques dans une école.

Créer un système de suivi des affectations/mutations des enseignants formé au Wash via les fiches de rentrées (collectées par le CAP).

d) Evaluation interne de l’impact et de la durabilité

Exploiter l’ensemble des notations concours école propre dès le 1er round de notation.

Intégrer un système d'alerte (suivi et délais de réalisation de chaque étape) intégrant le suivi durant le programme et le suivi-post programme pour identifier au fur des années :

o Le principal facteur impactant sur la durabilité des interventions ; o Le moment critique (année 1, année 2, etc.) à partir duquel la majorité des écoles n’arrive

plus à maintenir de bonne condition d’hygiène et d’accès à l’eau ;

E.1.2. Réponses sociales et techniques proposées par le programme

a) Sélection des sites

Limiter l’éparpillement des sites lors de la sélection pour maximiser l’impact sur une zone tout en veillant à ne pas saturer les services techniques, qui ne disposeront pas forcement des ressources humaines suffisantes pour accompagner le projet d’autant plus si le programme renforce leur par-ticipation dans le suivi/accompagnement du processus ;

Coupler les sélections ATPC communauté et Wash in school

b) Redevabilité et caractère inclusif du programme

Mettre en place un mécanisme harmonisé d'estimation des besoins (diagnostic rapide) réalisé par l’école elle-même qui prendrait en compte d’autres composantes que les infrastructures Hydro-sanitaires seules ;

Valoriser la contribution des bénéficiaires à la réalisation et à l'entretien des ouvrages ;

Capitaliser avec les bénéficiaires directs du programme sur les bonnes pratiques et les éléments du programme à améliorer.

c) Qualité, adéquation technique et pérennité des ouvrages

Conserver un suivi permanent des entreprises de construction par des BET de contrôle ayant fait leurs preuves.

Détruire les latrines déclarées irrécupérables avant toute construction de nouvelles latrines afin que ces dernières ne soient plus utilisées par les enfants.

Mesurer l’utilisation des lave-mains devant les latrines : impossible à faire dans le temps imparti de l’évaluation mais la mise en fonctionnement (remplissage d’eau, mise à disposition de savon) et l’utilisation des lave-mains placés devant les latrines semblent faibles contrairement à l’utilisation des lave-mains placés devant les salles de classes. Ce constat doit être vérifié. Par ailleurs, les lave-mains placés devant les salles sont plus facilement surveillés par les enseignants.

Page 79: EVALUATION DU PROGRAMME WASH A L ECOLE AU MALI · 2020-04-29 · EVALUATION DU PROGRAMME WASH A L’ECOLE AU MALI Evaluation commanditée et financée par le Comité Espagnol UNICEF

HYDROCONSEIL

Evaluation du programme WASH à l’école -Spanish Natcom - Rapport d’évaluation Page 79

d) Adaptation du temps de mise en œuvre du programme

Etendre autant que possible le temps de mise en œuvre du programme (concerne uniquement les ONG d’intermédiation sociale) sur plusieurs années, sans pour autant augmenter le volume des ac-tivités à réaliser ;

Adapter le volume des activités pour ne pas alourdir les coûts d’intervention par site.

Mettre en place un paquet d’activité de base essentielle à la mise en place d’une routine d’hygiène par les directeurs puis prévoir des séances de suivie semestrielle avec l’école (dont une à la rentrée scolaire) afin de les appuyer à mobiliser des financements Wash auprès des CGS, restimuler les en-seignants et le directeurs et appuyer l’école dans le maintien de club d’hygiène actif.

Page 80: EVALUATION DU PROGRAMME WASH A L ECOLE AU MALI · 2020-04-29 · EVALUATION DU PROGRAMME WASH A L’ECOLE AU MALI Evaluation commanditée et financée par le Comité Espagnol UNICEF

F. Bilan de l’évaluation : matrice d’évaluation

Questions principales Indicateurs Questions/Observations/Identifications spéci-

fiques Source et mode de collecte de l'informa-

tion Résultat de l'analyse

A. PERTINENCE : EVALUATION DES PROCEDURES DE MISE EN ŒUVRE DU PROJET

A.1.

Logique d'intervention : La lo-gique d'intervention du pro-grammes WASH à l'école est-elle cohérente?

A.1.1. Le programme s'aligne-t-il sur le Plan Stratégique de Promotion de l'Education à l'Hygiène en Mi-lieu Scolaire ?

- Degré d'alignement aux politiques et stratégies nationales du Ministère de l'Education

- Etude du PSPEHMS

Le programme s’aligne et dépasse les ambitions Nationales en matière d’eau d’hygiène et d’Assainissement en milieu scolaire. Néanmoins, le contexte du pays n’a, pour l’instant, pas permis de mettre le gouvernement au centre de cette démarche.

A.1.2. Le programme, dans sa conception (activités et réalisations), est-il bien approprié et adéquat pour atteindre les objectifs poursuivis

- Analyse de la stratégie d'intervention dans ses différentes composantes

- Etude du cadre logique - Etude de Présentation du programme - Guides d'intervention

Le programme est solidement construit. Le cycle d’intervention sur deux années scolaires est pertinent, tout comme la création d’un processus pas à pas très encadré pour la mise en œuvre des activités Soft et Hard. L’ensemble de ces précautions permettent un encadrement efficace des écoles vers une dynamique durable EHA.

A.1.3. Certaines interventions ont-elles été omises alors qu'elles permettraient d'atteindre plus su-rement les objectifs poursuivis ?

- Identification des actions omises - Analyse de leur potentiel pour l'amélioration du programme

- Etude du document de projet - Etude des rapports narratifs - Revue de la littérature

Les différentes activités Soft ou Hard sont définies dans les guides d’intervention. Toutes les activités nécessaires ont été mises en place pour assurer l’atteinte des 3 objectifs du programme

A.1.4. Certaines interventions ont-elles été ajoutées afin de permettre d'atteindre plus surement les objectifs poursuivis ?

- Identification des actions ajoutées - Analyse de leur potentiel pour l'amélioration du programme - Focus Education Parentale

- Analyse des rapports narratifs - Entretiens avec les sections WASH et Education UNICEF

Le programme est axé sur une démarche ouverte sur la capi-talisation et l’échange d’expérience. Cette orientation donne lieu, chaque année à l’amélioration collégiale des guides d’intervention et des process

A.2.

Bonnes pratiques : Le pro-gramme a-t-il su intégrer les derniers développements et innovations dans le domaine?

A.2.1.

Dans quelle mesure le programme a-t-il su prendre en compte l'expérience d'autres parte-naires au développement et les meilleures pra-tiques d'autres pays au niveau du volet "cons-truction"?

- Revue des différents partenaires intervenant dans le WASH in School - Point succinct de comparaison avec d'autres expériences Wash in school dans d'autres pays

- Etude du rapport Dubai-Cares - Utilisation des expériences du consul-tant - Entretien avec la section WASH UNICEF - Etude de la litérature

La mise en place de standards de construction axés sur la qualité des ouvrages et non sur le coût ; de procédures d’appel d’offres strictes à destination des entreprises de BTP reconnues ; et d’activités de contrôle qualité des ouvrages sont autant de procédures capitalisées sur l’expérience d’autres activités/programme Wash à l’école.

A.2.2.

Dans quelle mesure le programme a-t-il su prendre en compte l'expérience d'autres parte-naires au développement et les meilleures pra-tiques d'autres pays au niveau du volet "inter-médiation sociale"?

- Revue des différents partenaires intervenant dans le WASH in School - Point succinct de comparaison avec d'autres expériences Wash in school dans d'autres pays

- Etude du rapport Dubai-Cares - Utilisation des expériences du consul-tant - Entretien avec la section WASH UNICEF

Sur le volet intermédiation sociale, la standardisation des activités dans les écoles, le couplage du déclenchement Ecole/Village pour le FEDAL, ainsi que l’approche de la sélec-tion par la demande sont autant de mécanismes mis en place à la suite des retours d’expériences dans le domaine du Wash à l’école

A.2.3.

Dans quelle mesure le programme a-t-il su prendre en compte l'expérience d'autres parte-naires au développement et les meilleures pra-tiques d'autres pays au niveau du volet "suivi-évaluation/capitalisation/coordination"?

- Revue des différents partenaires intervenant dans le WASH in School - Point succinct de comparaison avec d'autres expériences Wash in school dans d'autres pays

- Etude du rapport Dubai-Cares - Utilisation des expériences du consul-tant - Entretien avec la section WASH UNICEF

Sur le volet suivi/évaluation/capitalisation, les outils mis en place par l’UNICEF répondent aux besoins actuels du pro-gramme. Cependant, aujourd’hui, ils ne présentent pas un caractère national et ils ne sont pas pilotés par les Minis-tères en charge de l’EHA dans les écoles.

A.2.4. Dans quelle mesure le programme reflète-t-il les derniers développements de la recherche dans le domaine?

- Identification des axes de recherche (théma-tiques) sur lequel se sont penchés l'UNICEF et ses partenaires, et la littérature actuelle sur le WASH à l'école - Analyse des conclusions du pro-gramme sur ces thématiques, des dernières ten-dance dans la littérature, et de leur intégration dans le programme (en cours de phase 1 ou pour la phase 2)

- Etude des documents de capitalisation - Revue de la littérature récente disponible en français et anglais sur le WASH à l'école - Entretien UNICEF

Par la compilation et la lecture de nombreux documents collectés via le site UNICEF ou autres, ainsi que par des mis-sions de capitalisation (ex Nigéria), le programme s’est tenu informé des avancées de la recherche.

A.3.

Sensibilisation aux besoins : Le programme a-t-il pu satisfaire les préoccupations des diffé-rentes catégories de bénéfi-ciaires et partenaires ?

A.3.1.

Le programme répond-il correctement aux be-soins prioritaires et attentes des bénéficiaires (élèves, enseignants, CGS, parents d'élèves, etc.)?

- Analyse des critères de sélection des sites - Equité dans la sélection des sites - Analyse des besoins de la population scolaire dans le secteur WATSAN avant la mise en place du programme

- Etude des documents de projet - Entretien avec la section WASH UNICEF - Entretiens avec les directeurs, les ensei-gnants et les Clubs d'Hygiène

Le programme répond aux besoins des écoles en matière d’EHA. Les directeurs d’écoles et les enseignants sont satis-faits de l’intervention des ONG et des entreprises presta-taires de travaux. Cependant leurs attentes et priorités sont parfois ailleurs : construction de salles supplémentaires et d’une clôture, infrastructures qui ne font pas parties du pac-

Page 81: EVALUATION DU PROGRAMME WASH A L ECOLE AU MALI · 2020-04-29 · EVALUATION DU PROGRAMME WASH A L’ECOLE AU MALI Evaluation commanditée et financée par le Comité Espagnol UNICEF

HYDROCONSEIL

Evaluation du programme WASH à l’école -Spanish Natcom - Rapport d’évaluation Page 81

Questions principales Indicateurs Questions/Observations/Identifications spéci-

fiques Source et mode de collecte de l'informa-

tion Résultat de l'analyse

kage Wash

A.3.2.

Le programme répond-il correctement aux be-soins prioritaires et attentes des partenaires de mise en œuvre (communes, services techniques, ONG, prestataires de travaux, etc.)?

- Quelle implication des gestionnaires du minis-tère de l'Education et des autorités locales dans le choix des sites d'intervention? - Les sites choisis sont-ils ceux qu'ils auraient choisi et pourquoi?

- Analyse des documents de projet - Entretien Ministère de l'éducation Kouli-koro/Mopti - Entretiens avec les ONG et prestataires de travaux

Le programme, dans sa conception, ses outils et l’ensemble des ajustements réalisés répond correctement aux attentes des partenaires de mise en œuvre. De fait de la situation critique de l’accès à l’eau et à l’assainissement dans les écoles au Mali, il répond également au besoin des com-munes et des organismes déconcentrés de l’Etat

A.3.3. Le programme a-t-il donné lieu à une implication suffisante des bénéficiaires et des partenaires ?

- Durant le processus de sélection les bénéfi-ciaires se sont-ils mobilisés autours de la théma-tique EHA - Durant l'exécution des activités, les bénéfi-ciaires et les partenaires de mise en œuvre ont-ils réussi à mettre en place de bonnes relations d'échange permettant une meilleures compré-hension puis appropriation des activités propo-sées - Après la fin des activités (après le concours écoles propres), les bénéficiaires ont-ils repris le suivi de la mise en œuvre du programme dans les écoles? Quel rôle pour les partenaires de mise en œuvre?

- Entretiens avec l'UNICEF - Entretiens avec les partenaires - Entretiens avec les bénéficiaires - Analyse des rapports d'activités - Analyse des PCA, DAO

Le programme a évolué au fur et à mesure pour permettre une meilleure implication des bénéficiaires, et ce malgré quelques faiblesses, notamment dans la prise en compte des besoins et la capitalisation avec les bénéficiaires. Le dynamisme des animateurs et les méthodes participatives avec l’ensemble de l’école et de la communauté garanti l’implication de tous. Après le départ de l’ONG, le constat est plus mitigé

A.3.4. Dans quelle mesure le programme intègre-t-il les besoins des filles et des femmes ?

- Le programme vise à l'amélioration des condi-tion de fréquentation des écoles par les enfants, mais plus particulièrement par les filles : les la-trines sont-elles appropriées?, etc.

- Analyse des documents de projet - En-tretien avec la section WASH UNICEF - Analyse des supports didactiques - Entre-tiens avec la population scolaire fille/enseignantes -Entretiens avec les mères d'élèves

Le programme encourage la prise en compte des filles no-tamment par l’implication de l’Association des Mères d’élèves et des vendeuses d’aliments. Les filles ont une bonne représentation dans les clubs d’hygiène et les gar-çons participent activement au nettoyage des infrastruc-tures (tâches prioritairement affectées aux filles au Mali). La séparation Filles/Garçons pour les latrines est effective, en théorie, mais la pratique par les enfants est plus aléatoire

B. EFFICACITE : EVALUATION DES APPROCHES PRECONISEES PAR LE PROJET

B.1

Qualité et conformité : La mise en œuvre sur le terrain a-t-elle été en ligne avec ce qui été pré-vu ?

B.1.1.

Les principaux critères et standards préalable-ment établis par le programme sont-ils respectés ? Les ouvrages présentent-ils une qualité satisfai-sante (respect des standards de construction, état de fonctionnement, accessibilité, degré de dégradation (usure, vandalisme)) ?

- Quels sont les standards et normes mis en place dans le cadre du programme? - Conformité des activités "constructions" - Conformité des activités "intermédiation so-ciale" - Etat général des infrastructures, niveau de satisfaction des directeurs, pérennité des infras-tructures - Quel est le degré d'intégration entre école/communauté?

- Identification des standards et normes : guides hard et soft - Analyse des guides de construction - Visite de site, discussion Directeur - Discussion UNICEF - Discussion ONG

Les standards ont été clairement fixés et longuement expli-qués aux ONG et aux entreprises intervenant dans les écoles. En cas de non respect, le programme est en mesure de suspendre les activités/rompre un contrat. Au-delà, un contrôle régulier de la conformité des activités/travaux est réalisé par un bureau de contrôle ou par l’UNICEF elle-même. Les observations terrain ont permis de constater que, dans la grande majorité de cas, les standards et instruc-tions de l’UNICEF sont respectés

B.1.2. De quelle manière les activités sont-elles plani-fiées, exécutées et supervisées ?

- A-t-on respecté les chronogrammes et les temps prévus

- Analyse des chronogrammes d'activités - Discussion UNICEF - Revue documentaires (rapports, etc.)

Le programme a cadré dans le temps les interventions des ONG et des entreprises de construction. Un calendrier d’intervention réaliste est transmis à chacun dès la procé-dure de sélection. Le mécanisme de suivi des réalisations est solide et le bon déroulement des activités est favorisé par l’esprit de compétition qui anime les animateurs des ONG pour remporter le concours Ecole Propre.

Page 82: EVALUATION DU PROGRAMME WASH A L ECOLE AU MALI · 2020-04-29 · EVALUATION DU PROGRAMME WASH A L’ECOLE AU MALI Evaluation commanditée et financée par le Comité Espagnol UNICEF

HYDROCONSEIL

Evaluation du programme WASH à l’école -Spanish Natcom - Rapport d’évaluation Page 82

Questions principales Indicateurs Questions/Observations/Identifications spéci-

fiques Source et mode de collecte de l'informa-

tion Résultat de l'analyse

B.1.3. Résultat 1 : L'accès aux équipements WASH dans toutes les écoles appuyées par le Spanish Nat-com est-il amélioré ?

- Nombre de point d'eau construit par rapport aux objectifs - Nombre de latrine construites par rapport aux objectifs; les latrines construites sont-elles adaptées au milieu scolaire, à l'utilisa-tion par les filles? - La quantité d'eau disponible est-elle suffisante et pérenne ? - Existe-il un point d'eau potable dans l'école ? - Existe-t-il une station de lavage des mains (avec Savon ou cendre) dans les écoles, est-elle utilisée ? - Chaque école dispose-t-elle d'un dispositif d'éva-cuation des ordures ? (pas prévu dans le paqueet WASH) - La mis en place d'infrastructures WASH dans l'école a-t-il induit la mise en place d'infras-tructure WASH dans les familles?

- Discussion UNICEF - Revue documen-taires (rapports, etc.) - Analyse des DAO et contrats avec les entreprises - Observa-tions de site - Discussion Directeur - Dis-cussion avec les CGS

L’accès aux équipements Wash dans les écoles est grande-ment amélioré. Toutes les écoles visitées ont un point d’eau fonctionnel et des dispositifs de lavage des mains mobile à disposition. Les nouvelles constructions de latrines permet-tent d’atteindre les ratios visés par le programme en termes d’élèves/latrine (soit 50 élèves/latrine), et ce malgré, les effectifs de certaines écoles et le manque de place dans certaines cours

B.1.4. Résultat 2 : La gestion et le suivi des équipe-ments WASH dans les écoles sont-ils améliorés ?

- Les enseignants ont-ils bien reçu une formation Wash à l'école?; Est-elle adaptées? Quelle utilisa-tion? - Les CGS ont-ils bien reçu une formation Wash à l'école?; Est-elle adaptées? Quelle utilisation? - Les mairies ont-ils bien reçu une formation Wash à l'école?; Est-elle adaptées? Quelle utilisa-tion? - Les clubs d'hygiène sont-ils mis en place dès la rentrée scolaire? - Existe-t-il un budget Wash au sein de l'école. Le budget de l'année dernière a-t-il été fonctionnel (recette/dépenses)? - L'école a-t-elle bien reçu une visite de suivi des services techniques (Education, Hydraulique, Assainissement, Santé) ?

- Entretien avec les enseignants et le di-recteur - Entretien avec les CGS - Entretien avec les mairies et services techniques - Entretien avec les clubs d'Hygiène

Les conditions favorables à une bonne gestion et au suivi des équipements Wash dans les écoles ont été mises en place dans les écoles : les maires ont été sensibilisés et im-pliqués dans le concours Ecole Propre, les CGS ont été ren-forcés dans leur fonction et les clubs d’hygiène ont été acti-vés. Les résultats qualitatifs de l’Université d’Emory - Atlanta montre un certain essoufflement des indicateurs quelques mois après le retrait de l’ONG d’intermédiation sociale. Cela signifie que la prévision des dépenses Wash et la provision de fond n’est pas systématique dans les écoles

B.1.5. Résultat 3 : La compréhension sur l'hygiène est-elle renforcée dans les écoles et dans les familles ?

- Quelle est la perception des activités ATPC et sensibilisation à l'Hygiène? - L'hygiène est-elle une thématique abordée durant les cours ? - L'école a-t-elle participé au concours "école et village propres"?

- Entretien avec les enseignants et le di-recteur - Entretien avec les CGS - Entretien avec les clubs d'Hygiène - Entretien avec les associations de parents d'élèves - En-tretien avec les ONG "intermédiation so-ciale"

Les maladies liées à l’eau, l’hygiène et l’assainissement sont connues, les bonnes pratiques à observer aussi grâce aux sessions de sensibilisation, au matériel didactique disponible dans les écoles et au concours écoles propres. Ces observa-tions sont valables dans l’école comme dans la communauté

B.1.5. Résultat 4 : Le niveau de connaissance et d'impli-cation des acteurs est-il augmenté dans le cadre du WASH à l'école ?

- Des activités de suivi/évaluation/capitalisation ont-elles été réalisées? - Des activités de plaidoyer (communauté, na-tional, mondial) ont-elles été réalisées? - Quel est le degré d'implication des acteurs ?

Reprise des observations réalisées plus haut

Le programme a contribué à l’amélioration du niveau de connaissance et d’implication des acteurs (ONG, entreprise, partenaires gouvernementaux). Pour les ONG et les entre-prises, il leur a notamment permis d’acquérir une méthodo-logie d’intervention commune de qualité. Pour les services techniques et les ministères, le plaidoyer mis en place par le programme permet de remettre le Ministère de l’Education au centre du programme. Quelques actions de communica-tion, de plaidoyer et de partage d’expérience ont été me-nées au niveau international

B.2.

Atteinte des résultats : Quel a été l'efficacité des activités de coordination, de suivi, évalua-tion et capitalisation

B.2.1. Dans quelle mesure les mécanismes de coordina-tion inter-acteurs au niveau local et national sont adéquats?

- Existe-t-il des mécanismes de concertation régulière? Réunions, échange de mails, etc. - Les directions régionales et les mairies sont -elles bien impliquées à toutes les étapes ?

- Entretien avec les acteurs clef du pro-gramme - Revue documentaire (CoPil, réunion de coordination etc.)

Les mécanismes de coordination inter-acteurs au niveau local et national contribuent largement à la qualité des tra-vaux et à la qualité des messages transmis, notamment grâce aux échanges d’expérience mis en avant dans le cadre de ces réunions. Ils ont également permis de leur donner les habitudes de travail et les compétences nécessaires à la perpétuation du programme

Page 83: EVALUATION DU PROGRAMME WASH A L ECOLE AU MALI · 2020-04-29 · EVALUATION DU PROGRAMME WASH A L’ECOLE AU MALI Evaluation commanditée et financée par le Comité Espagnol UNICEF

HYDROCONSEIL

Evaluation du programme WASH à l’école -Spanish Natcom - Rapport d’évaluation Page 83

Questions principales Indicateurs Questions/Observations/Identifications spéci-

fiques Source et mode de collecte de l'informa-

tion Résultat de l'analyse

B.2.2.

Dans quelle mesure les mécanismes et outils de suivi-évaluation-capitalisation sont adéquat pour permettre de mesurer des progrès et la qualité, et procéder aux éventuels ajustements à temps ?

- Quel système de reporting? (de qui vers qui, quelle fréquence) - Les indicateurs de suivi-évaluation élaborés sont-ils pertinents et suffisants ? - Fréquence des visites de site? (qui, quand, quel reporting) - Réactivité des opérateurs ou partenaires vis-à-vis d'un problème signalé - Utilisation des rapports/ateliers de capitalisa-tion au niveau national et local

- Entretiens avec les acteurs (UNICEF na-tional et régional) - Entretiens avec les partenaires (DRACPN) - Entretiens avec les bénéficiaires (Direc-teurs) - Revue documentaire

Les outils développés dans le cadre du programme sont complets et permettent de mesurer les progrès accomplis. Les réunions mensuelles et trimestrielles sont essentielles pour faire remonter les difficultés et les success-story du terrain.les ateliers de capitalisation permettent quant à eux, de proposer certains ajustements sur le programme de ma-nière participative et argumentée

C. EFFICIENCE

C.1. Utilisation des fonds : Les res-sources ont-elles été utilisées de manière efficiente ?

C.1.1. Les résultats sur les 3 volets ont-ils été à la me-sure des sommes dépensées ?

- Comment la planification et l'élaboration du budget ont-elles été faites ? (ventilation des postes, ventilation par site, etc.) - Les budgets établis ont-ils été respectés et utilisés correcte-ment ?

- Analyse des budgets mobilisées par le programme dans son ensemble (prévi-sionnel/réel) - Analyse des sommes mobi-lisées par le Spanish NatCom - Entretien avec la section WASH UNICEF

Une large part du budget a été allouée aux réalisations. Le taux de décaissement sur l’année 1 et 3 du programme est bon et ne présente pas de signe de sous-estimation budgé-taire de la contribution du Spanish NatCom

C.2. Gestion administrative et finan-cière du programme

C.2.1. Aurait-il été possible d'atteindre les mêmes ré-sultats à moindre coûts ?

- Aurait-il été possible de réduire les coûts uni-taires directs? - Aurait-il été possible de réduire les coûts de gestion (=RH et suivi du programme) - Aurait-il été possible de réduire les coûts de transaction (=sous-traitance à tous les niveaux)

- Entretien avec la section WASH UNICEF - Analyse des modalités de passation de marché et de contractualisation des ONG - Analyse comparative des coûts unitaires (avec d'autres ONG et d'autres pays) - Analyse des PCA - Analyse des Fiches Techniques, devis quantitatif etc

La gestion administrative et financière du programme est bonne. La mise en œuvre d’un programme de cette enver-gure dans un contexte post-crise nécessite un personnel suffisant et la mise en place de « garde-fou » permettant d’assurer l’atteinte des résultats escomptés dans les délais et les conditions escomptés. Le programme n’a pas fait d’économie mais ces dépenses sont justifiées compte tenue de la situation du pays

D. IMPACT : EFFETS DIRECTS ET INDIRECTS DU PROJET

D.1.

Ressenti interne : Quels sont les impacts qui ont été perçus par les différents acteurs du pro-gramme ?

D.1.1.

Quels sont les principaux changements (effets positifs/négatifs) du programme qui ont été per-çus par les différentes catégories de bénéficiaires ?

- Thématiques abordées : motivation et enga-gement des acteurs scolaires, apprentissage et pratiques de vie, amélioration économiques et/ou sociales dans les communautés

- Entretien avec les enseignants et le di-recteur - Entretien avec les CGS - Entretien avec les clubs d'Hygiène - Entretien avec les élèves (grandes classes) - Entretien avec les parents d'élèves - Entretien avec les ONG "intermédiation sociale"

Les principaux changements perçus par les bénéficiaires sont nombreux. Chacun des changements perçus font l’objet d’une conclusion distincte. Ils tournent essentielle-ment autour des connaissances acquises par l’enfant et de sa responsabilisation dans les routines d’entretien (11/11 écoles), de l’implication et le travail de tous les acteurs en-semble pour créer un meilleur environnement scolaire, de la meilleure mobilisation/valorisation des ressources et enfin de l’amélioration de la qualité des équipements

D.1.2. Quels sont les principaux changements (effets positifs/négatifs) du programme qui ont été per-çus par les partenaires de mise en œuvre ?

- Thématiques abordées : *ONG intermé-diation sociale : motivation et engagement des acteurs scolaires, amélioration économiques et/ou sociales dans les communautés *BE "Ouvrage" : relation avec les bénéficaires, rela-tion avec l'UNICEF et/ou le bureau de contrôle * Service technique : routine de rencontre, réu-nion de démarage, supervision à toutes les étapes

- Entretien avec les ONG "intermédiation sociale" - Entretien avec les ONG "cons-truction"

Le programme a apporté des changements significatifs dans le travail et dans la vie personnelle des partenaires de mise en œuvre. Pour les ONG et les entreprises, le caractère « pédagogique / pas à pas » du programme et les exigences de qualité, leur ont permis de se professionnaliser. De même l’existence du programme, a accru la résistance éco-nomique de nombreuses structures permettant, tant bien que mal de conserver le lien social et l’espoir. Plus spécifi-quement pour les ONG, le programme leur a permis de créer une famille, à la fois dans la communauté (comme en témoigne les bénéficiaires) et dans le secteur de l’intermédiation sociale au Mali (comme en témoigne la création du réseau REHA)

Page 84: EVALUATION DU PROGRAMME WASH A L ECOLE AU MALI · 2020-04-29 · EVALUATION DU PROGRAMME WASH A L’ECOLE AU MALI Evaluation commanditée et financée par le Comité Espagnol UNICEF

HYDROCONSEIL

Evaluation du programme WASH à l’école -Spanish Natcom - Rapport d’évaluation Page 84

Questions principales Indicateurs Questions/Observations/Identifications spéci-

fiques Source et mode de collecte de l'informa-

tion Résultat de l'analyse

D.2 Ressenti externe : Les écoles du programme ont-elles suscitées un intérêt particuliers?

D.2.1 Le projet a-t-il suscité des réactions (ou intérêt) dans les communautés non bénéficiaires (Ecole/village) ?

- Identification des principales zones montrant un intérêt particulier

- Entretien Maire - Entretien avec les ONG - Entretien Directeur - Entretien UNICEF au niveau des régions de KKO et MPTI

Le travail dans les écoles a en premier lieu suscité un intérêt particulier (positif ou négatif selon les ménages) dans la communauté. Cet intérêt a grandi au fur et à mesure des activités conjointe Ecole / Village de l’ONG, et de l’amélioration visible des conditions de l’école. Plus large-ment, le programme a également su susciter l’intérêt dans les communautés et les écoles non bénéficiaires, grâce no-tamment au concours Ecole Propre

E. DURABILITE ET APPROPRIATION DU PROJET

E.1.

Durabilité, appropriation : La conception du programme et ses modalités de mise en œuvre permettent-ils de maximiser les chances de durabilité ?

E.1.1.

Les stratégies, mécanismes, outils mis en place au niveau des bénéficiaires comme des parte-naires d'intervention sont-ils adéquats pour assu-rer une durabilité maximale des résultats compte tenu du contexte du pays?

- Identification des outils mis en place et en quoi ils permettent d'assurer la durabilité du pro-gramme - Identification du degré d'implication des par-tenaires et/ou bénéficiaires dans la prise en mains, compréhension, de ces ou-tils/mécanismes

- Etude des documents de projet - Etude des rapports narratifs - Discussion UNICEF - Entretien DRACPN - Entretien Directeur - Entretien CGS - Entretien Association des mères d'élèves

Le programme a mis en place des stratégies, mécanismes, outils auprès des bénéficiaires et des partenaires pour assu-rer une durabilité maximale des résultats, et ce dès le dé-marrage des activités : l’ancrage du programme dans les écoles, dans les cycles de formation des enseignants ainsi que la professionnalisation des entreprises et des ONG sont de bons exemples. Un temps plus long d’implémentation renforcerait néanmoins l’accompagnement des écoles dans la pérennité des actions et la mise en place de routine de gestion

E.1.2. De quelles manières le programme pourrait-il avoir de meilleures chances de durabilité ?

- Identification des points d'amélioration pos-sible (facteur d'échec sur le long terme) - Proposition de piste de réflexions

- Analyse propre du consultant

Malgré de gros efforts fournis pour garantir la durabilité du programme plusieurs facteurs contraignant persistent. Ils sont à la fois endogènes au programme tel que l’absence d’un suivi terrain post programme ou exogène à savoir la mutation des enseignants, ou bien encore le processus de décentralisation en cours au Mali

E.2

Mise à l'échelle : La conception du programme et ses modalités de mise en œuvre permettent-ils de maximiser les chances de mise à l'échelle ?

E.2.1.

Les stratégies, mécanismes, outils mis en place au niveau des bénéficiaires comme des parte-naires d'intervention sont-ils à même d'être mis à l'échelle compte tenu du contexte du pays?

- Identification des possibilités de passage à l'échelle du programme (à partir de l'étude des 2 régions Koulikoro/Mopti) - Analyse des stratégies et des mécanismes mis en place par le pro-gramme pour permettre le passage à l'échelle - Analyse du positionnement des acteurs (bénéfi-ciaires/partenaires) dans le cadre du passage à l'échelle

- Etude des documents de projet - Etude des rapports narratifs - Discussion UNICEF - Discussion Dubai-Cares - Entretien DRACPN - Entretien Directeur - Entretien CGS - Entretien Association des mères d'élèves

Le programme est ouvert à tout type de collaboration. La synergie des actions entre les partenaires / Bailleurs ont permis d’atteindre 1 625 écoles en 4 ans, ce qui est considé-rable et très positif

E.2.1. De quelles manières le programme pourrait-il avoir de meilleures chances de généralisation ?

- Identification des points d'amélioration pos-sible (facteur limitant sur le long terme) - Proposition de piste de réflexions

- Analyse propre du consultant

Le passage à l’échelle du programme est souhaitable mais il doit être fait dans un cadre institutionnel ancré politique-ment au niveau National. Par ailleurs, un risque de perte de qualité peut subvenir avec la surcharge en travail des ONG et des entreprises de construction dont l’organisation in-terne et les capacités managériales restent fragiles. Le pas-sage à l’échelle doit donc se faire progressivement et doit impérativement être associé à un fort renforcement de ca-pacité des services techniques déconcentrés

Page 85: EVALUATION DU PROGRAMME WASH A L ECOLE AU MALI · 2020-04-29 · EVALUATION DU PROGRAMME WASH A L’ECOLE AU MALI Evaluation commanditée et financée par le Comité Espagnol UNICEF

HYDROCONSEIL

Evaluation du programme WASH à l’école -Spanish Natcom - Rapport d’évaluation Page 85

G. Annexes G.1. Annexe 1 : Tableau des rencontres réalisées - Modalité des entretiens

et des observations réalisés dans le cadre de l’évaluation du pro-gramme Dubai-Cares

Fonction des personnes rencontrées Type d'entretien Durée

UNICEF

Section Wash (Nationale, Régionale)

entretien semi-directif

3 h

Equipe coordination Wash à l’école et MEL entretien semi-directif

3h

Interlocuteurs institutionnels

Académie d’éducation (AE)

entretien semi-directif

1 h

Centres d’Animation Pédagogiques (CAP) entretien semi-directif

1h par CAP

ONG et entreprises privées partenaires du programme

Groupe des ONG d’intermédiation sociale MSG 2h30

Groupe des Entreprises prestataires travaux MSG 2h30

SNV entretien semi-directif

1h

Sid-Sertas entretien semi-directif

1h

Population scolaire - Bénéficiaires

11 écoles (observation) grille d'observation 1h par site

Les directeurs des 11 écoles entretien semi-directif

1h30 par site

4 enseignants de chaque école FGD / MSC 45 min par site

4 membres des Clubs d’Hygiène de chaque école (grande classe)

FGD / MSC 45 min par site

4 élèves dans chaque école FGD / MSC 45 min par site

Comité de Gestion Scolaire et Association des mères d’élève MSC 1h00 par site

Page 86: EVALUATION DU PROGRAMME WASH A L ECOLE AU MALI · 2020-04-29 · EVALUATION DU PROGRAMME WASH A L’ECOLE AU MALI Evaluation commanditée et financée par le Comité Espagnol UNICEF

HYDROCONSEIL

Evaluation du programme WASH à l’école -Spanish Natcom - Rapport d’évaluation Page 86

G.2. Annexe 2 : Plan de travail de l’évaluation G.2.1. Calendrier général

SEMAINES

Expert

Inte

rnational

Expert

s

Nationaux (

*2)

29 6 13 20 27 3 10 17 24 1 8 15

Phase 1 : Phase de structuration de la démarche d'évaluation

* Réunion de lancement - Cadrage méthodologique à Bamako 1

* Collecte et analyse des documents de référence 3

* Elaboration de la méthodologie d’évaluation

Création des outils de l'évaluation (matrice, grille d'entretien, grille d'observation) 3

Elaboration de l'échantillon pour les visites terrains et les entretiens insitutionnels 2 2

* Elaboration du planning détaillé de l'évaluation 1

* Elaboration du rapport de démarrage 2

Délivrable 1 : Rapport de démarrage x

* Analyse de la note de cadrage par le client

* Réunion de validation de la note de cadrage - A Bamako 1 x

Phase 2 : Phase de conduite de l'analyse évaluative

* Revue documentaire des documents de projet 4

* Collecte des données à Bamako (entretiens institutionnels) 3

* Collecte des données dans 2 régions

Entretiens institutionnels 3 14

Visite de sites (observations et entretiens avec les bénéficiaires) 3 14

* Réunion de débriefing à Bamako 0,5

* Analyse des données terrain collectées 4

Phase 3 : Phase d'élaboration des conclusions et recommandations

* Rédaction du Rapport provisoire avec recommandations hierarchisées 4 4

Délivrable 2 : un rapport final Provisoire x

* Restitution au Comité de suivi pour Feed-Back 3

* Formulation des commentaires par le Comité de suivi (1 semaine)

* Intégration des commentaires, élaboration du rapport définitif (8 jours après commentaires client) 1

* Traduction du rapport final en langue espagnole

Délivrable 3 : un rapport définitif en Français et en Anglais x

Total jours prestés 38,5 34

Total jours prestés au Mali 21,5 34

Total jours prestés résidence expert 17

Jour de Perdiem Expert international 21,5

Jour de Perdiem Expert National 28

Légende: Activités des consultants Réunion

Rendu

Analyse par le client

jours Laura Béal 14,5

Nombre jours

prestés

Sept/Octobre Novembre Décembre

Périodes de

mission du

consultant principal

Page 87: EVALUATION DU PROGRAMME WASH A L ECOLE AU MALI · 2020-04-29 · EVALUATION DU PROGRAMME WASH A L’ECOLE AU MALI Evaluation commanditée et financée par le Comité Espagnol UNICEF

HYDROCONSEIL

Evaluation du programme WASH à l’école -Spanish Natcom - Rapport d’évaluation Page 87

G.2.2. Focus phase terrain Audrey CROCKER Laura BEAL Abdoulaye SOW Salif TRAORE

Lundi 29 septembre Signature du contrat

Mardi 30 septembre

Mercredi 1er octobre

Jeudi 02 octobre

Vendredi 03 octobre

Samedi 04 octobre

Dimanche 05 octobre

Lundi 06 octobre Voyage France/Mali Voyage France/Mali

Mardi 07 octobre Discussion sur la matrice Entretien MEL&Wash

Mercredi 08 octobre A.M Réunion équipe Réunion équipe Réunion équipe Réunion équipe

Mercredi 08 octobre P.M

Jeudi 09 octobre A.M

Jeudi 09 octobre P.M

Vendredi 10 octobre A.M

Vendredit 10 octobre P.M

Samedi 11 octobre A.M

Samedi 11 octobre P.M

Dimanche 12 octobre

Lundi 13 octobre A.M

Lundi 13 octobre P.M

Mardi 14 octobre A.M

Mardi 14 octobre P.M

Mercredi 15 octobre A.M Ecole 3 Ecole 4 Ecole 3 Ecole 4

Mercredi 15 octobre P.M CGS Ecole 3 CGS Ecole 4 CGS Ecole 3 CGS Ecole 4

Jeudi 16 octobre A. M AE (Koulikoro) + CAP (Koulikoro) Ecole 5 AE (Koulikoro) + CAP (Koulikoro) Ecole 5

Jeudi 16 octobre P.M DRACPN Koulikoro CGS Ecole 5 DRACPN Koulikoro CGS Ecole 5

Vendredi 17 octobre A.M Ecole 6 Ecole 7 Ecole 6 Ecole 7

Vendredi 17 octobre P.M CGS Ecole 6 CGS Ecole 7 CGS Ecole 6 CGS Ecole 7

Samedi 18 octobre 1er éléments de rédaction Voyage Mali/France

Dimanche 19 octobre 1er éléments de rédaction

Lundi 20 octobre A.M Protos et SNV

Lundi 20 octobre P.M Sid-Sertas

Mardi 21 octobre A.M Voyage Mali/France

Mardi 21 octobre P.M Suivi à distance activités terrain

Mercredi 22 octobre A.M

Mercredi 22 octobre P.M

Jeudi 23 octobre A.M

Jeudi 23 octobre P.M Suivi à distance activités terrain

Vendredi 24 octobre A.M Analyse des données

Vendredi 24 octobre P.M Analyse des données

Samedi 25 octobre

Dimanche 26 octobre

Lundi 27 octobre

CAP (Djenné)

Ecole 11

CGS Ecoles 10 et 11

Route pour Bamako

Envoi des résultats

Ecole 8

Ecole 9

DRACPN Mopti

CGS Ecoles 8 et 9

Route pour Djenné

Ecole 10

Ecole 1

Ecole 2

CGS Ecoles 1 et 2 (MSC)

Route pour Mopti

AE (Mopti) + CAP (Sevaré)

MSC : Groupe des ONG d'intermédiation sociale

MSC : Groupe des entreprises privées

Revue documentaire

Revue documentaire - 1er éléments de rédaction

Formation enquêteurs : Focus group + MSC

AE (Kati) + CAP (Kalaban-Coro)

1ères Analyse des documents

1ères Analyse des documents

Elaboration de la matrice d'évaluation

Elaboration des grilles d'entretiens

Elaboration des grilles d'entretiens

REHA

Page 88: EVALUATION DU PROGRAMME WASH A L ECOLE AU MALI · 2020-04-29 · EVALUATION DU PROGRAMME WASH A L’ECOLE AU MALI Evaluation commanditée et financée par le Comité Espagnol UNICEF

HYDROCONSEIL

Evaluation du programme WASH à l’école -Spanish Natcom - Rapport d’évaluation Page 88

G.3. Annexe 3 : Extrait du cadre logique du PS-PEHMS

Objectifs spécifiques Résultats attendus Activités

1. Assurer l’approvisionnement en eau potable de toutes les écoles

1.1. Toutes les écoles disposent de points d’eau potable fonction-nels

Réaliser 5 000 nouveaux points d’eau potables (50% à moindre coût)

1.2. Toutes les classes disposent de postes d’eau potable

Réhabiliter 1 750 points d’eau en panne

Doter 36000 classes en poste d’eau potable

2. Amener les écoles à adopter les bonnes pra-tiques d’hygiène

2.1. Les écoles dispen-sent des cours sur l’EHA

Harmoniser les modules de formation et les outils de communica-tion (en séries d’ateliers)

Organiser un atelier de formation d’un pool de formateurs natio-naux (10 formateurs)

Organiser des ateliers de formation des formateurs (AE et CAP)

Organiser des séances de leçons modèles (1er cycle et 2ème cycle) au moins une fois par semaine en hygiène dans les écoles pour informer, sensibiliser et mettre à niveau les élèves.

Organiser des ateliers de formation des maîtres et les directeurs (CDPE, Ecoles Fondamentales, CED, IFM)

Doter les écoles de modules d’éducation à l’hygiène en milieu scolaire.

2.2. Les CGS, CSS AME et GE des écoles sont for-més

Organiser des ateliers de formation des CGS, CSS, AME, GE

2.3. Les élèves font la promotion de l’hygiène en milieu intra et extra scolaire

Appuyer les GE/CSS à élaborer des plans d’action pour la promo-tion de l’hygiène en milieu scolaire

2.4. Les écoles entre-tiennent leurs locaux et les ouvrages d’eau et d’assainissement

Elaborer et diffuser des outils de suivi de l’entretien des locaux et les ouvrages d’eau et d’assainissement

Doter toutes les écoles de l’enseignement fondamental en équi-pements et matériels d'hygiène (poste d'eau potable, dispositifs de lavage des mains, poubelles avec couvercles, bouilloires, râ-teaux, pelles, brouettes, gants de ménages, comparateurs de chlore…)

Organiser des journées de salubrité générale dans les écoles

Organiser des concours écoles propres

Diffuser sur la radio scolaire des émissions sur l’hygiène

2.5. Les gouvernements des enfants, les AME et les clubs de Santé Sco-laire sont mis en place et sont fonctionnels.

Mettre en place dans chaque école le Gouvernement des Enfants (GE) ou le CSS et les AME

3. Renforcer la capacité des écoles dans la ges-tion des déchets solides, des eaux usées et excré-ta

3.1. les écoles disposent de latrines conformes

Révision du plan type de latrines scolaires

Mettre à la disposition des écoles une copie du plan des latrines scolaires à construire

Construire des latrines conformes aux normes dans les écoles

3.2. les écoles disposent Elaborer un contrat type GIE/école pour le ramassage des ordures

Page 89: EVALUATION DU PROGRAMME WASH A L ECOLE AU MALI · 2020-04-29 · EVALUATION DU PROGRAMME WASH A L’ECOLE AU MALI Evaluation commanditée et financée par le Comité Espagnol UNICEF

HYDROCONSEIL

Evaluation du programme WASH à l’école -Spanish Natcom - Rapport d’évaluation Page 89

Objectifs spécifiques Résultats attendus Activités

d’un système ramassage des ordures

dans les écoles en milieu urbain

4. Développer un par-tenariat dynamique entre les divers interve-nants

4.1. Un cadre de concer-tation des intervenants est mis en place et fonc-tionnel

Mettre en place un comité de pilotage du plan

Tenir la réunion de concertations à tous les niveaux (national régional cercle)

5. Mettre en place le cadre législatif et règle-mentaire en matière d’éducation à l’hygiène en milieu scolaire

5.1. Les textes règlemen-taires et normatifs en matière d’hygiène en milieu scolaire sont éla-borés, adoptés et diffu-sés

Mettre en place un comité restreint de rédaction des textes

Elaborer et adopter les textes

Disséminer les textes

6. Renforcer le plaidoyer et la mobilisation so-ciale en faveur de l’éducation à l’hygiène en milieu scolaire

6.1. Les leaders et les relais de la société civile sont mobilisés en faveur de l’éducation à l’hygiène en milieu sco-laire

Organiser des journées d’information sur l’hygiène en milieu sco-laire

Organiser des journées de dissémination du plan stratégique (par-lementaires, ONG, artistes, stars…)

6.2. Les ressources pour la mise en œuvre du plan sont mobilisées

0rganiser 1 table ronde des PTF

Intégrer les activités du plan dans les PO et PDSEC des différentes structures

7. Développer un méca-nisme de sui-vi/évaluation

7.1. Un plan de suivi/ évaluation est élaboré et exécuté

Elaborer 1 plan de Suivi-Evaluation

Désigner 1 Point Focal par niveau (DNS, DNEB, DNP, DRS, AE, CSRéf, CAP)

Réaliser une évaluation à mis parcours

7.2. Une évaluation fi-nale réalisée

Réaliser une évaluation finale du programme

Page 90: EVALUATION DU PROGRAMME WASH A L ECOLE AU MALI · 2020-04-29 · EVALUATION DU PROGRAMME WASH A L’ECOLE AU MALI Evaluation commanditée et financée par le Comité Espagnol UNICEF

HYDROCONSEIL

Evaluation du programme WASH à l’école -Spanish Natcom - Rapport d’évaluation Page 90

G.4. Annexe 4 : Liste de thèmes de recherche pré-identifié par le pro-gramme Dubai-Cares

Evaluation d’impact du programme sur l’état de santé (prévalence de la diarrhée) et les performances scolaires des élèves (scolarisation des filles et des garçons, résultats scolaires, absentéisme et abandon scolaires)

Impact du programme sur les capacités cognitives des élèves : déshydratation, capacités de concentration, mé-moire à court terme, capacités visio- et psychomotrices

Déterminants de la défécation en plein air, de l’utilisation des latrines et du lavage des mains au savon : facteurs techniques, culturels, financiers

Durabilité des effets du projet, notamment du changement de comportement par rapport à l’hygiène en milieu scolaire (lavage des mains au savon, pratique de la défécation en plein air, utilisation correcte des latrines, en-tretien et maintenance des latrines et points d’eau, traitement de l’eau de boisson)

Gestion de l’hygiène menstruelle : effets du programme à ce niveau, besoins additionnels des filles

Cartographie de la qualité de l’eau dans les zones d’intervention, avec un accent particulier sur les éléments peu ou pas étudiés au Mali (manganèse, arsenic)

Rôle des élèves comme agents du changement de comportement dans leur famille / communauté, difficultés rencontrées et stratégies de renforcement

Causes de l’absentéisme et de l’abandon scolaire

Comparaison des approches adoptées par les différents partenaires : focus plus ou moins grand sur le soft, sur la communauté autour de l’école ; stratégie de mise en œuvre des activités, etc. Il s’agit de recenser et d’analyser les succès et difficultés, et de formuler des recommandations, en prenant en compte le point de vue des bénéfi-ciaires, du staff du programme, et de leurs partenaires de mise en œuvre

Analyse des activités spécifiques de chaque partenaire : ATPC (CARE, Save the Children), clôture des écoles et plantation d’arbres (Unicef), pompe à corde (Oxfam), urinoirs (WaterAid), déparasitage et supplémentation nutritionnelle (Save the Children). Les études adopteront un canevas commun et seront rassemblées en fin de programme dans un document de synthèse.

Page 91: EVALUATION DU PROGRAMME WASH A L ECOLE AU MALI · 2020-04-29 · EVALUATION DU PROGRAMME WASH A L’ECOLE AU MALI Evaluation commanditée et financée par le Comité Espagnol UNICEF

HYDROCONSEIL

Evaluation du programme WASH à l’école -Spanish Natcom - Rapport d’évaluation Page 91

G.5. Annexe 5 : Fiche C8 de contrôle des inspecteurs et travail réalisé par Hydroconseil pour intégrer les préoccupations du programme Wash à l’école

Page 92: EVALUATION DU PROGRAMME WASH A L ECOLE AU MALI · 2020-04-29 · EVALUATION DU PROGRAMME WASH A L’ECOLE AU MALI Evaluation commanditée et financée par le Comité Espagnol UNICEF

HYDROCONSEIL

Evaluation du programme WASH à l’école -Spanish Natcom - Rapport d’évaluation Page 92

Page 93: EVALUATION DU PROGRAMME WASH A L ECOLE AU MALI · 2020-04-29 · EVALUATION DU PROGRAMME WASH A L’ECOLE AU MALI Evaluation commanditée et financée par le Comité Espagnol UNICEF

HYDROCONSEIL

Evaluation du programme WASH à l’école -Spanish Natcom - Rapport d’évaluation Page 93

Date visite

Ecole Archives

Pool UNICEF

Proved Insp Géné

Nom de l'école Nom du directeur

Matricule SECOPE Sexe Age

Régime de gestion Ancienneté dans l'école

Nom Village Matricule SECOPE

Pool d'inspection Téléphone

1 - 0

1 - 0

1 - 0

1 - 0

1 - 0

1 - 0

1 - 0

1 - 0

1 - 0

1 - 0

1 - 0

1 - 0

1 - 0

1 - 0

La visite était-elle annoncée ? oui - non

Modalités de la visite

Pas 3 : Diagnostic participatif initial

Pas 4 : Elaboration du POM

Pas 5 : Construction

Pas 6 : Diagnostic participatif final

Pas 1 : Protocole d’accord

Pas 2 : Formation enseignants/BSSE

4.1. Existe-t-il des stations de lavage des mains ?

4.3. Observez-vous du savon ou de la cendre à côté de chaque station

de lavage des mains

2.1. Existe-t-il un manuel pour 2 élèves ?

suivi d'une école en cours de processus

Objet détaillé de la visite

SI LA VISITE A PERMIS DE FRANCHIR UN

PAS, LEQUEL

3.2. Toutes les latrines sont-elles fonctionnelles (1 trou ouvert et 1

trou fermé, portes en place, cadenas ouverts, fermeture de

l'intérieur)?

3.3. Un horaire de nettoyage hebdomadaire est-il affiché ?

3.4. L'école possède-t-elle un stock de cendre pour l'entretien des

latrines ?

Norme 3

Pas 7 : Certification

4.2. Les stations de lavage des mains sont-elles remplies d'eau ?

Norme 2

Norme 4

1.1. Tous les enseignants de l'école sont formés au programme PESE ?

1.2. Le directeur de l'école est-il formé au programme PESE ?

1.3. Le COPA est-il sensibilisé au programme EA ?

Sous-Proved

Gestionnaire réseaux

SI LA VISITE N'A PAS PERMIS DE FRANCHIR UN PAS

suivi d'une école déjà certifiée

oui - non

Inspecteur :

Poste d'attache :

Année scolaire :

Téléphone :

INSPECTION D'UNE ECOLE PRIMAIRE ASSAINIE

ATTENTION A COMPLETER LE LIVRE D'OR DE L'ECOLE ET DE FAIRE SIGNER LE DOCUMENT AU CHEF

D'ETABLISSEMENT

REPUBLIQUE DEMOCRATIQUE DU

CONGO

Ministère de l'enseignement Primaire

Secondaire et Professionnel

INSPECTION ECOLE ASSAINIE

Pt focal EA

Copie à

C8

CONTRÔLE DES NORMES

OUI = 1; NON = 0 - Entourer la bonne réponse

Norme 1

2.2. Existe-t-il 1 guide enseignant par classe ?

2.3. Au moins 1h d'éducation à la santé est-elle dispensée chaque

semaine, dans chaque classe ?

La visite a-t-elle permis de franchir un pas ?

2.4. Existe-t-il un kit de jeu complet pour chacune des classes ?

3.1. Les latrines sont-elles hygiéniques (sans odeurs, sans mouches et

défécation et avec couvercle en place)

Document test

Page 94: EVALUATION DU PROGRAMME WASH A L ECOLE AU MALI · 2020-04-29 · EVALUATION DU PROGRAMME WASH A L’ECOLE AU MALI Evaluation commanditée et financée par le Comité Espagnol UNICEF

HYDROCONSEIL

Evaluation du programme WASH à l’école -Spanish Natcom - Rapport d’évaluation Page 94

1 - 0

1 - 0

1 - 0

1 - 0

1 - 0

1 - 0

1 - 0

.../21

7.1. L'école possède t-elle un livre d'or "Ecole Assainie" cartonné ? 1 - 0

1 - 0

1 - 0

1 - 0

1 - 0

1 - 0

…/6

Décompte des points : Sous total (1) + Sous total (2) …/27 Bilan

Report des

points

Norme 5

5.3. Existe-t-il un trou à ordures dans l'école ?

(2) SOUS TOTAL DES OUTILS DE GESTION ET DE COMMUNICATION

rouge - vert

Outils de gestion et de communication

Bilan

5.1. Toutes les salles de classe sont-elles propres ?

5.2. La cour de l'école est-elle propre ?

Norme 6

6.1. Au début de l'année scolaire, les brigadiers ont-ils été élus par un

vote démocratique ?

6.4. Existe-t-il un document de planification des activités de la BSSE ou

des PV de réunion de l'année en cours ?

6.2. La brigade constituée est-elle paritaire ?

6.3. : la brigade est-elle bien composée de la manière suivante : chaque

BSSE compte 1 membre de chaque classe (soit 8), + à leur tête un

brigadier en chef et un adjoint ?

Livre d'or

8.1. Si l'école est certifiée, a-t-elle reçu un certificat ?

8.2. Si l'école est certifiée, a-t-elle reçu un drapeau ?

Visibilité de la

certification

Outils mesurant

l'impact du

programme

(1) SOUS TOTAL DU CONTRÔLE DES NORMES

9.2. L'école possède-t-elle des fiches de suivi du taux de morbidité

diarrhéïque ?

9.1. L'école possède-t-elle des fiches de suivi de lavage des mains ?

9.3. L'école possède-t-elle des fiches de comptage de passage aux

latrines ?

Fait à……………………………………………………...……. Le …../…../20…..

Signature de l'inspecteur

Signature et sceau du directeur

Signature du brigadier en chef

Problèmes rencontrés Solutions proposées

Si Sous total (1) + Sous total (2) < 14, alors ROUGE

Si Sous total (1) + Sous total (2) > 14, alors VERT

Dates des visites

précédentes

Commentaires

Identification des problèmes rencontrés dans l'école au cours de la visite

Page 95: EVALUATION DU PROGRAMME WASH A L ECOLE AU MALI · 2020-04-29 · EVALUATION DU PROGRAMME WASH A L’ECOLE AU MALI Evaluation commanditée et financée par le Comité Espagnol UNICEF

HYDROCONSEIL

Evaluation du programme WASH à l’école -Spanish Natcom - Rapport d’évaluation Page 95

G.6. Annexe 6 : Termes de Référence de l’évaluation

Appel à proposition RFP-MLI-2014-9112529

Evaluation externe du programme WASH à l’école au Mali

INFORMATION IMPORTANTE

Les Offres sont à envoyer uniquement par email, à l’adresse email suivante : [email protected], au plus tard Vendredi 08 Août 2014 à 10h00 GMT (délai prolongé par rap-port à la première publication)

Mettre en objet de l’email : « Evaluation externe WASH à l’école - (nom du Soumission-naire) »

L’offre technique sera envoyée en format PDF

L’offre financière sera envoyée en version PDF ; le budget sera également envoyé en format Excel en plus du format PDF

L’email d’envoi ne pourra pas dépasser 6 Mo maximum. Si les pièces jointes sont trop lourdes, les envoyer en plusieurs emails séparés ne dépassant pas 6 Mo chacun.

Les offres envoyées après l’heure et la date stipulées seront invalidées.

PREPAREE PAR : CERTIFIEE PAR :

Marième Diallo Touré Rachida Abdelli TOURE Supply officer Supply Manager [email protected] [email protected]

Page 96: EVALUATION DU PROGRAMME WASH A L ECOLE AU MALI · 2020-04-29 · EVALUATION DU PROGRAMME WASH A L’ECOLE AU MALI Evaluation commanditée et financée par le Comité Espagnol UNICEF

HYDROCONSEIL

Evaluation du programme WASH à l’école -Spanish Natcom - Rapport d’évaluation Page 96

Sommaire Contexte et historique du programme .................................................................................... 97

Description du programme ...................................................................................................... 97

Attentes de la présente demande de propositions ................................................................. 99

Portée et objectifs de l’évaluation ........................................................................................... 99

Critères et questions d’évaluation ........................................................................................... 99

Méthodologie de collecte des données ................................................................................. 101

Séquençage de la prestation .................................................................................................. 101

Chronogramme ...................................................................................................................... 102

Produits à livrer ...................................................................................................................... 102

Rôle et composition du comité de suivi de l’évaluation ........................................................ 103

Documents qui seront mis à la disposition de l’équipe d’évaluation .................................... 103

Qualifications des évaluateurs ............................................................................................... 104

Demande d’information complémentaire ............................................................................. 104

Présentation de l’offre technique et financière ..................................................................... 104

Grille d’évaluation des offres techniques .............................................................................. 105

Évaluation des offres financières ........................................................................................... 106

Conditions Generales des Contrats de Services ..................................................................... 106

Page 97: EVALUATION DU PROGRAMME WASH A L ECOLE AU MALI · 2020-04-29 · EVALUATION DU PROGRAMME WASH A L’ECOLE AU MALI Evaluation commanditée et financée par le Comité Espagnol UNICEF

HYDROCONSEIL

Evaluation du programme WASH à l’école -Spanish Natcom - Rapport d’évaluation Page 97

Contexte et historique du programme Au Mali, selon le Ministère de l’Education, de l’Alphabétisation et des Langues Nationales (MEALN), plus d’une école sur deux manquent d’un point d’eau et 42% ne disposent d’aucune latrine. Même lorsque ces équipements existent, ils sont souvent inadéquats, en mauvais état de fonctionnement, et mal utilisés. Ils sont très rarement accompagnés de lave-mains et de modalités durables de gestion et d’entretien.

Parce que cette situation affecte la santé, l’accès à l’éducation et le développement cognitif de l’enfant, et parce que l’accès à l’eau et l’assainissement est un droit fondamental, l’Etat malien a dé-cidé de réagir. L’élaboration d’un Plan Stratégique de Promotion de l’Education à l’Hygiène en Milieu Scolaire a été lancée en 2009 par le Ministère de l’Education avec le concours des ministères en charge de la santé, de l’eau et de l’assainissement. L’année suivante, l’agence de coopération da-noise DANIDA et la fondation philanthropique DUBAI CARES ont choisi de soutenir la mise en œuvre de cette stratégie. En lien avec les ministères concernés, l’UNICEF s’est associé à 10 ONG internatio-nales et 15 ONG nationales pour promouvoir l’approvisionnement en eau, l’hygiène et l’assainissement (WASH) dans les écoles du pays. Depuis, d’autres donateurs ont joint leurs efforts, tels que les gouvernements du Canada et des Pays-Bas, les comités nationaux belges et espagnols pour l’UNICEF, ou encore la fondation Hilton. Cette coalition de donateurs a permis d’assurer la con-tinuité et la mise à l’échelle du programme dans une grande partie du pays.

Description du programme Objectifs

L’objectif du programme est de mettre les écoles au « standard eau, hygiène & assainissement » et, ce faisant, de contribuer simultanément à l’atteinte de plusieurs objectifs du Millénaire pour le déve-loppement. La logique d’intervention et les activités du programme sont présentées ci-dessous.

Les écoles bénéficiaires sont des écoles publiques ou communautaires, rurales comme urbaines, ré-parties dans 6 des 9 régions du pays dont le district de Bamako. 1 625 écoles, 470 000 enfants et 10 000 enseignants sont ciblés d’ici fin 2015. Les communautés avoisinantes sont également prises en compte dans le programme à travers l’approche Assainissement Total Piloté par la Communauté (ATPC) et d’autres activités de sensibilisation.

Parmi les écoles des régions de Koulikoro, Sikasso et Mopti où la mise en œuvre a été assurée direc-tement par l’UNICEF sur financement principal de la fondation Dubai Cares, 130 ont été cofinancées par le Comité national espagnol pour l’UNICEF dans les régions de Koulikoro et Mopti, pour un mon-tant total de 1 321 019 USD sur la période juillet 2011 – juillet 2014. Les activités sont en train de se terminer dans toutes ces écoles.

Page 98: EVALUATION DU PROGRAMME WASH A L ECOLE AU MALI · 2020-04-29 · EVALUATION DU PROGRAMME WASH A L’ECOLE AU MALI Evaluation commanditée et financée par le Comité Espagnol UNICEF

HYDROCONSEIL

Evaluation du programme WASH à l’école -Spanish Natcom - Rapport d’évaluation Page 98

Analyse causale et stratégie d’intervention du programme

Théorie du changement

Page 99: EVALUATION DU PROGRAMME WASH A L ECOLE AU MALI · 2020-04-29 · EVALUATION DU PROGRAMME WASH A L’ECOLE AU MALI Evaluation commanditée et financée par le Comité Espagnol UNICEF

Principaux acteurs

La construction des infrastructures WASH dans les écoles est assurée par des entreprises de travaux recru-tées par l’UNICEF, contrôlées par un bureau d’études et les services techniques régionaux et locaux. Les activités d’intermédiation sociale sont mises en œuvre par des ONG internationales et nationales déployées sur le terrain. Ces deux volets construction et intermédiation sociales sont suivis par les spécialistes WASH de l’UNICEF basés à Bamako et dans les différentes régions d’intervention. Le suivi-évaluation-capitalisation-plaidoyer est animé par l’équipe WASH de l’UNICEF à Bamako.

État des connaissances sur le programme

L’UNICEF possède une base de données détaillée et actualisée sur les réalisations du programme, y compris celles cofinancées par le Comité espagnol pour l’UNICEF. Avec ses partenaires, des ateliers de capitalisation réguliers ont été organisés, permettant une documentation approfondie du programme depuis ses débuts. Une évaluation externe du cadre partenarial et du volet suivi-évaluation-capitalisation a été menée en 2013 pour le compte de Dubai Cares. Des études ont été conduites sur des thèmes spécifiques : études CAP, études formatives sur les déterminants de l’utilisation du savon et des latrines, et sur la gestion de l’hygiène menstruelle. Enfin, deux évaluations d’impact quantitatives ont été réalisées avec l’appui de l’université d’Emory (USA) : sur l’hydratation et les capacités cognitives des élèves d’une part, et sur leur état de santé et leur scolarité d’autre part.

Attentes de la présente demande de propositions Les présents termes de références sont rédigés en vue de recruter un bureau d’études qui :

1. proposera le cadre complet et le plan d’exécution de l’évaluation externe des activités financées par le Comité espagnol en se basant sur les orientations proposées plus bas, en complémentarité avec les données déjà disponibles sur le programme

2. conduira cette même évaluation dans les régions concernées au Mali, en mobilisant les compétences nécessaires dans les délais indiqués.

Portée et objectifs de l’évaluation L’évaluation couvrira toute la période de juillet 2011 à juillet 2014. Elle portera sur les localités d’intervention et partenaires de mise en œuvre cofinancés par le Comité espagnol. La région de Sikasso en est exclue.

Cette évaluation permettra d’estimer le bien-fondé et la valeur du programme, sur la base des critères re-commandés par le Comité de l’Aide au Développement de l’OCDE (pertinence, efficience, efficacité, impact, durabilité), selon la demande du Comité espagnol pour l’UNICEF, et avec une perspective sur le genre et les droits de l’Homme conforme à la philosophie de l’UNICEF. L’évaluation renforcera ainsi la redevabilité de l’UNICEF auprès de son donateur mais aussi de ses bénéficiaires, auxquels les résultats seront restitués.

L’évaluation permettra en même temps de proposer des améliorations relatives à la conception, à la mise en œuvre, à la gestion et au suivi du programme. En effet, les résultats de l’évaluation devront aboutir à des recommandations concrètes et réalistes tirées non seulement de l’analyse critique du programme exis-tant (en prenant aussi en compte les améliorations déjà prévues pour 2014-2015), mais aussi tirées d’autres programmes similaires en Afrique subsaharienne et sur d’autres continents, en cours actuellement ou dans un passé récent. Ainsi, l’évaluation sera un moyen d’assurer la prise en compte des bonnes pra-tiques recensées au niveau international et de proposer d’autres innovations possibles. L’UNICEF utilisera ces recommandations pour réviser son approche et ses outils en concertation avec ses partenaires.

Critères et questions d’évaluation Les critères d’évaluation sont ceux recommandés par le CAD de l’OCDE. Le critère de l’impact sera évalué principalement de manière qualitative en prenant en compte la perception des bénéficiaires et parties pre-nantes. Ci-dessous quelques propositions de questions d’évaluation liées à chaque critère, classées par ordre de priorité. L’équipe d’évaluation finalisera la liste des questions et sous-questions d’évaluation (pré-

Page 100: EVALUATION DU PROGRAMME WASH A L ECOLE AU MALI · 2020-04-29 · EVALUATION DU PROGRAMME WASH A L’ECOLE AU MALI Evaluation commanditée et financée par le Comité Espagnol UNICEF

HYDROCONSEIL

Evaluation du programme WASH à l’école -Spanish Natcom - Rapport d’évaluation Page 100

cisées et contextualisées) après la réunion de cadrage avec le comité de suivi de l’évaluation, et élaborera une base de jugement ou des indicateurs pour chaque question.

Critères Dimensions Questions principales Sous-questions

Pertinence, Cohérence

Logique d’intervention

La logique d’intervention du programme WASH à l’école est-elle cohé-rente ?

Le programme (conception, activités, réali-sations), est-il bien approprié et adéquat pour atteindre l’objectif poursuivi ? (cf. lo-gique d’intervention décrite dans le cadre logique et la brochure de présentation du programme)

Certaines interventions ont-elles été omises qui permettrait d’atteindre plus sûrement les objectifs poursuivis ?

Bonnes pra-tiques

Le programme a-t-il su intégrer les derniers dé-veloppements et innova-tions dans le domaine ?

Dans quelle mesure le programme a su prendre en compte l’expérience d’autres partenaires au développement et les meil-leures pratiques d’autres pays, que ce soit au niveau du volet construction, du volet intermédiation sociale ou du volet suivi-évaluation-capitalisation-coordination ?

Dans quelle mesure le programme reflète-t-il les derniers développements de la re-cherche dans le domaine ?

Sensibilité aux besoins

Le programme a-t-il pu satisfaire les préoccupa-tions des différentes ca-tégories de bénéficiaires et partenaires ?

Le programme répond-il correctement aux besoins prioritaires et attentes des bénéfi-ciaires (élèves, enseignants, CGS, parents d’élèves) et des parties prenantes / parte-naires de mise en œuvre ? (communes, ser-vices techniques, ONG, prestataires de tra-vaux…) ? A-t-il donné lieu à une implication suffisante de leur part ?

Dans quelle mesure le programme intègre-t-il les besoins spécifiques des filles et des femmes ?

Efficience Utilisation des fonds

Les ressources ont-elles été utilisées de manière efficiente ?

Les résultats ont-ils été à la mesure des sommes dépensées ?

Aurait-il été possible d’atteindre les mêmes résultats à moindre coût (coûts unitaires di-rects, coûts de gestion et coûts de transac-tion) ?

Efficacité

Qualité et con-formité

La mise en œuvre sur le terrain a-t-elle été en ligne avec ce qui était prévu ?

Quel est le niveau de qualité et de confor-mité des activités terrain par rapport aux normes et standards préalablement établis par le programme, tant pour le volet cons-truction que le volet intermédiation sociale (notamment l’intégration entre école et communauté)?

Atteinte des résultats

Quel a été l’efficacité des activités de coordina-tion, suivi, évaluation et capitalisation ?

Dans quelle mesure les mécanismes de coordination inter-acteurs au niveau local et national sont adéquats ?

Dans quelle mesure les mécanismes et ou-tils de suivi-évaluation-capitalisation sont adéquats pour permettre de mesurer des progrès et la qualité, et procéder aux éven-

Page 101: EVALUATION DU PROGRAMME WASH A L ECOLE AU MALI · 2020-04-29 · EVALUATION DU PROGRAMME WASH A L’ECOLE AU MALI Evaluation commanditée et financée par le Comité Espagnol UNICEF

HYDROCONSEIL

Evaluation du programme WASH à l’école -Spanish Natcom - Rapport d’évaluation Page 101

Critères Dimensions Questions principales Sous-questions

tuels ajustements à temps ?

Impact Ressenti

Quels sont les principaux impacts qui ont été per-çus par les différents acteurs du programme ?

Quels sont les principaux changements / effets positifs et négatifs du programme qui ont été perçus par les différentes catégo-ries de bénéficiaires ? (motivation et enga-gement des acteurs scolaires, apprentis-sages et pratiques de vie, amélioration économiques ou sociales dans les commu-nautés touchées...) ?

Quels sont les principaux changements / effets positifs et négatifs du programme qui ont été perçus par les partenaires de mise en œuvre ?

Durabilité

Durabilité, ap-propriation et mise à l’échelle

La conception du pro-gramme et ses modalités de mise en œuvre per-mettent-ils de maximiser ses chances de durabili-té et de mise à l’échelle?

Les stratégies, mécanismes, outils mis en place au niveau des bénéficiaires comme les partenaires d’intervention sont-ils adé-quats pour assurer une durabilité maximale des résultats compte tenu du contexte du pays ? De quelle manière le programme pourrait-il avoir de meilleures chances de durabilité ?

Les stratégies, mécanismes, outils mis en place sont-ils à même d’être mis à l’échelle compte tenu du contexte du pays ? De quelle manière le programme pourrait-il avoir de meilleures chances de généralisa-tion ?

Méthodologie de collecte des données Pour répondre à ces questions d’évaluation, le bureau d’études devra utiliser une approche essentielle-ment qualitative, non expérimentale, et une combinaison de plusieurs méthodes de collecte des données : revue documentaire au Mali et sur internet, entretiens individuels et en groupe semi-structurés (analyse quantitative et qualitative) avec les parties prenantes (services techniques de l’Éducation, Assainissement, Hydraulique et Santé au niveau national, régional et/ou cercle, quelques communes, au moins 3 ONG de mise en œuvre du volet intermédiation sociale, au moins 4 entreprise de travaux et bureaux d’études pour le volet construction…), des bénéficiaires (élèves, enseignants, parents d’élèves, comités de gestion sco-laires, clubs d’hygiène, incluant si possible la méthode du « most significant change » et capturant la pers-pective des différentes catégories par sexe, âge, situation de vulnérabilité etc.) et d’autres personnes res-sources (autres bailleurs et ONG intervenant dans le même domaine…), observations sur le terrain (échan-tillon d’écoles et communautés environnantes), mesures / tests.

L’équipe d’évaluateurs commencera son travail à Bamako avant de se rendre sur le terrain dans les 2 ré-gions concernées. Les sites à visiter et les parties prenantes à interviewer seront sélectionnés basé sur un échantillonnage proposé par les évaluateurs (dans un souci de représentativité mais en tenant compte des contraintes logistiques, de temps et de budget) et validé avec le comité de suivi de l’évaluation.

Séquençage de la prestation Le séquençage dans le tableau ci-dessous est une proposition indicative qui peut être améliorée par le Soumissionnaire dans son offre technique. La colonne de droite indique une durée prévisionnelle pour l’activité et non une quantité d’hommes-jours.

Page 102: EVALUATION DU PROGRAMME WASH A L ECOLE AU MALI · 2020-04-29 · EVALUATION DU PROGRAMME WASH A L’ECOLE AU MALI Evaluation commanditée et financée par le Comité Espagnol UNICEF

HYDROCONSEIL

Evaluation du programme WASH à l’école -Spanish Natcom - Rapport d’évaluation Page 102

N° Activité Durée

1 Réunion de cadrage avec le comité de suivi de l’évaluation, entretiens individuels avec l’UNICEF, et collecte des documents clefs

3 jours

2 Finalisation des questions et sous-questions d’évaluation 2 jours

3 Identification de la méthodologie d’évaluation, du mode de collecte des données pour chaque question d’évaluation, de l’échantillonnage pour les entretiens et les visites de terrain, et développement des outils de collecte

10 jours

4 Elaboration du planning détaillé de la prestation 1 jour

5 Rédaction du rapport de démarrage 1 jour

6 Revue documentaire (à distance) 6 jours

7 Collecte des données à Bamako (entretiens et revue documentaire complémen-taire)

5 jours

8 Collecte des données dans les zones d’intervention (au moins 2 régions) : entre-tiens avec les parties prenantes et les bénéficiaires, observations terrain, mesures / tests…

12 jours

9 Réunion de débriefing à Bamako (PowerPoint) 1 jour

10 Traitement (éventuellement base de données) et analyse des données collectées, rédaction du rapport draft

10 jours

11 Présentation du rapport draft au comité de suivi pour feedback (par écrit et pré-sentation orale en téléconférence)

1 jour

12 Rédaction du rapport provisoire (intégrant le feedback du comité de suivi et une proposition de plan d’action priorisé pour l’UNICEF et les autres parties prenantes)

2 jours

13 Soumission du rapport provisoire au comité de suivi, présentation en téléconfé-rence

1 jour

14 Rédaction du rapport final et d’une présentation PowerPoint intégrant le feedback et le droit de réponse de l’UNICEF

2 jours

15 Traduction du rapport final en langue espagnole et déclenchement du paiement du prestataire

8 jours

Durée prévisionnelle = 65 jours

Chronogramme La prestation d’évaluation ne doit pas excéder 3 mois et devra être terminée avant fin novembre 2014.

Le Bureau d’études proposera un chronogramme détaillé dans son offre technique, précisant la répartition de tâches entre les membres de l’équipe d’évaluation et le nombre d’hommes-jours de chacun des membres au niveau de chaque activité.

Produits à livrer 1. Rapport de démarrage (au plus tard 3 semaines après la fin de la réunion de cadrage)

2. PowerPoint de la réunion de débriefing à Bamako

3. Rapport d’évaluation en version draft, base de données des données collectées (le cas échéant) et Po-werPoint de la téléconférence (au plus tard 3 semaines après la réunion de débriefing)

4. Rapport provisoire (au plus tard 1 semaine après la version draft)

5. Rapport final en français et présentation PowerPoint (au plus tard 1 semaine après la version provi-soire) : 10 copies papiers en plus de la version électronique

Page 103: EVALUATION DU PROGRAMME WASH A L ECOLE AU MALI · 2020-04-29 · EVALUATION DU PROGRAMME WASH A L’ECOLE AU MALI Evaluation commanditée et financée par le Comité Espagnol UNICEF

HYDROCONSEIL

Evaluation du programme WASH à l’école -Spanish Natcom - Rapport d’évaluation Page 103

Les évaluateurs auront la responsabilité de la traduction du rapport final en espagnol. Le rapport final de l’évaluation comprendra, au moins, les éléments suivants :

Résumé exécutif

Brève description du programme, de son contexte, montage financier, zones d’intervention, chro-nologie, modalités de mise en œuvre et acteurs impliqués

Objectifs, méthodologie, chronogramme de l’évaluation et difficultés rencontrées / limites de l’analyse

Résultats en termes de pertinence, efficience, efficacité, impact, durabilité

Analyses et remarques additionnelles (genre, droits de l’Homme)

Leçons apprises, défis, conclusions, recommandations, plan d’action

Droit de réponse de l’UNICEF

Annexes

Note : Le rapport final devra respecter les standards UNICEF relatifs à la qualité des rapports d’évaluation33. La grille d’évaluation sera fournie. Le rapport et l’ensemble des données collectées et produites par l’équipe d’évaluation restent la propriété exclusive de l’UNICEF et du Comité espagnol pour l’UNICEF.

Rôle et composition du comité de suivi de l’évaluation Le Comité, se réunissant à Bamako, sera constitué par des représentants de l’UNICEF (sections Planning, monitoring et évaluation et WASH) et des autres parties prenantes au programme (services techniques de l’Etat, représentant des ONG partenaires et des prestataires de travaux).

Son rôle sera de :

Contribuer à la conception de l’évaluation,

Suivre et faciliter sa mise en œuvre,

Assurer la prise en compte de toutes les opinions et propositions valides dans le rapport final,

Et assurer la diffusion des résultats de l’évaluation à toutes les parties prenantes du programme WASH à l’école et si possible à certains bénéficiaires ou leurs représentants.

Documents qui seront mis à la disposition de l’équipe d’évaluation Proposition de projet initiale au Comité espagnol pour l’UNICEF et liste des écoles financées par le Co-

mité espagnol

Documents sectoriels et notamment le Plan stratégique pour la promotion de l’éducation à l’hygiène en milieu scolaire

Rapport de l’enquête de base

Documents de contractualisation des ONG et prestataires de travaux

Guide et outils d’animation pour les ONG

Guide pour les équipements WASH en milieu scolaire, documents de passation des marchés, outils de suivi des travaux

Guide et outils de suivi-évaluation des activités et des réalisations, et de capitalisation

33

http://www.unicef.org/evaldatabase/files/UNEG_UNICEF_Eval_Report_Standards.pdf

Page 104: EVALUATION DU PROGRAMME WASH A L ECOLE AU MALI · 2020-04-29 · EVALUATION DU PROGRAMME WASH A L’ECOLE AU MALI Evaluation commanditée et financée par le Comité Espagnol UNICEF

HYDROCONSEIL

Evaluation du programme WASH à l’école -Spanish Natcom - Rapport d’évaluation Page 104

Comptes rendus des réunions et ateliers de capitalisation aux niveaux local et central

Rapports des parties prenantes (ONG, prestataires de travaux, services techniques), rapports de mis-sion du staff UNICEF, rapports au Comité espagnol et aux autres donateurs

Rapports intermédiaires de l’évaluation des résultats, d’impact et de durabilité mise en œuvre en colla-boration avec les partenaires Dubai Cares et l’Université d’Emory (Atlanta) depuis janvier 2013 jusqu’à novembre 2014

Rapport d’évaluation externe Dubai Cares 2013 (commandité par le donateur)

Rapport des autres études et évaluations menées dans le cadre du programme

Rapport de l’audit interne de l’UNICEF en mars 2014 prenant en compte le programme WASH à l’école

Code de conduite UNEG des évaluateurs34, Directives éthiques UNEG35 et Standard de qualité définis par l’UNICEF pour les rapports d’évaluation

Tout autre document utile

Qualifications des évaluateurs L’évaluation sera conduite par une équipe de consultants au profil décrit ci-dessous :

Formation initiale dans un domaine relatif à l’eau, l’hygiène et/ou l’assainissement, ou sciences poli-tiques et sociales, gestion, suivi-évaluation de projet ou autres domaine en rapport avec le travail re-quis

Le consultant principal disposera d’au moins 5 ans d’expérience professionnelle dans la planification, la mise en œuvre, le suivi et l’évaluation de programmes eau, hygiène et assainissement dans les pays en développement ; au moins 2 expériences dans l’évaluation de projets WASH à l’école en Afrique subsa-harienne est recherchée, et si possible 1 évaluation de projet WASH à l’école dans une autre région du monde

Il constituera une équipe ayant un profil complémentaire au sien

Compétences pluridisciplinaires de l’équipe : aspect technique sur le volet construction génie civile et forages ; aspect gouvernance scolaire et gestion technique, organisationnelle et financière des ou-vrages WASH dans le contexte de la décentralisation ; aspect sensibilisation, changement de compor-tement et techniques de formation ; aspect collaboration avec les acteurs étatiques et leurs partenaires au développement ; aspects suivi-évaluation

Compétences en recherche qualitative et en approches d’évaluation participative

Aptitudes à travailler en autonomie

Qualité en communication et en rédaction de documents/présentations en Français

Demande d’information complémentaire Toute demande de clarification ou d’information concernant cette Demande de Proposition devra être adressée aux personnes ci-dessous : Jeremie Toubkiss ([email protected]) et Yagouba Diallo ([email protected]), WASH Specialists, pour

les questions techniques Rachida Abdelli, Supply and Logistics Manager ([email protected])

Présentation de l’offre technique et financière

34

http://www.unevaluation.org/unegcodeofconduct 35

http://www.unevaluation.org/ethicalguidelines

Page 105: EVALUATION DU PROGRAMME WASH A L ECOLE AU MALI · 2020-04-29 · EVALUATION DU PROGRAMME WASH A L’ECOLE AU MALI Evaluation commanditée et financée par le Comité Espagnol UNICEF

HYDROCONSEIL

Evaluation du programme WASH à l’école -Spanish Natcom - Rapport d’évaluation Page 105

Le Soumissionnaire constituera son dossier comme suit :

1. une offre technique contenant : Lettre de soumission technique

Compréhension des TdR et propositions d’amélioration

Proposition méthodologique détaillée : critères et questions d’évaluation proposés ; design de l’évaluation surtout pour le critère d’impact ; base de jugement prévisionnelle ; acteurs et docu-ments à consulter ; méthodologie de collecte des données et d’échantillonnage ; éventuellement propositions alternatives d’outils de collecte, d’analyse et de restitution des données ; méthodolo-gie pour l’analyse et le traitement des données ; autres informations pertinentes

Constitution de l’équipe d’évaluation dont les qualifications sont conformes à la liste proposée ci-dessus et en rapport avec la méthodologie proposée par le Soumissionnaire

Chronogramme détaillé de la mission

Expériences et références précises du Soumissionnaire dans des prestations similaires accomplies durant les 5 dernières années, justifiées chaque fois que possible par des attestations de bonne fin

CV détaillés et à jour du personnel mobilisé, faisant ressortir leurs qualifications, et avec les con-tacts téléphonique et email à jour des clients précédents (commanditaires des prestations listées en références sur le CV)

Attestation de disponibilité du personnel mobilisé

Toute autre information et document utile

2. une offre financière contenant : Lettre de soumission financière

Budget global

Budget détaillé donnant une répartition précise des rubriques du montant de la soumission (hono-raires du personnel, voyages internationaux et transports locaux, équipements et matériels, com-munications, etc.) pour chaque activité (cf. liste des activités de 1 à 15 plus haut, plus autres activi-tés additionnelles éventuellement proposées par les évaluateurs)

Note : les frais de réunion seront pris en charge par l’UNICEF

Dépôt du dossier de soumission :

Par email uniquement, à l’adresse email suivante [email protected], au plus tard à la date et heure suivante : Vendredi 08 Août 2014 à 10h00 GMT

Mettre en objet de l’email : « Evaluation externe WASH à l’école - (nom du Soumissionnaire) »

L’offre technique sera envoyée en format PDF

L’offre financière sera envoyée en version PDF ; le budget sera également envoyé en format Excel en plus du format PDF

L’email d’envoi ne pourra pas dépasser 6 Mo maximum. Si les pièces jointes sont trop lourdes, les en-voyer en plusieurs emails séparés ne dépassant pas 6 Mo chacun.

Grille d’évaluation des offres techniques Critères techniques Barème

Méthodologie (compréhension des TdR, propositions d’amélioration, méthodologie proposée et chronogramme)

30 points

Références du bureau d’études (nombre et pertinence) 30 points

Qualification et références du personnel proposé 40 points

Total 100 points

Page 106: EVALUATION DU PROGRAMME WASH A L ECOLE AU MALI · 2020-04-29 · EVALUATION DU PROGRAMME WASH A L’ECOLE AU MALI Evaluation commanditée et financée par le Comité Espagnol UNICEF

HYDROCONSEIL

Evaluation du programme WASH à l’école -Spanish Natcom - Rapport d’évaluation Page 106

Les offres obtenant une note inférieure à 70 points lors de l’évaluation technique seront automatiquement éliminées.

Évaluation des offres financières Les soumissionnaires présélectionnées suite à l’évaluation technique verront leur offre financière évaluée, la note financière représentant 30% de la note finale. La note financière sera calculée de la manière sui-vante : 100 x montant du moins disant / montant de l’offre considérée. Le marché sera attribué au Soumis-sionnaire ayant obtenu le score technique et financier combiné le plus élevé.

CONDITIONS GENERALES DES CONTRATS DE SERVICES TERMES ET CONDITIONS GÉNÉRAUX DE L'UNICEF A. ACCUSE DE RECEPTION L'acceptation de ce Bon de Commande constitue un contrat qui oblige le Vendeur à livrer les services at-tendus à la date convenue tels que spécifiés dans le contrat. Après l'acceptation, les droits et obligations des parties sont déterminés exclusivement par le contrat. Aucune disposition supplémentaire ou incompa-tible proposée par le Vendeur ne pourra engager l'UNICEF, sans l'acceptation écrite d'un fonctionnaire de l'UNICEF dûment mandaté à cet effet. B. DATE DE LIVRAISON La date de livraison est la date à laquelle les services et rapports doivent être présentés à l'UNICEF à l'en-droit et aux conditions indiqués sur le contrat. C. CONDITIONS DE PAIEMENT 1. Les conditions de prestation remplies, et les produits ayant été acceptés, l'UNICEF effectuera le paiement dans un délai de 30 jours, sauf indication contraire spécifiée dans le contrat, à compter de la date de récep-tion de la facture, établie par le Vendeur, et les copies des documents habituels prévus dans le contrat. 2. Le paiement de la facture relative aux services sera effectué conformément aux conditions de paiement et en considération des rabais éventuels indiqués dans le contrat. 3. Sauf autorisation contraire donnée par l'UNICEF, le Vendeur devra établir une facture séparée par con-trat. Toute facture doit comporter le numéro d'identification du contrat concerné. 4. Les prix indiqués sur le contrat ne peuvent être majorés sans l'approbation formelle de l'UNICEF et l'émission d'un amendement du contrat. 5. L'UNICEF doit disposer, après livraison des services, d'un délai raisonnable pour analyser et refuser les services et rapports non conformes au contrat. Le paiement des services conformes au contrat ne constitue pas l'acceptation desdits services. D. EXONERATION FISCALE 1. La section 7 de la Convention sur les Privilèges et Immunités de l'Organisation de Nations Unies stipule, entre autres choses, que l'ONU, y compris ses organismes, est exonérée de tout impôt direct et de tout droit de douane à l'égard de marchandises importées ou exportées pour son usage officiel. Au cas où une autorité fiscale refuserait de reconnaître l'exonération fiscale de l'UNICEF, le Vendeur se mettra immédia-tement en rapport avec l'UNICEF en vue de déterminer une procédure mutuellement acceptable. 2. En conséquence, le Vendeur autorise l'UNICEF à déduire de ses factures tout montant correspondant à de tels droits ou impôts. Le montant facturé, ainsi minoré, sera réputé constituer la totalité des sommes dues par l'UNICEF. Si l'UNICEF autorise le Vendeur à effectuer le paiement de ces droits ou impôts, le Ven-deur devra justifier par écrit que les paiements de ces droits ou impôts ont été effectués et dûment autori-sés. E. LICENCES D'EXPORTATION Si une ou des licences d'exportation est ou sont exigée(s), le Vendeur devra obtenir cette ou ces licence(s).

Page 107: EVALUATION DU PROGRAMME WASH A L ECOLE AU MALI · 2020-04-29 · EVALUATION DU PROGRAMME WASH A L’ECOLE AU MALI Evaluation commanditée et financée par le Comité Espagnol UNICEF

HYDROCONSEIL

Evaluation du programme WASH à l’école -Spanish Natcom - Rapport d’évaluation Page 107

F. RISQUE DE PERTE Le Vendeur est responsable de tout risque de perte, de dommages ou de dégâts relatifs aux marchandises et services jusqu'à l'accomplissement de la livraison conformément aux conditions du contrat. G. PROPRIETE INDUSTRIELLE ET INTELLECTUELLE Le Vendeur garantit que l'utilisation par l'UNICEF des services proposés dans le contrat ne viole aucun bre-vet, marque de fabrique, marque déposée ou propriété intellectuelle. En outre, le Vendeur doit, dans le cadre de la présente garantie, indemniser et dédommager l'UNICEF et l'ONU de toute action en justice ou demande introduite contre elles concernant des infractions prétendues d'un brevet, d'une conception, d'une marque déposée, d'une marque de fabrique ou propriété intellectuelle relatives au contrat, et les défendre contre de telles infractions. H. LES DROITS DE L'UNICEF En cas de manquement du Vendeur à ses obligations contractuelles ou lorsqu'il apparaît que le Vendeur n'est pas en mesure d'exécuter ses engagements, ou qu'il a pris un tel retard que la livraison dans les délais contractuels est manifestement compromise, l'UNICEF aura la possibilité, après avoir accordé au Vendeur un délai raisonnable, d'exercer le et/ou les droits suivants : 1. Se procurer tout ou partie des services auprès d'un autre Vendeur, dans quel cas l'UNICEF pourra pré-tendre au remboursement de tout coût supplémentaire auprès du Vendeur défaillant. 2. Refuser d'accepter la livraison de tout ou partie des services et porduits. 3. Prononcer la résiliation de plein droit du contrat sans aucune formalité ni indemnité à sa charge. I. CESSION ET INSOLVABILITE 1. Le présent contrat ne pourra être ni cédé, ni sous-traité par le Vendeur, en tout ou partie, sans l'accord préalable écrit de l'UNICEF, laissé à sa discrétion. 2. Dans l'hypothèse où le Vendeur se trouverait en état de cessation de paiements, en règlement judiciaire ou en liquidation de biens, l'UNICEF pourra résilier le contrat par lettre recommandée. J. UTILISATION DU NOM ET DU SIGLE DE L'UNICEF Le Vendeur ou toute entreprise qui lui est apparentée n'acquiert pas, de par la Commande ou le Contrat qui lui a été passé, le droit d'utiliser directement ou indirectement le nom de l'UNICEF (y compris d'y faire quelque référence que ce soit dans une quelconque brochure, publicité, notice) que ce soit seul, on en con-jonction avec, ou comme partie de tout autre nom ou sigle. K. CONFIDENTIALITE Le Vendeur s'engage à garder strictement confidentielles et à faire traiter comme telles par son personnel et ses sous-traitants toutes informations que le Vendeur aura reçues de l'UNICEF à l'occasion, soit du con-trat conclu, soit des consultations préalables, informations techniques ou commerciales, verbales ou écrites. L. REGLEMENT DES LITIGES Tout litige survenant à l'occasion de l'interprétation et/ou de l'exécution du contrat, doit, à moins qu'une solution ne soit trouvée par négociation directe, être traité selon les règles d'arbitrage de l’UNCITRAL en vigueur. Toute sentence arbitrale rendue par l’UNCITRAL oblige les parties du contrat et constitue le règle-ment définitif d'un litige. M. PRIVILEGES ET IMMUNITES Les privilèges et immunités de l'ONU, y compris ses organismes, restent toujours en vigueur. N. DROITS DE L'ENFANT L'UNICEF souscrit entièrement à la Convention des Droits de l'Enfant et attire l'attention du Vendeur sur les termes de l'Article 32 de la Convention qui, entre autres, stipulent qu'un enfant devra être protégé contre

Page 108: EVALUATION DU PROGRAMME WASH A L ECOLE AU MALI · 2020-04-29 · EVALUATION DU PROGRAMME WASH A L’ECOLE AU MALI Evaluation commanditée et financée par le Comité Espagnol UNICEF

HYDROCONSEIL

Evaluation du programme WASH à l’école -Spanish Natcom - Rapport d’évaluation Page 108

l'accomplissement de tâches qui s'avèreraient périlleuses ou qui entraveraient son éducation, ou qui se-raient préjudiciables à sa santé ou à son développement physique, mental, spirituel, moral ou social. O. MINES ANTIPERSONNEL Le Vendeur atteste que ni sa société mère, ni aucune de ses sociétés filiales majoritaires ou minoritaires contrôlées par sa société, ne sont impliquées (i) dans la vente ou (ii) dans la fabrication de mines antiper-sonnel ou (iii) de composants entrant dans la fabrication ou le procédé de fabrication de mines antiperson-nel. Le Vendeur reconnaît et prend acte que toute infraction de sa part à cette clause autorise l'UNICEF à prononcer la résiliation de plein droit du contrat sans aucune formalité judiciaire et sans indemnité à sa charge. L’UNICEF se réserve le droit de rejeter l’une quelconque des offres soumises ou l’ensemble de celles-ci ou d’en retenir nonobstant l’existence d’un vice de forme et, à moins que l’UNICEF ou le soumissionnaire n’en ait expressément exclu la possibilité, d’accepter l’un quelconque des articles ou services proposés. Au cas où une offre contiendrait des erreurs dans le calcul du montant total, le prix unitaire prévaudra.

Page 109: EVALUATION DU PROGRAMME WASH A L ECOLE AU MALI · 2020-04-29 · EVALUATION DU PROGRAMME WASH A L’ECOLE AU MALI Evaluation commanditée et financée par le Comité Espagnol UNICEF

G.7. Annexe 7 : CV de l’équipe d’évaluation

Audrey CROCKER Née en 1985, Nationalité française

Spécialiste Eau et ssainissement

Evaluation de programme

QUALIFICATIONS CLEFS

Eau et assainissement : assainissement familial autonome, assainissement et promotion de l’hygiène en milieu scolaire (méthodes PHAST, campagne de sensibilisation), gestion de l’eau dans les milieux à faibles revenus (diagnostic des infrastructures existantes, modèles de gestion), Renforcement du secteur eau et assainissement (renforcement institutionnel, structuration des activités)

Aménagement du territoire/Urbanisme : diagnostic urbain, élaboration de document de planification ur-baine (schéma directeurs, règlement d’urbanisme, etc.), diagnostic des questions foncières et de logement dans les contextes post-crise (appui à l’élaboration des stratégies de relogement, à la normalisation des standards d’implantation et de construction

Genre et études socio-économique : place de la femme, mise en place de méthodes participatives (focus group, interviews, rencontre locales, etc.), enquêtes ménages et diagnostic pauvreté

Renforcement des capacités : conception et animation de modules de formation à l’attention des fonc-tionnaires territoriaux (administrations centrales, déconcentrées et décentralisées), organisation de sémi-naires comprenant des logistiques complexes

Cartographie et SIG : structuration de données, conception de cartes et édition

Gestion de projet : conception et développement d’outils de suivi (définition des indicateurs, mise en place des bases de données, analyses statistiques périodiques), évaluation de projet, gestion de ressources hu-maines et gestion financière

Gestion financière : analyse du cadre macro-économique (CDMT), étude des budgets communaux, élabora-tion de plans d’investissements, identification des ressources municipales mobilisables et mobilisées

FORMATION

2009 - 2010 Mastère spécialisé en gestion de l’eau et de l’assainissement - École Nationale du Génie Rural, des Eaux et des Forêts (ENGREF) - Montpellier

2007 - 2008 Master Ingénierie des Services Urbains en Réseaux dans les pays du Sud - Institut d’Etudes Politiques - Rennes

2004 - 2007 Maitrise Aménagement et développement local - Institut d’Aménagement Régional - Aix en Provence

Mémoire : De l’urgence à la reconstruction : le paradoxe d’un projet durable en temps de crise. Quelle place pour l’architecte et l’urbaniste dans les interventions post-catastrophe ? Etude de cas : Séisme du 8 octobre 2005 - PAKISTAN

LANGUE

Lu Ecrit Parlé

Page 110: EVALUATION DU PROGRAMME WASH A L ECOLE AU MALI · 2020-04-29 · EVALUATION DU PROGRAMME WASH A L’ECOLE AU MALI Evaluation commanditée et financée par le Comité Espagnol UNICEF

HYDROCONSEIL

Evaluation du programme WASH à l’école -Spanish Natcom - Rapport d’évaluation Page 110

Français Langue maternelle

Anglais Courant

EXPERIENCE PROFESSIONNELLE

URBACONSULTING/HYDROCONSEIL

HAITI (DIRECTEUR DE PROJET – FRANCE) 2014

Projet : Études et Supervision (conditionnelle) des travaux d’exécution des infrastructures urbaines prioritaires (VRD) des schémas d’aménagement à Martissant

Services fournis : Coordination de l’équipe du consortium, Gestion administrative et financière du projet, Assurance qualité des rendus et du chronogramme d’activités

Client : UCLBP Financement : AFD

MAURITANIE (DIRECTEUR DE PROJET – FRANCE) 2013

Projet : Evaluation ex-post du projet d’équipement et de Renforcement des Capacités des Communes et de la Communauté Urbaine de Nouakchott (CUN)

Services fournis : Coordination de l’équipe d’évaluateurs, Gestion administrative et financière du projet, Assurance qualité des rendus et du chronogramme d’activités

Client : AFD Financement : AFD

TOGO 2013

Projet : Recensement des commerçants occupant le domaine public et proposition de recasement

Services fournis : Réalisation d’un recensement des commerçants occupant le domaine publics dans les zones de commerce de la ville de Lomé. Etablissement d’une typologie d’activité et de type de stand et propositions pour réduire le nombre de ces activités dans la ville de Lomé

Mise en place une enquête « revendeurs » sur les principales artères de la ville (voies bitumées et pavées) dont la liste sera préalablement établie avec les autorités municipales et analyse des prin-cipaux résultats de l’enquête.

Visite terrain et rencontres institutionnelles permettant d’identifier des lieux pouvant accueillir les commerçants dans la ville de Lomé

Rédaction d’un plan de communication permettant à la ville de Lomé dans sa volonté de réduire le commerce de rue

Client : Municipalité de Lomé Financement : AFD

REPUBLIQUE DEMOCRATIQUE DU CONGO 2013/2014

Projet : Etude de la durabilité du programme Village et Ecole Assainis Phase 1 dans les 11 provinces de la RDC

Services fournis : Coordinatrice de la zone ouest puis Chef de mission - Réalisation de plus de 600 visites de terrain (6 000 ménages interrogés) dans les écoles et les villages du programme pour déterminer les fac-teurs de maintient ou de perte du statut assainis. Questionnaires semi-directif, focus group

Développement d’outils d’enquête sur PDA, test des versions pilotes sur le terrain, définition hypo-thèses de travail, mise en place de la base de données, analyse statistique des résultats d’enquête, formulation des conclusions,

Page 111: EVALUATION DU PROGRAMME WASH A L ECOLE AU MALI · 2020-04-29 · EVALUATION DU PROGRAMME WASH A L’ECOLE AU MALI Evaluation commanditée et financée par le Comité Espagnol UNICEF

HYDROCONSEIL

Evaluation du programme WASH à l’école -Spanish Natcom - Rapport d’évaluation Page 111

Organisation de la formation (en salle et in-situ) des 28 agents de terrain déployés dans le cadre de l’étude.

Organisation et supervision des tournées de terrain dans la zone Ouest du pays (Bas-Congo, Kinsha-sa, Bandundu, Equateur)

Assistance au chef de projet dans la production d’analyses croisées sur les 11 provinces et proposi-tions d’adaptations nationales pour le compte de la Cellule Nationale de Coordination du Pro-gramme Village et Ecole Assainis

Client : UNICEF Financement : UNICEF/DFID

CAMEROUN 2013

Projet : Diagnostic urbain et réalisation des Plans d’Investissement Prioritaires (voirie, drainage, équipe-ments marchands, etc.) dans 3 capitales Régionales du Cameroun (Garoua, Bertoua, Bafoussam)

Services fournis : Experte en développement urbain, en charge de l’analyse du fonctionnement des équi-pements marchands de 3 villes secondaires du Cameroun (Bafoussam, Bertoua, Garoua) :

1. Analyse de l’armature commerciale de chaque ville : identification et localisation des marchés et des fermes communautaires de chacune des 3 villes. Identification des dynamiques et des flux de personnes et de marchandises ;

2. Analyse du fonctionnement des marchés : réalisation de focus-groups avec les différents groupes de commerçants (détail, semi-gros et gros) et des visites terrain dans l’ensemble des marchés prin-cipaux et secondaires des villes ;

3. Rédaction de fiches signalétiques de chacun des marchés : identification de la fréquence et des horaires d’ouverture des marchés, de la typologie des emplacements de vente/des produits, ana-lyse du niveau d’équipements et de services dans et à proximité immédiate du marché ;

4. Analyse financière et du mode de gestion des marchés : analyse de la place des recettes « mar-chés » dans le budget de chaque communes, analyse du mode de collecte des taxes et loyers.

Client : MINDHU Financement : AFD

HAITI 2013

Projet : Evaluation mi-parcours du programme de gestion des déchets mis en place par CRS à Port-au-Prince

Services fournis : Evaluatrice principale /spécialiste en gestion des déchets, en charge de :

1. Définition de la méthodologie d’intervention : élaboration de la matrice d’évaluation répondant aux critères définis par la CRS, élaboration des outils de collecte de données (grilles d’entretien se-mi-dirigés, focus group, grille d’observation) à destination des gestionnaires du projet, des autorités politico-administratives, des bénéficiaires,

2. Réalisation de l’ensemble des entretiens et des visites terrain.

3. Analyses spécifiques sur : la gestion financière et comptable du projet (analyse des procédures, des plans de décaissement, évaluation des postes budgétaires, du taux d’exécution du projet, de l’investissement per Capita), la durabilité du projet au travers de l’appropriation et l’implication des populations, du SMCRS et des autorités locales dans les activités proposées,

4. Production du rapport d’évaluation : analyse des résultats obtenus à mi-parcours, identification des principaux points de blocages (contexte, mise en œuvre du projet, outils de suivi et de contrôle des activités, dépenses du projet), identification des forces et faiblesses des mécanismes de planifica-tion et d’exécution du projet pour formuler des recommandations en vue d’orienter CRS dans les 12 prochains mois de programme.

Page 112: EVALUATION DU PROGRAMME WASH A L ECOLE AU MALI · 2020-04-29 · EVALUATION DU PROGRAMME WASH A L’ECOLE AU MALI Evaluation commanditée et financée par le Comité Espagnol UNICEF

HYDROCONSEIL

Evaluation du programme WASH à l’école -Spanish Natcom - Rapport d’évaluation Page 112

Client : Catholic Relief Services (CRS) Financement : CRS, Croix-Rouge Américaine

JORDANIE 2013

Projet : Etude d’identification de projets urbains durables dans le Sud de la Méditerranée

Services fournis : Experte en développement urbain, en charge des activités du consortium en Jordanie.

1. Appui à la rédaction de la fiche pays par le consultant national, 2. Rencontres avec l’ensemble des acteurs institutionnels du développement urbain en Jordanie : Ha-

bitat, Aménagement du territoire, Transport, Environnement, Municipalité du Grand Aman, etc. 3. Identification de projet urbain portés par les institutions rencontrer. Evaluation de leur potentialité

grâce à une grille de critères tels que l’efficacité, la viabilité économique, l’intégration du projet dans la ville et mise en forme des dossiers de présentation à destination du client.

Client : AFD, Financement : AFD, BEI

HAITI 2013

Projet : Evaluation Finale du projet de construction d’abris temporaires de la Croix-Rouge Canadienne (CRC) en Haiti (Jacmel et Léogane)

Services fournis : Experte en sociologie et en méthodes participatives, en charge :

5. Définition de la méthodologie d’intervention : élaboration de la matrice d’évaluation répondant aux critères définis par la CRC, élaboration des outils de collecte de données (grilles d’entretien semi-dirigés, focus group, grille d’observation) à destination des gestionnaires du projet, des auto-rités politico-administratives, des bénéficiaires ;

6. Réalisation de 10 focus-group avec les bénéficiaires du projet pour évaluer leur satisfaction vis-à-vis des abris construits et des délais de réalisation des différentes phases de mise en œuvre ; ana-lyse des données collectées ;

7. Analyses spécifiques sur la gestion financière et comptable du projet (analyse des procédures, des plans de décaissement, évaluation des postes budgétaires, du taux d’exécution du projet, de l’investissement per Capita) ;

8. Production du rapport d’évaluation : analyse des résultats obtenus dans le cadre du projet et com-paraison aux objectifs initiaux de l’intervention CRC (contexte, mise en œuvre du projet, outils de suivi et de contrôle des activités, dépenses du projet), identification des forces et faiblesses des mécanismes de planification et d’exécution du projet pour formuler des recommandations en vue d’orienter les futures interventions de la CRC dans des projets similaires.

Client : Croix Rouge Canadienne. Financement : Croix Rouge Canadienne

Page 113: EVALUATION DU PROGRAMME WASH A L ECOLE AU MALI · 2020-04-29 · EVALUATION DU PROGRAMME WASH A L’ECOLE AU MALI Evaluation commanditée et financée par le Comité Espagnol UNICEF

HYDROCONSEIL

Evaluation du programme WASH à l’école -Spanish Natcom - Rapport d’évaluation Page 113

RÉPUBLIQUE CENTRAFRICAINE 2012 - 2013

Projet : Formulation d’un projet OBA (paiements basés sur les résultats) pour l’assainissement et l’eau pour des quartiers défavorisés de la ville de Bangui

Services fournis : Experte en sociologie et en méthodes participatives, en charge de :

1. Mener le diagnostic institutionnel du secteur de l’eau et de l’assainissement à Bangui : identifica-tion des acteurs, de leur forces et faiblesses, définir l’offre de service ;

2. Développer les outils et réaliser le suivi d’une enquête ménages de plus de 600 foyers : caracté-ristiques socio-économique des ménages, identification des comportements des populations des quartiers défavorisés de Bangui en termes d’accès à l’eau et à l’assainissement familial, analyse de la demande ;

3. Développer les outils pour la mise en œuvre d’une dizaine de focus Group avec les différents ac-teurs de l’eau et de l’assainissement dans la ville (gestionnaires des Bornes-fontaine, leader-communautaires, les utilisateurs SODECA, etc.) ;

4. Exploitation statistique et cartographiques des données collectées et rédaction du rapport de dia-gnostic ;

5. Réalisation du plan de communication pour accompagner la mise en œuvre du programme OBA eau et assainissement dans les 3 arrondissements ciblés.

Client : Word Bank. Financement : GPOBA

RÉPUBLIQUE CENTRAFRICAINE 2012 - 2013

Projet : Assistance technique pour améliorer la gestion urbaine des Mairies de Bangui et Bimbo à travers le renforcement des capacités et la mise en place d’outils de planification

Services fournis : Experte en gestion urbaine, en charge de :

1. Développer un programme de renforcement des capacités pour les deux municipalités basé sur un diagnostic organisationnel, financier et opérationnel, afin d’améliorer la gestion administrative et financières des affaires municipales, et de relancer les activités d’opération et de maintenance des services urbains (voirie & drainage principalement) ;

2. Mettre en œuvre le programme de renforcement des capacités : concevoir les modules de forma-tion, réaliser les séminaires et les séances de coaching, etc.

3. Encadrer une enquête concernant le recouvrement des activités taxables, le taux d’occupation des kiosques municipaux et le recouvrement des droits de ventes journaliers sur les marchés de la ville de Bangui (encadrement d’une équipe de 8 enquêteurs locaux, analyse des données, etc.) ;

4. Clarifier les responsabilités du Gouvernement, de la Mairie Centrale et des Mairies d’Arrondissement pour garantir un meilleur service à la population, et accompagner le processus de négociation et de signature d’un Contrat de Ville ;

5. Suivre la mise en œuvre des engagements versés au Contrat de Ville.

Client : Cities Alliance (Word Bank) Financement : Cities Alliance

RÉPUBLIQUE DÉMOCRATIQUE DU CONGO 2011

Description du projet : Evaluation finale du projet : « Amélioration des conditions d’hygiènes et sanitaires de la population scolaire du quartier Camp Luka, Kinshasa - 2010/2011 »

Page 114: EVALUATION DU PROGRAMME WASH A L ECOLE AU MALI · 2020-04-29 · EVALUATION DU PROGRAMME WASH A L’ECOLE AU MALI Evaluation commanditée et financée par le Comité Espagnol UNICEF

HYDROCONSEIL

Evaluation du programme WASH à l’école -Spanish Natcom - Rapport d’évaluation Page 114

Services fournis : Evaluatrice résidente pour la réalisation de l’évaluation finale du projet de la Croix-Rouge Espagnole concernant l’accès à l’eau et à l’assainissement en milieu scolaire.

1. Définition de la méthodologie d’intervention : élaboration de la matrice d’évaluation répondant aux critères définis par la CRE, élaboration des outils de collecte de données (grilles d’entretien se-mi-dirigés, focus group, grille d’observation) à destination des gestionnaires du projet, des autorités politico-administratives, des bénéficiaires,

2. Encadrement d’un enquêteur local, élaboration du planning de visites, contrôle des données collec-tées, analyse des entretiens

3. Analyses spécifiques sur la gestion financière et comptable du projet en co-gestion Croix-Rouge Congolaise/Croix-Rouge Espagnole (analyse des procédures, des plans de décaissement, évaluation des postes budgétaires, du taux d’exécution du projet, de l’investissement per Capita)

4. Production du rapport d’évaluation : analyse des résultats obtenus dans le cadre du projet et com-paraison aux objectifs initiaux de l’intervention CRE (contexte, mise en œuvre du projet, outils de suivi et de contrôle des activités, dépenses du projet), identification des forces et faiblesses des mécanismes de planification et d’exécution du projet pour formuler des recommandations en vue d’orienter les futures interventions de la CRE dans des projets similaires.

Client : Croix-Rouge Espagnole Financement : Junta de Comunidades de Castilla la Mancha (Province Espa-gnole)

RÉPUBLIQUE DÉMOCRATIQUE DU CONGO 2011

Description du projet : Définition et mise en œuvre d'un système de suivi-évaluation pour le projet "Village et Ecole assainis"

Services fournis : Coordinatrice résidente pour le suivi-évaluation d’un projet gouvernemental d’accès à l’eau et à l’assainissement en milieu rural et scolaire pour les provinces du Bas Congo et du Bandundu (coa-ching direct de quatre enquêteurs de terrain).

1. Développement d’outils d’enquête sur PDA, test des versions pilotes sur le terrain, définition des indicateurs de suivi, mise en place de la base de données, analyse statistique mensuelle et qua-drimestrielle des résultats d’enquête, formulation des recommandations,

2. Renforcement des analyses produites par les enquêteurs par des audits techniques des points d’eau défectueux (aménagement de source, forages avec dispositifs de pompes manuelles),

3. Audit des capacités de gestion des ONG locales partenaires du projet (ressources humaines, capaci-tés techniques, gestion administrative, gestion opérationnelle, relations avec les partenaires gou-vernementaux et les populations bénéficiaires),

4. Renforcement des capacités et formation des personnels décentralisés et déconcentrés du Minis-tère Provincial de la Santé dans la mise en place de nouveaux outils de gestion du programme (con-ception des modules de formation, animation du séminaire pour les acteurs locaux et provinciaux, suivi post-formation sur plusieurs mois)

5. Accompagnement de la Cellule de Coordination Eau et Assainissement du Ministère Provincial du Plan du Bas-Congo dans la mise en œuvre de son premier système de Benchmarking (identification des indicateurs, élaboration des plannings d’activités, formation théorique et pratique sur la col-lecte des informations et sur la production d’un rapport synthétique de Benchmarking)

6. Assistance au chef de projet dans la production d’analyses croisées sur les 5 provinces et proposi-tions d’adaptations nationales pour le compte de la Cellule Nationale de Coordination du Pro-gramme Village et Ecole Assainis

Page 115: EVALUATION DU PROGRAMME WASH A L ECOLE AU MALI · 2020-04-29 · EVALUATION DU PROGRAMME WASH A L’ECOLE AU MALI Evaluation commanditée et financée par le Comité Espagnol UNICEF

HYDROCONSEIL

Evaluation du programme WASH à l’école -Spanish Natcom - Rapport d’évaluation Page 115

Client et financement : UNICEF

RÉPUBLIQUE DÉMOCRATIQUE DU CONGO 2011

Description du projet : Élaboration du Plan d’Action Stratégique triennal (2011-2013) du Comité Provincial d’Action pour l’Eau et l’Assainissement (CPAEA) de la Province de Kinshasa.

Services fournis : Assistante du chef de mission pour l’élaboration du diagnostic des parties prenantes et l’élaboration d’un plan d’action détaillé pour les 3 années à venir.

1. entretiens avec les acteurs du secteur (Exécutif provincial, Partenaires techniques et financiers, en-tités décentralisées, etc.),

2. analyse des forces et faiblesses du CPAEA : base juridique, ressources humaines, financements au regard des Cadres de Dépenses à Moyens Termes du secteur

3. élaboration participative de propositions d’activités et réflexion sur le plan d’investissement.

Client et financement : SNV.

REPUBLIQUE DEMOCRATIQUE DU CONGO 2010 - 2011

Description du projet : Définition et mise en œuvre d'un système de suivi-évaluation pour le projet "Village et Ecole assainis"

Services fournis : Coordinatrice résidente dans la province du Bas-Congo. Organisation des activités de sui-vi-évaluation de programmes d’accès à l’eau et à l’assainissement familial en milieu rural et périurbain et d’accès à l’eau et assainissement en milieu scolaire - Promotion de l’hygiène individuelle et collective

1. Elaboration des outils de collecte de données permettant l’analyse de différents paramètres du programme (gestion, mise en œuvre, articulation intersectorielle, évaluation du changement de comportement en matière d’hygiène, prise en compte du genre, etc.)

2. Encadrement de trois agents de terrain congolais effectuant des enquêtes dans les villages et écoles du programme : Formation aux outils de collecte de données (focus groupe, entretiens semi-dirigés, formation aux techniques PHAST et aux techniques de mobilisation communau-taire), constitution de leurs chronogrammes de travail

3. Collecte et analyse mensuelle des données en vue d’une restitution trimestrielle aux partenaires gouvernementaux : Ministère Provincial de la Santé, Ministère Provincial de l’Education Primaire Secondaire et Professionnel,

4. Structuration des données en vue de leur intégration dans un système SIG. Production et édition de cartes pour la réalisation d’un Atlas Provincial du programme Village et Ecole Assainis dans la province du Bas-Congo

5. Définition des recommandations permettant aux acteurs décentralisés et déconcentrés des Minis-tères de la Santé et de l’Education Primaire Secondaire et Professionnel de réaliser les objectifs qui leur ont été fixé en terme d’accès à l’eau et à l’assainissement des communautés bénéficiaires du programme.

Client et financement : UNICEF

Page 116: EVALUATION DU PROGRAMME WASH A L ECOLE AU MALI · 2020-04-29 · EVALUATION DU PROGRAMME WASH A L’ECOLE AU MALI Evaluation commanditée et financée par le Comité Espagnol UNICEF

HYDROCONSEIL

Evaluation du programme WASH à l’école -Spanish Natcom - Rapport d’évaluation Page 116

ENGREF

OUGANDA 2010

Description du projet : Appui à la Chaire Eau pour Tous

Services fournis : Evaluer la faisabilité du montage d’un Executive Master Panafricain entre ParisTech (France), 2iE(Burkina-faso), l’université de Wits (Afrique du Sud), la National Water and Sewage Corporation et l’université de Makerere (Ouganda). Contribuer à la définition de projets de recherche au sein de la NWSC : réflexions avec les diffé-rents départements du NWSC à la définition de thème de recherche, de stages

Client : Chaire Eau pour Tous, ENGREF, Financement : AFD, DBSA, Chaire OpT

FRANCE 2009

Description du projet : Projet d’Adduction en Eau Potable de la ville de Gignac - Alimentation et sécurisation en eau des communes avoisinantes.

Services fournis : Analyse des ressources en eau des 9 communes du périmètre d’étude et estimation de leurs besoins actuels et futurs : étude de nouveaux sites de prélèvement, analyse de la filière la plus adaptée en termes de traite-ment de la ressource. Réflexions sur différents scénarios permettant la sécurisation en eau potable de la commune : interconnexion des réseaux, regroupement institutionnel des communes.

Client : Commune de Gignac, ENGREF, Financement : Commune de Gignac, ENGREF

CROIX ROUGE FRANÇAISE

FRANCE 2009

Description du projet : Assistance à la direction des relations et des Opérations Internationales - Pôle Tech-nique Eau et Assainissement dans la préparation d’un colloque Régional su secteur CRF WatSan.

Services fournis : Capitalisation des expériences CRF en RDC, Description méthodologique « approche communautaire » au sein de la CRF, Réalisation du document de communication.

Client : CRF

CONSORTIUM TERRITOIRE CONSEIL/JARRY

MADAGASCAR 2008

Description du projet : Elaboration du Schéma National d’Aménagement du Territoire de la République de Madagascar

Services fournis : Appui technique au Ministère de l’Aménagement du territoire pour la rédaction de sa stratégie urbaine :

1. Construction d’une grille de diagnostic et de documents « types » pour l’élaboration de dossiers de villes,

2. Analyse des budgets communaux des 11 villes et identification des ressources financières mobilisables et mobilisées par les municipalités

3. Rédaction des diagnostics thématiques (urbanisation et services urbains : eau, assainissement, transports et gestion des déchets) pour 11 villes du pays et réalisation d’une typologie.

Client : Ministère en charge de l’Aménagement du Territoire, Financement : PNUD

Page 117: EVALUATION DU PROGRAMME WASH A L ECOLE AU MALI · 2020-04-29 · EVALUATION DU PROGRAMME WASH A L’ECOLE AU MALI Evaluation commanditée et financée par le Comité Espagnol UNICEF

HYDROCONSEIL

Evaluation du programme WASH à l’école -Spanish Natcom - Rapport d’évaluation Page 117

FONDATION ARCHITECTE DE L’URGENCE

PAKISTAN 2007

Description du projet : rédaction d’un manuel de mise en sécurité et d’évaluation des dommages post-catastrophe

Services fournis : Définition des objectifs et de la méthodologie à adopter en situation post-catastrophe. Gestion administrative de la mission « Pakistan »

1. Analyse comparative des différents projets FAU pour identifier les principaux besoins d’informations des partenaires en situation post-catastrophe

2. Développement des outils de collecte d’informations standardisés aux gestionnaires de la crise (gouvernement, bailleurs internationaux, humanitaires) de définir leurs stratégies d’interventions post-catastrophe - Conception des questionnaires pour intégration dans un PDA

3. Premières réflexions sur l’intégration rapide et automatisée des données dans un SIG permettant de produire rapidement des analyses quantitatives localisée des dégâts (développer des stratégies de relogement d’urgence en zone sécurisée, préparer les politiques d’indemnisation des victimes, préparer les politiques et standards de reconstruction)

Client : UN-Habitat, Financement : UN-Habitat

AUTRES RUBRIQUES

PUBLICATIONS

Mémoire - Institut d’Aménagement Régional - Aix en Provence, France: De l’urgence à la reconstruction : le paradoxe d’un projet durable en temps de crise. Quelle place pour l’architecte et l’urbaniste dans les inter-ventions post-catastrophe ? Etude de cas : Séisme du 8 octobre 2005 - PAKISTAN

Etude de cas - Institut d’Etudes Politiques - Rennes, France : « Rattraper le passé pour anticiper le futur : Quel avenir pour les transports et la mobilité à Mumbai » - INDE.

Mémoire - ENGREF, Montpellier, France : Intervenir dans les Etats Fragiles : Après l’Urgence comment re-construire des services publics de base ?

INFORMATIQUE

Pack office ; Logiciel SIG (MapInfo, ArcGIS) ; Logiciel d’enquête (Sphinx) ; Logiciel DAO (Photoshop)

Page 118: EVALUATION DU PROGRAMME WASH A L ECOLE AU MALI · 2020-04-29 · EVALUATION DU PROGRAMME WASH A L’ECOLE AU MALI Evaluation commanditée et financée par le Comité Espagnol UNICEF

HYDROCONSEIL

Evaluation du programme WASH à l’école -Spanish Natcom - Rapport d’évaluation Page 118

Salif Ismaïla TRAORE Née en 1979, Nationalité malienne

PRINCIPALES QUALIFICATIONS

Monsieur Salif Ismaila TRAORE a travaillé pendant Plus de 5 ans en qualité d’assistant au Bureau d’études

CEDREF (Centre d’Etudes de Documentation de Recherche et Formation), pendant la période allant

d’octobre 2004 à Décembre 2010. D’avril 2011 à Mars 2012, il a travaillé au centre des objectifs du millé-

naire pour le développement pour l’Afrique de l’ouest et du centre ( Centre OMD – Afrique de l’Ouest et du

Centre ) en qualité d’assistant en suivi – évaluation et gestion de base de donnée dans le cadre de la révi-

sion des PDESC de 9 communes de la région de Ségou et de 6 communes du district de Bamako au compte

du volet villes et villages du millénaires . Enfin, il vient de terminer un contrat de consultant pour une du-

rée de 16 mois avec un consortium d’ONG internationales composées de WaterAId, Unicef, Oxfam, Save

the Children, et Care Mali dans le cadre de l’étude d’Impact l’initiative Dubai Cares liée à l’apprentissage et

la santé des élèves dans des écoles du premier cycle des zones d’intervention du consortium dans les ré-

gions de Koulikoro, Sikasso et le district de Bamako.

Très sérieux et courtois, il possède de réelles compétences rédactionnelles, une grande capacité d’analyse

et une autonomie.

ETUDES UNIVERSITAIRES ET SECONDAIRES

DATE ECOLE DIPLOME OBTENU

2002 – 2003 Faculté des Sciences Juridiques

et Économiques (F S J E) du Mali

Maîtrise en économie option gestion

2001 - 2002 Faculté des Sciences Juridiques

et Économiques (F S J E) du Mali

Licence en gestion

2001 – 1999 Faculté des Sciences Juridiques

et Économiques (F S J E) du Mali

Diplôme d'Etudes Universitaires Générales (D

E U G) en économie générale

1998 – 1999 lycée Fily Dabo Sissoko (LFDS) Baccalauréat série sciences exactes (S.E)

EXPRIENCES PROFESSIONNELLES

Du 17 Janvier 2013 au 30 Juin 2014 : l’étude d’Impact l’initiative Dubai Cares liée à l’apprentissage et la santé des

élèves dans des écoles du premier cycle des zones d’intervention du Projet Initiative Dubai Cares.

Employeur : le consortium d’ONGs composées d’ONG internationales (WaterAId, Unicef, Oxfam, Save the Chlidren, et

Care Mali) ;

Poste occupé : Consultant enquêteur ; Lieux : régions de Koulikoro, Sikasso et le district de Bamako.

Description des activités

- Affinement des outils d’évaluations à l’aide de logiciel ODK ;

- Entretien avec les directeurs et les élèves des écoles échantillonnées dans le cadre de l’évaluation pour la collecte de

données périodiques ;

Page 119: EVALUATION DU PROGRAMME WASH A L ECOLE AU MALI · 2020-04-29 · EVALUATION DU PROGRAMME WASH A L’ECOLE AU MALI Evaluation commanditée et financée par le Comité Espagnol UNICEF

HYDROCONSEIL

Evaluation du programme WASH à l’école -Spanish Natcom - Rapport d’évaluation Page 119

- Observations et contrôles des infrastructures et matériels d’hygiène et d’assainissement octroyés par le projet

initiatives Dubai-Cares aux écoles ;

- Procéder à un appel de présence dans chaque classe dans le but d’estimer le niveau d’absenteisme;

- Procéder à un prélèvement de sang de 40 élèves dans certaines écoles ciblées ;

- Prises de données périodiques dans les rapports scolaires relatives aux indicateurs de scolarisation et de

performance des élèves ;

- Faire l’apurement de données ;

- Produire des rapports de missions ;

- Tenir les fiches de gestion telles que : le journal des activités, la fiche de dépenses, le cahier de bord pour la moto,

etc…

Du 1er au 03 Novembre 2012 : Co-consultant pour la planification stratégique du Réseau Malien pour l’intégrité

et le dialogue Multi – acteurs dans le secteur Eau et Assainissement.

Activités réalisées :

- Clarification de la vision, du but, des objectifs du REMID - EA

- Elaboration d’un plan stratégique assorti d’un plan d’action pluriannuel

- Elaboration de la structure du REMID

Du 1er Avril 2011 au 1er Février 2012.

Employeur : Centre des Objectifs du Millénaire pour le développement - Afrique de l’Ouest et du Centre (OMD);

Poste occupé : Agent consultant ;Lieux : Région de Ségou et le District de Bamako

Description des activités

1. Contribution au développement et à l’affinement des outils de planification locale orientée sur les OMD et à

l’évaluation des besoins et coûts : Agriculture et sécurité alimentaire, genre, santé, eau et assainissement,

routes et énergie, éducation, santé, etc.

2. Appui à la gestion et la mise à jour des bases de données ;

3. Point focal national, Chargé de la révision des PDESC de 9 communes de SEGOU dans la zone inter – fleuve de

l’office du Niger dans le cadre du Projet Villages du Millénaire ;

4. Consultant chargé de faire la synthèse des PDESC de 9 communes du projet PVM (Projet Village du Millénaire) ;

- Assistant chargé de synthétiser les rapports sectoriels (éducation, santé, eau – assainissement, Routes et

Transport, énergie) des points focaux nationaux des six communes du district de Bamako dans le cadre du

Développement Urbain du district de Bamako pour l’atteinte des OMD (programme village du millénaire).

- Assistant chargé de faire la révision du PDESC de la commune III pour intégrer les axes OMD

- Préparation et Facilitation des ateliers de restitution et de validations.

D’octobre 2004 à Décembre 2010 : Assistant au bureau d’Etudes CEDREF SARL

Page 120: EVALUATION DU PROGRAMME WASH A L ECOLE AU MALI · 2020-04-29 · EVALUATION DU PROGRAMME WASH A L’ECOLE AU MALI Evaluation commanditée et financée par le Comité Espagnol UNICEF

HYDROCONSEIL

Evaluation du programme WASH à l’école -Spanish Natcom - Rapport d’évaluation Page 120

Détails de quelques activités menées

Dates Etudes Employeur Poste occupé Lieux

1er au 30 Dé-cembre 2010

Recensement des entreprises artisanales (2ème phase)

CEDREF sarl / minis-tère de l’artisanat

Superviseur Communes des cercles de Koutiala et Yorosso

Du 12 octobre au 03 novembre 2010

Recherche sur les paysans CEDREF/ Cabinet d’études TNS inter-national au Keneya / IER

Superviseur de l’équipe

Cercles de Kayes, Nioro, Diéma, Kita

En septembre 2010

Auto évaluation du Bureau de la Coopération Suisse

CEDREF Sarl Consultant Bamako

Du 18 au 29 août 2010

Evaluation des programmes décennaux PRODEC, PRODESS, PNAE, PRODEJ

CEDREF / RECOFEM Superviseur de l’étude

Kayes

En avril 2010 Evaluation de l’impact des ac-cords de partenariats écono-miques (APE) sur l’accès des services sociaux de base (san-té et éducation) au Mali.

Cabinet d’étude SEFAC / CAD Mali

consultant Bamako

En Mars 2010 (14 au 23)

Enquête sur l’exclusion sociale, politique et économique des personnes infectées ou affec-tées par le VIH.

CEDREF/ SE- HCNLS Superviseur Kayes, Diéma, Sandaré

Décembre 2009

(1er au 31)

recensement des entreprises

artisanales (1ère phase)

CEDREF Sarl / minis-

tère de l’artisanat

Superviseur Communes des

cercles de Diéma, Nioro et Yélimané

En Novembre 2009

Renforcement des organisa-tions paysannes dans l’office du Niger

CEDREF/ Ministère de l’agriculture

Superviseur / Cercles de Niono et Macina

En Octobre 2009 Evaluation de la campagne multimédia (Cinéma numérique ambulant) sur l'excision des filles

CEDREF / UNICEF Superviseur 13 Communes du cercle de Kayes

En juin 2009 Étude sur la sécurisation fon-cière du Périmètre Irrigué de Banguiéda (OPIB)

CEDREF / OPIB Consultant 27 Villages de la commune de Ban-guinéda

En mars 2009 Diagnostic et planification par-ticipative à l’intention des agents du Projet d’Investissement et de Déve-loppement des Régions Nord Mali (PIDRN)

CEDREF / PIDRN formateur Tombouctou (cercles de Bourem et de Gourma Rha-rous

De novembre à décembre 2008

Etude sur le soutien à la créa-tion des Comités de Gestion du Terroir Villageois (CGTV) et à la formation des leaders villa-geois

CEDREF / DRA Se-gou

Chef d’équipe 7 villages de la commune de Sana (cercle de Macina).

En septembre 2008

Etude MARP (méthode accélé-rée de recherche participative)

CEDREF / DRA Se-gou

Assistant consul-tant

7 villages de la commune de Sana

En juillet 2008 l’étude socio- économique de

l’agence de Développement du Nord Mali (ADN)

CEDREF/ ADN Assistant Bamako

Page 121: EVALUATION DU PROGRAMME WASH A L ECOLE AU MALI · 2020-04-29 · EVALUATION DU PROGRAMME WASH A L’ECOLE AU MALI Evaluation commanditée et financée par le Comité Espagnol UNICEF

HYDROCONSEIL

Evaluation du programme WASH à l’école -Spanish Natcom - Rapport d’évaluation Page 121

En novembre 2007

l’étude sur la gouvernance po-litique

CEDREF/ Mécanisme Africain

d’Evaluation par les Pairs (MAEP)

Assistant consul-tant

Sikasso

l’étude sur le niveau de satis-faction des usagers et des col-lectivités territoriales par rap-port aux services fournis par l’administration publique

Bac+/ CDI Assistant consul-tant

Bamako, Kayes et Koulikoro

En septembre 2007

Etude sur les potentialités tou-ristiques

CEDREF/ ministère du tourisme et de l’artisanat

Assistant

consultant

communes des cercles de Dioïla et de Kangaba

En Mars 2007 Etudes de référence du projet CT – DL

CEDREF / CT - DL Assistant

consultant

Communes des cercles de Bandia-gara, Bankass, Koro, Douentza

AUTRES EXPERIENCES

Dates Etudes Employeur Lieux

En Juin 2008 Etude CAP sur la fortification de l’huile de coton en vitamine A au compte de

l’ONG Internationale allemande Hellen Kel-ler / CEDREF.

Sikasso

En mars 2008 : Enquêtes successives sur le mobile paiement ou payement à distance à partir du téléphone portable et sur la qualité de service globale de orange Mali.

Orange Mali / CEDREF Kayes et Yélimané

En janvier 2008 : Enquête sur la qualité de service offert aux passagers de l’aéroport internationale de Bamako.

Millenium Challenge Account (MCA)/ CEDREF

Bamako

En juillet 2007 Enquête CAP des agents de 27 Départements Ministériels sur le VIH / SIDA .

Secrétariat Exécutif du Haut Conseil National de lutte contre le Sida (SE/ HCNLS)/ CEDREF

Cercles de Segu , Niono et Bla

En octobre 2006 : Etude de satisfaction des utilisa-teurs de téléphonies.

Comité de Régulation de Télécommunications (CRT)/ CEDREF

Kayes, Diéma, Nioro, Bafoulabe, Keniéba.

En juillet 2005 : l’étude socio- économique et cultu-relle du projet sur la conservation

de la biodiversité de la forêt clas-sée des Monts Mandingues

CEDREF et projet de conservation de la bio-

diversité

Koulikoro

En Mai 2005 Enquête sur le suivi des dépenses publiques jusqu’à leur destination (ESDD) au Mali.

Cette étude a concerné 1 500 écoles en plus des centres d’animation pédagogiques (CAP) et des Directions d’ Académie d’Enseignement (DAE).

Banque mondiale et le bureau d’études CEDREF.

Bamako, Kayes, Kouli-koro, Sikasso, Segou, Mopti et Gao

Page 122: EVALUATION DU PROGRAMME WASH A L ECOLE AU MALI · 2020-04-29 · EVALUATION DU PROGRAMME WASH A L’ECOLE AU MALI Evaluation commanditée et financée par le Comité Espagnol UNICEF

HYDROCONSEIL

Evaluation du programme WASH à l’école -Spanish Natcom - Rapport d’évaluation Page 122

FORMATIONS ET STAGES

Formations

Date Thème de formation Structure organisatrice

Du 05 au 11 mai 2011

Atelier méthodologique d’intégration des OMD dans un PDESC :

II. Le Bilan des diagnostics sectoriels OMD III. La formulation des orientations IV. La formulation du cadre logique V. L’élaboration du plan d’investissement

pluriannuel VI. Le plan annuel d’investissement

PRCAPL (Projet de Renforcement des Ca-pacités des acteurs en Planification locale)

le 17 et 18 mai 2011 Consultation sur la prévention du commerce illicite des produits contrefaits dans le domaine de la santé, l’environnement et la sécurité Alimentaire

Programme de Développement du Droit Commercial (CLDP) du ministère du com-merce des Etats – Unis, en collaboration

avec le ministère de l’économie, du com-merce et de l’industrie du Mali.

Du 29 au 31 juillet 2010

l’évaluation des projets et programmes :

I. Concepts et thèmes d’évaluation II. Modèles et méthodes d’évaluation III. Planification et gestion d’un processus

d’évaluation

l’Association québécoise de l’évaluation et le Centre de Formation et d’Appui Conseil pour le développement Local (Delta C).

En Septembre 2006 La bonne gouvernance le ministère des affaires étrangères du Mali et le CEDREF Sarl

En Août 2006 Séminaire de formation et d’information des dépu-tés de l’assemblée nationale sur :

IV. Les organisations sous régionales et l’intégration africaine

V. Le rôle des députés face à la mondialisation VI. La démocratie et le développement

Assemblée Nationale du Mali en relation avec CEDREF Sarl

En juillet 2006 Comment gérer mieux votre entreprise :

- La gestion des coûts - Les problèmes de gestion - L’amélioration de l’image de l’image -

CEDREF sarl

En Février - Mars 2005

Le genre et le développement

- L’intégration de l’approche genre dans les organisations paysannes

- La gestion des organisations paysannes

CEDREF Sarl

En novembre 2003 Comptabilité et gestion financière : Les thèmes ont porté sur :

- Le journal - Grand livre - Le Bilan - Les comptes d’exploitation - Le calcul des ratios et des indicateurs de

performances (le TRI, VAN, délai de récupération, la valeur ajoutée etc.)

L’observatoire des pratiques comptables en Afrique (OPCA)

Page 123: EVALUATION DU PROGRAMME WASH A L ECOLE AU MALI · 2020-04-29 · EVALUATION DU PROGRAMME WASH A L’ECOLE AU MALI Evaluation commanditée et financée par le Comité Espagnol UNICEF

HYDROCONSEIL

Evaluation du programme WASH à l’école -Spanish Natcom - Rapport d’évaluation Page 123

Stage effectué

Période Structure Principales tâches

Du 1er mars 2005 au 28 février 2006.

Centre d’Etudes de Documentation de Recherche et Formation (CEDREF SARL) en collaboration avec l’APEJ

La centralisation et le classement des CV et des termes de référence La préparation et l’exécution des missions de terrains

L’élaboration des rapports pério-diques

La gestion de la documentation et des pièces comptables

CONNAISSANCE EN INFORMATIQUE

Word ; Excel ;Internet;Power point; Access;

LANGUES

Langues Lues Parlées Ecrites

Français Bien Bien Bien

Anglais Moyen Moyen Moyen

Arabe passable - Passable

Bambara Bien Bien Bien

Page 124: EVALUATION DU PROGRAMME WASH A L ECOLE AU MALI · 2020-04-29 · EVALUATION DU PROGRAMME WASH A L’ECOLE AU MALI Evaluation commanditée et financée par le Comité Espagnol UNICEF

HYDROCONSEIL

Evaluation du programme WASH à l’école -Spanish Natcom - Rapport d’évaluation Page 124

Abdoulaye SOW Née en 1983, Nationalité malienne

ETUDES ET FORMATIONS

2007-2008 : Formation à l’institut de formation des maîtres (IFM) de Kayes niveau spécialiste : Mathéma-tique – Physique – Chimie (MPC).

2006-2007 : Maîtrise en gestion à la faculté des sciences économiques et de gestion (FSEG).

Du mois de juin au mois d’août 2006 : Formation en informatique sur les modules: Windows XP, World 2003, Excel 2003 et PowerPoint 2003 au School Net Mali (Attestation).

2005-2006 : Licence en gestion à la faculté des sciences économiques et de gestion (FSEG).

2004-2005 : Diplôme d’études universitaires générales (DEUG) option : Sciences économiques à la faculté des sciences juridiques et économiques (FSJE).

1999-2003 : Baccalauréat en série science exacte au lycée Ba Aminata Diallo (LBAD).

EXPERIENCES PROFESSIONNELLES

Janiver 2013 – Juin 2014 : suivi et évaluation du programme WASH (Eau, Hygiène et Assainissement) du consortium (CARE Mali, Oxfam, Save The Children, Unicef et Water Aid) Dubai Cares dans les écoles fon-damentales - Basé seul à Sikasso pour l’étude, je me chargeais de la collecte des données des écoles fon-damentales, du cercle de Sikasso et de certaines de Koutiala et Kadiolo, avec comme outil de collecte un smartphone et comme moyen de déplacement, une moto Yamaha sous forme de DT.(Attestation)

Juillet à Octobre 2012 : enquête sur le niveau économique et sanitaire à Sikoroni et Sourakabougou dans commune I du district Bamako au compte de l’IPA (Innovations for Poverty Action).

Février à Juin 2012 : suivi et évaluation du programme Millenium Chalengesur le niveau de vie des popula-tions vivants dans les zones irriguées et non irriguées dans 39 villages, dans le cercle de Niono, Macina et de Ségou au compte de l’IPA (Innovations for Poverty Action) (Attestation).

Décembre à Janvier 2012 : Superviseur sur une enquête sur les coopératives de production du coton (CPC) dans 24 villages dans le cercle de Bougouni et Yanfolila au compte de l’IPA (Innovations for Poverty Ac-tion).

Septembre à octobre 2011 : recensement dans la localité de Yanfolila au compte de l’IPA (Innovations for Poverty Action).

Janvier à mai 2011 : Enquête de suivi avec des ordinateurs, dans la région de Sikasso (Bougouni, Yanfolila), en quatre phases de 25 jours sous la direction d’une institution américaine du nom d’IPA (innovations for poverty action) (Attestation).

Octobre à Novembre 2010 : Enquête de suivi dans les zones de Bougouni et de Yanfolila sous la direction d’IPA(innovations for poverty action). A IPA les enquêtes se font avec des ordinateurs.

Septembre à Octobre 2010 : Stage pratique à la douane dans la direction du bureau 200 (du 01/09 au 15/09 BrigadeEscouade III, du 16/09 au 30 Magasin Somatram, du 01/10 au 15/10 Brigade Escouade I, du 16/10 au 31/10 Magasin Kaba).

Page 125: EVALUATION DU PROGRAMME WASH A L ECOLE AU MALI · 2020-04-29 · EVALUATION DU PROGRAMME WASH A L’ECOLE AU MALI Evaluation commanditée et financée par le Comité Espagnol UNICEF

HYDROCONSEIL

Evaluation du programme WASH à l’école -Spanish Natcom - Rapport d’évaluation Page 125

Aout 2010 : Enquête de suivi (12 jours) dans les zones de Bougouni sous la direction d’IPA(innovations for poverty action). A IPA les enquêtes se font avec des ordinateurs.

Janvier à mai 2010 : Enquête socioéconomique avec de ordinateurs, dans la région de Sikasso (Bougouni, Yanfolila), en trois phases de 25 jours sous la direction d’une institution américaine du nom de IPA (innova-tions for poverty action) (Attestation).

Février à mai 2009 : Enquête socioéconomique dans la région de Ségou sous la direction du groupe de re-cherche en économie appliquée et théorique (GREAT) et innovations for poverty action(IPA) (Attestation).

2005-2006 : Stage à la direction nationale du trésor et de la comptabilité publique (DNTCP) Division : suivi des recettes et des dépenses des collectivités territoriales.

INFORMATIONS COMPLEMENTAIRES

Langues parlées : Français, Bambara, Anglais notions.

Langues écrites : Français, Anglais notions.

Page 126: EVALUATION DU PROGRAMME WASH A L ECOLE AU MALI · 2020-04-29 · EVALUATION DU PROGRAMME WASH A L’ECOLE AU MALI Evaluation commanditée et financée par le Comité Espagnol UNICEF

HYDROCONSEIL

Evaluation du programme WASH à l’école -Spanish Natcom - Rapport d’évaluation Page 126

Laura BEAL Née en 1992, Nationalité française

Expert Junior

QUALIFICATIONS CLEFS

Cartographie et SIG : structuration de données, conception de cartes et édition

Aménagement du territoire/Urbanisme : diagnostic urbain, élaboration de document de planification urbaine (sché-ma directeurs, règlement d’urbanisme, etc.), diagnostic des questions foncières et de logement dans les contextes post-crise (appui à l’élaboration des stratégies de relogement, à la normalisation des standards d’implantation et de construction

FORMATION

2014 - 2015 Master 2 Urbanisme Habitat et Coopération Internationale – Institut d’Urbanisme de Grenoble

2013 - 2014 Master 1 Aménagement et Urbanisme – Institut d’Urbanisme de Lyon

Mémoire : Institut d’Urbanisme de Lyon, France : La place de l’intercommunalité dans la planification de l’urbanisme commercial – Exemple du Grand Lyon

2010 - 2013 Licence Géographie et Aménagement du territoire option Etudes Urbaines – Institut d’Urbanisme de Lyon

LANGUE

Lu Ecrit Parlé

Français Langue maternelle

Anglais Courant

EXPERIENCE PROFESSIONNELLE

CHAMBRE DE COMMERCE ET D’INDUSTRIE DE LYON - FRANCE FEVRIER – JUILLET 2014

Projet : Révision du volet commercial du Plan Local d’Urbanisme et d’Habitat du Grand Lyon

Services fournis : Réalisation d’un état des lieux des dispositifs de réglementation de l’urbanisme commercial dans le cadre de la révision du Plan Local d’Urbanisme et d’Habitat du Grand Lyon (France). Préconisation d’actualisation de ces outils.

Visite terrain et rencontres institutionnelles

Client : Communauté Urbaine de Lyon - Grand Lyon

SERVICE TECHNIQUE MAIRIE DE MIONS - FRANCE JUILLET 2013

Projet : Réalisation d’une étude préalable à la réalisation d’un complexe sportif

Services fournis : Rédaction d’un diagnostic territorial, d’un dossier pré-opérationnel et d’un programmation opéra-tionnelle

Visite terrain et rencontres institutionnelles

Page 127: EVALUATION DU PROGRAMME WASH A L ECOLE AU MALI · 2020-04-29 · EVALUATION DU PROGRAMME WASH A L’ECOLE AU MALI Evaluation commanditée et financée par le Comité Espagnol UNICEF

HYDROCONSEIL

Evaluation du programme WASH à l’école -Spanish Natcom - Rapport d’évaluation Page 127

STAGE MAISON DU RHONE DE MEYZIEU- FRANCE JUIN 2012

Projet : Réalisation d’un diagnostic d’aménagement, d’accessibilité aux Personnes à Mobilité Réduite et de sécurité d’une route départementale.

Visite terrain et rencontres institutionnelles

PUBLICATIONS

Mémoire - Institut d’Urbanisme de Lyon, France : La place de l’intercommunalité dans la planification de l’urbanisme commercial – Exemple du Grand Lyon

INFORMATIQUE

Pack office ; Logiciel SIG (MapInfo)

Page 128: EVALUATION DU PROGRAMME WASH A L ECOLE AU MALI · 2020-04-29 · EVALUATION DU PROGRAMME WASH A L’ECOLE AU MALI Evaluation commanditée et financée par le Comité Espagnol UNICEF

HYDROCONSEIL

Evaluation du programme WASH à l’école -Spanish Natcom - Rapport d’évaluation Page 128

G.8. Annexe 5 : Grilles d’entretiens et d’observation utilisées

1) FICHE 1 : DIRECTEUR NOM ECOLE……………………………

1. CGS : Le CGS intervient-il dans votre école ? De manière générale, le CGS est-il actif dans votre école ? Quel est son rôle au sein de la structure ? Pensez-vous que le CGS pourrait être plus actif dans le cadre du pro-gramme Wash à l’école ? Qu’est ce qui vous laisse pensez ça ? (l’idée est de sa-voir ici si les conditions sanitaires des écoles sont un aspect qui préoccupe les CGS, si non, alors il faut tenter de savoir pourquoi le CGS s’en désintéresse => conflit GCS/direction de l’école coopérative)

2. Sélection de l’école : Expliquez de quelle manière vous avez intégré ce programme ? Est-ce un souhait de votre part ? Quelles étaient vos motiva-tions ? A l’époque, quels bénéfices pensiez-vous en tirer ?

3. Quels sont les rôles des directeurs dans le cadre du programme Wash à

l’école ?, Cela vous a-t-il bien été expliqué au démarrage du programme ? Expliquez.

Page 129: EVALUATION DU PROGRAMME WASH A L ECOLE AU MALI · 2020-04-29 · EVALUATION DU PROGRAMME WASH A L’ECOLE AU MALI Evaluation commanditée et financée par le Comité Espagnol UNICEF

HYDROCONSEIL

Evaluation du programme WASH à l’école -Spanish Natcom - Rapport d’évaluation Page 129

4. Citez des exemples de pratiques init iées dans l’école et qui sont transfé-

rées dans les communautés ?

5. Existe-t-il un club d’Hygiène dans votre école ? Quelles sont les activités

du club d’Hygiène ? Expliquez. Dans l’école, dans la communauté.

6. Organisation des routines Si plusieurs écoles sont dans une même cours,

est ce que cela pose des problèmes d’organisation (certains n’entretiennent pas les infrastructures) ? Même question s’il existe une utilisation le matin de l’école puis avec une autre direction l’ap rès-midi ? Comment vous êtes-vous organisé avec les autres directeurs ? Les autres CGS ? Les autres clubs d’hygiène ? (sont-ils regroupés, etc.)

Page 130: EVALUATION DU PROGRAMME WASH A L ECOLE AU MALI · 2020-04-29 · EVALUATION DU PROGRAMME WASH A L’ECOLE AU MALI Evaluation commanditée et financée par le Comité Espagnol UNICEF

HYDROCONSEIL

Evaluation du programme WASH à l’école -Spanish Natcom - Rapport d’évaluation Page 130

7. Observation de mauvaises pratiques : qui se charge de la surveillance de

l’application des bonnes pratiques dans l’école ? En cas de mauvaises pra-tiques constatées, que ce passe-t-il ?

8. Formation du corps enseignants : Vous-même et les enseignants avez-

vous tous reçus une formation pour permettre d’intégrer les leçons et les activités Wash à l’école ? Si non, que se passe-t-il pour les enseignants non formés ? (formation par les pairs, pas d’activités EHA, etc.). Est -ce que de nouveaux enseignants sont arrivés à la rentrée scolaire ? Si oui, sont-ils capables de dispenser ces cours ?

Page 131: EVALUATION DU PROGRAMME WASH A L ECOLE AU MALI · 2020-04-29 · EVALUATION DU PROGRAMME WASH A L’ECOLE AU MALI Evaluation commanditée et financée par le Comité Espagnol UNICEF

HYDROCONSEIL

Evaluation du programme WASH à l’école -Spanish Natcom - Rapport d’évaluation Page 131

9. Qualité de la formation : La formation proposée vous semble-t-elle suffi-

sante ? Adéquate ? (exercices pratiques, lieu, durée, formateurs, etc.). Expliquez

10. Les outils didactiques (boîte à image, poster, guide, etc.) : Disposez-vous

de ces outils ? Si oui sont-ils utilisés ? Expliquez. Pensez-vous qu’ils sont faciles d’utilisation ? Expliquez. Pensez-vous qu’ils vont durer dans le temps ? Expliquez.

11. Latrines : Le programme a-t-il travaillé sur vos latrines (réhabilitation,

construction) ? Expliquez.

Page 132: EVALUATION DU PROGRAMME WASH A L ECOLE AU MALI · 2020-04-29 · EVALUATION DU PROGRAMME WASH A L’ECOLE AU MALI Evaluation commanditée et financée par le Comité Espagnol UNICEF

HYDROCONSEIL

Evaluation du programme WASH à l’école -Spanish Natcom - Rapport d’évaluation Page 132

12. Satisfaction des latrines : Etes-vous satisfaits de la localisation, de la con-

ception (design) et de leur réalisation ? Expliquez. Sont-elles appropriées pour tous les élèves (filles, handicapés) ?

13. Fonctionnalité des latrines : Vos latrines sont-elles toutes fonction-

nelles ? Expliquez. Si non expliquez pourquoi.

14. Vidange : Avez-vous été confronté à ce que l’une des fosses soit pleine ? Comment avez-vous réagit ? C'est-à-dire connaissez-vous la personne à contacter, l’avez-vous contacté, est-elle venue, comment avez-vous mobi-lisé l’argent ? Expliquez

Page 133: EVALUATION DU PROGRAMME WASH A L ECOLE AU MALI · 2020-04-29 · EVALUATION DU PROGRAMME WASH A L’ECOLE AU MALI Evaluation commanditée et financée par le Comité Espagnol UNICEF

HYDROCONSEIL

Evaluation du programme WASH à l’école -Spanish Natcom - Rapport d’évaluation Page 133

15. Si vous n’avez pas été confronté à cette situation, connaissez -vous le prix

du service ? Comment pensez-vous vous organiser pour faire face à cette situation ?

16. Point d’eau : Si vous disposez d’un point d’eau dans la cours de l’école,

avez-vous déjà fait face aux dysfonctionnements des pompes manuelles, des Bornes-fontaines ? C'est-à-dire connaissez-vous la personne à contac-ter, l’avez-vous contacté, est-elle venue, comment avez-vous mobilisé l’argent ? Expliquez. Si vous n’avez pas été confronté à cette situation, Comment pensez-vous vous organiser pour faire face à cette situation ?

17. Satisfaction des activités « hard » : Que pensez-vous de l’intervention des

prestataires de services et des travaux réalisés dans votre école ? Les ou-vrages d’eau ou d’assainissement vous ont -ils été remis de manière for-melle ? A quoi sert le bureau Sid-Certas ? Détailler ce que le directeur répond. Citer ces expressions

Page 134: EVALUATION DU PROGRAMME WASH A L ECOLE AU MALI · 2020-04-29 · EVALUATION DU PROGRAMME WASH A L’ECOLE AU MALI Evaluation commanditée et financée par le Comité Espagnol UNICEF

HYDROCONSEIL

Evaluation du programme WASH à l’école -Spanish Natcom - Rapport d’évaluation Page 134

18. Satisfaction des activités « soft » : Etes-vous satisfait du travail de sensi-

bilisation et d’animation réalisé par les ONG d’intermédiation sociale ? Expliquez. Qu’avez-vous le plus apprécié ? qu’auriez-vous supprimé ? que faudrait-il améliorer ? Détailler ce que le directeur répond. Citer ces expressions

19. Intrants : Expliquez de quelle manière l’école arrive -t-elle a acheter les

intrants tels que le savon, les balais, les produits de nettoyage, etc. Idem pour la maintenance des ouvrages (robinets, crochets latrines, etc.)

20. CAP/AE : Combien de fois par an, l’école reçoit -elle la visite des CAP, des AE ? Pour quels motifs ?

Page 135: EVALUATION DU PROGRAMME WASH A L ECOLE AU MALI · 2020-04-29 · EVALUATION DU PROGRAMME WASH A L’ECOLE AU MALI Evaluation commanditée et financée par le Comité Espagnol UNICEF

HYDROCONSEIL

Evaluation du programme WASH à l’école -Spanish Natcom - Rapport d’évaluation Page 135

21. Impacts : Pouvez-vous mesurer les impacts du programme dans votre

école (Fréquentation des élèves, des filles ?, amélioration de l’attention des enfants, amélioration de la santé des enfants, autres ?. Si oui, les-quels ? Avez-vous des outils à votre disposition ? Si oui lesquels et trans-mettez-les vous ? Si vous avez constaté des impacts, sont-ils constant tout au long de l’année ?

22. Ecoles propres : Avez-vous participé au concours « écoles propres » ? Si oui quel était votre classement ? En êtes-vous fier ? En avez-vous honte ?, Si vous avez gagné, qu’avez-vous fait de la somme remportée ? Avez-vous apprécié ce type de compétition ? Expliquez. Seriez-vous prêt, sur fonds propres à reproduire le même type de concours dans votre école ou au sein de la même cours ? Expliquez (comment, qui, avec quel argent, pou r-quoi).

Page 136: EVALUATION DU PROGRAMME WASH A L ECOLE AU MALI · 2020-04-29 · EVALUATION DU PROGRAMME WASH A L’ECOLE AU MALI Evaluation commanditée et financée par le Comité Espagnol UNICEF

HYDROCONSEIL

Evaluation du programme WASH à l’école -Spanish Natcom - Rapport d’évaluation Page 136

2) FICHE 2 : ENSEIGNANT NOM ECOLE……………………………

1. Formation : Les enseignants de l’école ont-ils reçu une formation

WASH ? A quoi sert cette formation ? Expliquez le déroulement et le contenu de la formation. Si vous n’avez pas été formé, comment donnez vous les leçons ? (formation par les pairs, pas d’activités EHA, etc. La formation proposée vous semble-t-elle suffisante ? Adéquate ? (exer-cices pratiques, lieu, durée, formateurs, etc .). Expliquez

2. Outils didactiques : 1. Utilisez-vous les outils mis à votre disposition lors de la formation WASH ? Arrivez-vous à mettre en place des activi-tés pratiques. Si oui lesquelles et expliquez. Si non expliquez pou r-quoi ?

3. Encadrement du club d’Hygiène : Avez-vous déjà encadré le club d’hygiène. Expliquez. Si vous deviez donner une note sur la fonctionn a-lité du club d’hygiène cela serait …X/10. Selon quels seraient les points à améliorer pour permettre un meilleur fonctionnement du club d’hygiène ?

Page 137: EVALUATION DU PROGRAMME WASH A L ECOLE AU MALI · 2020-04-29 · EVALUATION DU PROGRAMME WASH A L’ECOLE AU MALI Evaluation commanditée et financée par le Comité Espagnol UNICEF

HYDROCONSEIL

Evaluation du programme WASH à l’école -Spanish Natcom - Rapport d’évaluation Page 137

4. Utilisation des latrines : Selon vous, les latrines de votre école sont -elles utilisez par les enfants ? Si non, expliquez. Vous-même utilisez-vous ces infrastructures ? Si non, expliquez. Pensez-vous que ces la-trines sont fonctionnelles (design, localisation, adaptées au sexe, etc.)

5. Utilisation du point d’eau : La communauté scolaire (enfants et corps enseignant) consomme-t-elle l’eau du point d’eau de l’école ? L’eau est-elle payante , pour l’école et/ou pour la communauté ? Expliquez.

6. Utilisation de la station de lavage des mains par les enseignants : Utili-sez-vous (enfants et enseignants) les dispositifs lave-mains ? Etes-vous satisfaits de ces infrastructures (conception, construction, loc alisa-tion) ? Y-a-t-il toujours de l’eau dans les stations de lavage des mains ? Du savon ?

Page 138: EVALUATION DU PROGRAMME WASH A L ECOLE AU MALI · 2020-04-29 · EVALUATION DU PROGRAMME WASH A L’ECOLE AU MALI Evaluation commanditée et financée par le Comité Espagnol UNICEF

HYDROCONSEIL

Evaluation du programme WASH à l’école -Spanish Natcom - Rapport d’évaluation Page 138

7. Utilisation de la station de lavage des mains par les enfants : Organi-

sez-vous des séances communes de lavage des mains ? Si oui expliquez à quel moment, à quelle fréquence, de quelle manière et quelles sont les réactions des enfants ? Si non expliquez pourquoi ?

8. Mauvaises pratiques et sanctions : Avez-vous déjà remarqué de mau-vaises pratiques EHA dans l’école. Quelle a -été votre réaction ? Expli-quez. Existe-t-il des sanctions appliquées dans l’école ? Expliquez.

9. Appropriation des enseignants : Avez-vous déjà construit un Tippy-taps ? Chez vous disposez-vous d’un lave main/tippy tap ? Vos pra-tiques d’hygiène ont-elles changées depuis le programme (fréquence et qualité d’utilisation)? Vous lavez-vous davantage les mains ? Allez-vous aux latrines ? etc.

Page 139: EVALUATION DU PROGRAMME WASH A L ECOLE AU MALI · 2020-04-29 · EVALUATION DU PROGRAMME WASH A L’ECOLE AU MALI Evaluation commanditée et financée par le Comité Espagnol UNICEF

HYDROCONSEIL

Evaluation du programme WASH à l’école -Spanish Natcom - Rapport d’évaluation Page 139

10. Appropriation par les enfants : Que pensez-vous de l’implication

des enfants dans l’amélioration de l’environnement san itaire de leur école ? Leur niveau de connaissance en matière d’EHA a -t-il augmenté ? Respectent-ils les bonnes pratiques ? Apprécient-ils le club d’hygiène ? Dénoncent-ils les autres enfants qui ne suivent pas les pratiques d’hygiène (quel est leur intérêt pour l’EHA)?

11. Avis sur le programme Wash à l’école : Que pensez-vous du pro-gramme ? Trouvez-vous que c’est une bonne initiative ? Diriez -vous qu’il est efficace ? Observez-vous des impacts sur la santé des élèves ? Si vous deviez changer 3 choses dans le programme, lesquelles se-raient-elles ? Si vous ne deviez conserver que 2 choses dans le cadre de ce programme, lesquelles seraient-elles

12. Durabilité : Pensez-vous que les bonnes pratiques vont perdurer après l’achèvement du programme ? Via quels mécanismes ? Selon-vous, continuerez-vous à utiliser les outils, à enseigner les leçons d’hygiène ? Expliquez. Pensez-vous que les infrastructures seront suff i-samment robustes ?

Page 140: EVALUATION DU PROGRAMME WASH A L ECOLE AU MALI · 2020-04-29 · EVALUATION DU PROGRAMME WASH A L’ECOLE AU MALI Evaluation commanditée et financée par le Comité Espagnol UNICEF

HYDROCONSEIL

Evaluation du programme WASH à l’école -Spanish Natcom - Rapport d’évaluation Page 140

Questions supplémentaires permettant de remplir la grille d’observation

Enseignants 10 points

Est-ce qu’il y a au moins un enseignant désigné comme responsable de

la propreté à l’école et qui encadre le club d’hygiène ? Oui (3 points) Non (0 point)

Est-ce que la boîte à images est facilement accessible aux ensei-

gnants ? Oui (2 points) Non (0 point)

Est-ce que tous les enseignants l’ont utilisé au moins une fois depuis le

début de l’année ? Oui (5 points) Non (0 point)

Page 141: EVALUATION DU PROGRAMME WASH A L ECOLE AU MALI · 2020-04-29 · EVALUATION DU PROGRAMME WASH A L’ECOLE AU MALI Evaluation commanditée et financée par le Comité Espagnol UNICEF

HYDROCONSEIL

Evaluation du programme WASH à l’école -Spanish Natcom - Rapport d’évaluation Page 141

3) FICHE 3 : CLUB D’HYGIENE NOM ECOLE……………………………

Nombre de membres interrogés : ………….

Nombre d’écoles concernées : …………

Mixité des niveaux (primaire/secondaire) : oui non

1. Expliquez ce qu’est un club d’hygiène : Combien de membres y a-t-il ? Quelle classe ? Filles/Garçons ? De quelle manière le club d’hygiène a -t-il été constitué (volontariat, vote, désignation) ? Le club d’hygiène pour cette année scolaire a-t-il été constitué ? êtes-vous encadré par un enseignant. Si oui, que vous aide-t-il a faire ?

2. Raisons pour faire partie du club : Pourquoi avez-vous voulu faire parti du club ? Qu’est ce qui vous plait dans ce club ? Expliquez.

3. Activités : Quelles sont les différentes tâches du club d’hygiène ? Qui vous a appris à réaliser ces tâches ? Quel est votre rôle auprès des autres élèves ? S’il existe plusieurs école dans 1 même cours, les clubs d’hygiène sont-ils mixtes (avec des enfants des différentes écoles )? Si oui cela pose-t-il des problèmes dans la réalisation des activités ?. Est-ce que les autres élèves sont autant investis que vous dans le respect des bonnes pratiques d’hygiène ? Et les enseignants respectent -ils les bonnes pratiques ? (Est-ce qu’ils vous écoutent ? Si non, pourquoi ? Si non, que se passe-t-il ?)

Page 142: EVALUATION DU PROGRAMME WASH A L ECOLE AU MALI · 2020-04-29 · EVALUATION DU PROGRAMME WASH A L’ECOLE AU MALI Evaluation commanditée et financée par le Comité Espagnol UNICEF

HYDROCONSEIL

Evaluation du programme WASH à l’école -Spanish Natcom - Rapport d’évaluation Page 142

4. Rencontre du club d’hygiène A quelle fréquence vous réunissez-vous ? Que se passe-t-il lors de ces réunions ? Prenez-vous la parole pour donner votre avis ? Si non expliquez pourquoi.

5. Implication : Avez-vous participé à la construction des infrastructures (Tippy Tap par exemple). Le lavage des mains est -il pratiqué réguliè-rement ? (A quel moment ? Séance collective avec l’enseignant ?)

6. Infrastructures : Etes-vous satisfaits de ces infrastructures (latrines et dispositifs lave-mains) ? (localisation conception, construction) Les filles notamment ? Les utilisez-vous ? Sont-elles utilisées correctement ? Sont-elles nettoyées régulièrement ? Expliquez les éventuels pr o-blèmes

Page 143: EVALUATION DU PROGRAMME WASH A L ECOLE AU MALI · 2020-04-29 · EVALUATION DU PROGRAMME WASH A L’ECOLE AU MALI Evaluation commanditée et financée par le Comité Espagnol UNICEF

HYDROCONSEIL

Evaluation du programme WASH à l’école -Spanish Natcom - Rapport d’évaluation Page 143

13. Utilisation de la station de lavage des mains par les enfants : Uti-lisez-vous les dispositifs lave-mains ? Et les autres enfants ? Etes-vous satisfaits de ces infrastructures (conception, construction, localis a-tion) ? Y-a-t-il toujours de l’eau dans les stations de lavage des mains ? Du savon ?

7. Mauvaises pratiques et sanctions : Avez-vous déjà remarqué de mau-vaises pratiques EHA dans l’école. Quelle a -été votre réaction ? Expli-quez. Existe-t-il des sanctions appliquées dans l’école ? Expliquez.

8. Ecoles propres : Avez-vous participé au concours « écoles propres » ? Si oui quel était votre classement ? En êtes-vous fier ? En avez-vous honte ?, Avez-vous apprécié ce type de compétition ? Expliquez. Quel été votre rôle ?

Page 144: EVALUATION DU PROGRAMME WASH A L ECOLE AU MALI · 2020-04-29 · EVALUATION DU PROGRAMME WASH A L’ECOLE AU MALI Evaluation commanditée et financée par le Comité Espagnol UNICEF

HYDROCONSEIL

Evaluation du programme WASH à l’école -Spanish Natcom - Rapport d’évaluation Page 144

9. Changement de comportement : Vos pratiques d’hygiène ont-elles changées depuis le programme (fréquence et qualité d’utilisation)? Vous lavez-vous davantage les mains ? Allez-vous aux latrines ? etc.

10. Avis sur le programme : Trouvez-vous qu’il est une bonne initia-tive ? Avez-vous observé des impacts sur votre santé ? Sur un papier écrivez les 2 bonnes choses du programme et les 2 mauvaises choses dans la mise en œuvre des activités du club d’hygiène ?

Page 145: EVALUATION DU PROGRAMME WASH A L ECOLE AU MALI · 2020-04-29 · EVALUATION DU PROGRAMME WASH A L’ECOLE AU MALI Evaluation commanditée et financée par le Comité Espagnol UNICEF

HYDROCONSEIL

Evaluation du programme WASH à l’école -Spanish Natcom - Rapport d’évaluation Page 145

4) FICHE 4 : ELEVES NOM ECOLE…………………………………

L’école a bénéficié d’un appui dans :

Soft Hard point d’eau Hard Latrine

Nombre d’enfant intérogés :…………..

1. Point d’eau : Avez-vous toujours accès à l’eau de boisson à l’école ? Si oui, que pensez-vous de l’eau que vous buvez ?

2. Latrines : Utilisez-vous les latrines de l'école? Si au moins 1 non, d e-mandez d’expliquer pourquoi (Les élèves n'ont pas envie de faire leurs besoins, Les toilettes sont trop sales, Les toilettes sont mal placées (i n-timité, distance, orientation, etc.), Les toilettes sont fermées, Les élèves ont l'habitude de faire leurs besoins dans la nature, etc.). Cela est-il différent fille/garçon ?

3. Lavage des mains : Tous les jours avez-vous accès à des stations de la-vage des mains ? Y-a-t-il toujours de l’eau ? Du savon ? Ces installation sont-elles pratiquent ? Expliquez. Combien d’enfants se sont -ils lavés les mains à l’école depuis la veille (X/Y) ? Si au moins 1 non, expliquez les raisons (ex : Il n'y a pas de point de lavage des mains, La station de lavage des mains n'est pas fonctionnelle, La station de lavage des mains est trop sale, Ne trouvent pas cela utile, ils ne savent pas expl i-quer, etc.)

Page 146: EVALUATION DU PROGRAMME WASH A L ECOLE AU MALI · 2020-04-29 · EVALUATION DU PROGRAMME WASH A L’ECOLE AU MALI Evaluation commanditée et financée par le Comité Espagnol UNICEF

HYDROCONSEIL

Evaluation du programme WASH à l’école -Spanish Natcom - Rapport d’évaluation Page 146

4. Mauvaises pratiques : Observez-vous encore aujourd’hui des enfants qui font leur besoin dans la cour ou autour de l’école . Pourquoi pensez-vous qu’ils continuent malgré la présence de latrine dans l’école ? Que se passe-t-il pour eux ?

11. Leçons relatives à l’EHA : Citez 2 leçons EHA. Est-ce que ces cours vous plaisent ? Expliquez pourquoi (exercices pratiques, boite à image, etc.).

12. Ecoles propres : Avez-vous participé au concours « écoles propres » ? Si oui savez-vous quel était votre classement ? En êtes-vous fier ? En avez-vous honte ?, Avez-vous apprécié ce type de compéti-tion ? Expliquez. Quel été votre rôle ?

Page 147: EVALUATION DU PROGRAMME WASH A L ECOLE AU MALI · 2020-04-29 · EVALUATION DU PROGRAMME WASH A L’ECOLE AU MALI Evaluation commanditée et financée par le Comité Espagnol UNICEF

HYDROCONSEIL

Evaluation du programme WASH à l’école -Spanish Natcom - Rapport d’évaluation Page 147

5. Avis sur le programme : En matière d’eau, d’hygiène et d’assainissement, écrivez sur un papier les 3 principales choses qui ont changé dans votre école ? Dans votre maison ? Les changements dans votre maison sont-ils intervenus avant ou après les changements à l’école ?

Questions supplémentaires (permettent de remplir la grille de notation Hygiène scolaire)

Est-ce que tous les élèves se lavent les mains en rang avant d’entrer en

classe ou en sortant ? (observer les élèves et/ou interroger 3 élèves au ha-

sard)

Oui (10 points) Non (0 point)

Est-ce que quelqu’un à l’école surveille la pratique du lavage des mains

au savon aujourd’hui ? (observer la situation, et/ou interroger 3 élèves

au hasard)

Oui (2 points) Non (0 point)

Page 148: EVALUATION DU PROGRAMME WASH A L ECOLE AU MALI · 2020-04-29 · EVALUATION DU PROGRAMME WASH A L’ECOLE AU MALI Evaluation commanditée et financée par le Comité Espagnol UNICEF

HYDROCONSEIL

Evaluation du programme WASH à l’école -Spanish Natcom - Rapport d’évaluation Page 148

5) FICHE 5 : RENCONTRE REHA

1. Qu’est ce que le REHA ? De quand date sa création ? Qui le compose ? Quelles activités ?, La présidence est assurée par Solidarité Plurielle, cela a-t-il vocation à changer ? Quels sont les « droits et devoirs » des ONG partenaires ?

2. Quel est le lien du REHA par rapport au programme WSAH à l’école (et non SP). Qu’est ce que cela peut apporter aux ONG locales ?

Lien passé ? Lien futur ?

3. Avez-vous (le REHA) participez à la réalisation d’activités EHA dans les écoles avec d’autres partenaires ? Si oui, expliquer.

4. Qu’attendez-vous de l’UNICEF ? Qu’attendez-vous de l’engagement des ONG du REHA dans le cadre du programme WASH à l’école ?

Page 149: EVALUATION DU PROGRAMME WASH A L ECOLE AU MALI · 2020-04-29 · EVALUATION DU PROGRAMME WASH A L’ECOLE AU MALI Evaluation commanditée et financée par le Comité Espagnol UNICEF

HYDROCONSEIL

Evaluation du programme WASH à l’école -Spanish Natcom - Rapport d’évaluation Page 149

6) FICHE 6 : RENCONTRES MOST SIGNIFICANT CHANGE

Rencontre avec les ONG d’intermédiation sociale

Lancement de la discussion : Elément de contexte L’entretien avec les ONG débutera par un tour de table des différentes ONG présentes afin que chacune se présentent et décrivent rapidement la nature de son intervention, sa localisation et sa durée (la nature des interventions sera probablement identique du fait de l’harmonisation des PCA), les difficultés de mise en œuvre ou les success-story. Cette étape permettra à chacun (notamment le consultant) de mieux appré-hender le contexte dans lequel se sont déroulées les histoires qui seront racontées par la suite. Les ONG sont alors invitées à s’approprier la thématique en nous faisant partager leur expérience. A tour de rôle, chaque ONG raconte les faits significatifs dont elle a été témoin, détaille les évolutions qu’elle a observées, les histoires dont elle a elle-même entendu parler… Une histoire entraine d’autres histoires. Les ONG se répondent en décrivant leurs propres expériences.

Dans l’idéal, les évaluateurs interviendront très peu dans la discussion pour ne pas orienter les entretiens et se contenteront de collecter les histoires. Les quelques interventions seront essentiellement là pour relan-cer la discussion, introduire une nouvelle thématique, « creuser » certaines histoires qui mériteraient plus de détails, qui manquent de clarté ou dont l’authenticité est mise en doute. Ils interviendront également pour conclure une histoire en faisant ressortir sa signification (c’est-à-dire les recommandations ou les le-çons apprises) si toutefois l’auteur n’arrive pas lui-même à cette conclusion.

1ère question sur le modèle Most-Significant Change Une première question très ouverte est posée selon la méthode du Most Significant Change afin d’avoir un premier aperçu des impressions de chacun.

Par exemple : De quelle manière s’est déroulé votre travail d’intermédiation sociale au sein de vos écoles d’intervention ? des communautés ?

Cette question permet de faire émerger quelques domaines de discussions qui peuvent venir s’ajouter aux différentes thématiques que les évaluateurs ont choisi d’aborder.

Alimentation de la discussion Puis d’autres questions (limitées) et très ouvertes seront également posées aux ONG d’intermédiation so-ciale pour permettre d’aller plus loin dans la thématique générale précédemment abordée ou bien de réo-rienter la conversation vers d’autres thématiques

Par exemple Approfondissement de la thématique :

Quelles ont été vos difficultés dans la réalisation des activités,

Quelles sont selon vous les bonnes pratiques observées, quels sont les faits marquants,

Quelles sont les motivations et quel est le degré d'engagement des acteurs scolaires/des services de l'état (AE, CAP,DRACPN, etc.) lors des activités de sensibilisation), etc.,

Variation du sujet principal

Avez-vous perçu une amélioration notable des "conditions économiques" de l'école ainsi qu'une amélioration de la mobilisation des fonds par les CGS pour la réalisation des plans annuels,

La contractualisation avec l'UNICEF (PCA),

La coordination des activités, le reporting, les activités de suivi entre vos

Page 150: EVALUATION DU PROGRAMME WASH A L ECOLE AU MALI · 2020-04-29 · EVALUATION DU PROGRAMME WASH A L’ECOLE AU MALI Evaluation commanditée et financée par le Comité Espagnol UNICEF

HYDROCONSEIL

Evaluation du programme WASH à l’école -Spanish Natcom - Rapport d’évaluation Page 150

structures / SNV ou Protos et l'UNICEF et le renforcement de capacité dont vous avez peut-être bénéficié durant ces quelques mois de travail dans le programme : ce qui a marché, ce qui a été amélioré au fil des PCA, ce qu'il faudrait encore améliorer selon vous, etc.

Une fois l’ensemble des thèmes abordés et des histoires racontées, les évaluateurs feront un bref rappel

des principales histoires puis celles les plus significatives seront sélectionnées par l’ensemble des partici-

pants. Il s’agit d’une étape délicate car il ne sera pas forcement aisé pour les ONG de prendre du recul sur

leurs propres perceptions et de regarder toutes les histoires dans une perspective plus large pour identifier

ce qui est le plus significatif pour le projet. Pour pallier à cette situation, le consultant pourra éventuelle-

ment proposer la mise en de différents critères permettant de sélectionner les histoires, à savoir :

leur représentativité par rapport aux changements induits,

leur authenticité,

leur concordance avec les valeurs du programme,

niveau de détails et passion du récit, préférence personnelle, etc.

La sélection sera dans tous les cas argumentée.

Représentativité du changement

Authenticité Concordance avec les valeurs du pro-

gramme

Niveau de détails Passion du récit

Préférence person-nelle et collective

Histoire 1 X X X

Histoire 2 X X X

Histoire 3 X X

Histoire 4 X X X

Histoire 5 X X

Rencontre avec les entreprises de travaux

La même méthodologie sera appliquée lors de la rencontre avec les entreprises prestataires de services à la

différence que ces dernières n’ont pas le même « package » d’intervention : certaines ont construit des

bornes fontaines, d’autres des forages, tandis que d’autres encore ont été contractualisées pour la cons-

truction des blocks latrines.

Ainsi cette diversité de situation, entrainera de fait une diversité d’histoire et de situation. Toutefois il sera

intéressant de pouvoir mettre en évidence les points communs entre les histoires.

De même que pour les ONG, une première question très ouverte sera posée selon la méthode du Most Si-gnificant Change afin d’avoir un premier aperçu des impressions de chacun.

Par exemple : De quelle manière s’est déroulé votre de construction d’infrastructures au sein de vos écoles d’intervention ? des communautés ?

Les questions suivantes porteront sur

Par exemple Approfondissement de la thématique :

Quelles ont été vos difficultés dans la réalisation des travaux,

Quelles sont selon vous les bonnes pratiques observées, quels sont les faits marquants,

Page 151: EVALUATION DU PROGRAMME WASH A L ECOLE AU MALI · 2020-04-29 · EVALUATION DU PROGRAMME WASH A L’ECOLE AU MALI Evaluation commanditée et financée par le Comité Espagnol UNICEF

HYDROCONSEIL

Evaluation du programme WASH à l’école -Spanish Natcom - Rapport d’évaluation Page 151

Quelles sont les motivations et quel est le degré d'engagement des acteurs scolaires/des services de l'état (DRACPN, DGH, etc.) lors des travaux de cons-truction (latrines/points d'eau), etc.,

Variation du sujet principal

Avez-vous généré une dynamique de construction ou une professionnalisa-tion des professionnels du bâtiment ou de l’hydraulique (artisan, maçons, manœuvre, etc.) dans vos zone d’intervention

La contractualisation avec l'UNICEF (procédure d'appel d'offre),

La coordination des activités, le reporting, le suivi des bureaux Sid-Certas, les relations avec l'UNICEF durant les travaux et le renforcement de capacité dont vous avez peut-être bénéficié durant ces quelques mois de travail dans le programme : ce qui a marché, ce qui a été amélioré au fil des PCA, ce qu'il faudrait encore améliorer selon vous, etc.

Rencontre avec les GGS et les Associations des mères d’élèves

La même méthodologie sera appliquée lors de la rencontre avec les CGS + association des mères d’élèves

pour permettre d’identifier les relations existants entre les différentes parties prenantes intervenant dans

la mise en œuvre du Plan annuel.

De même que pour les ONG et les entreprises, une première question très ouverte sera posée selon la mé-thode du Most Significant Change afin d’avoir un premier aperçu des impressions de chacun.

Par exemple : 1. : Comment qualifieriez-vous la mise en œuvre du plan d’action du CGS dans votre école ? L’objectif visé est de faire ressortir et entamer la discussion autours des éléments suivants

- Qu’avez-vous réussi à mettre en place l’année passée ? Si vous n’avez pas réussi à mettre toutes les activités en place, expliquez pourquoi ? De quelle manière allez-vous tenter de les mettre en place cette année ?

- Expliquer nous comment se passe la gestion du budget : les sources de fi-nancement et les motifs de dépenses. (Récupérez-vous les cotisations des parents d’élèves ? Avez-vous mis en place des moyens supplémentaires de collecter de l’argent ? Quel rôle pour AME ? L’école vend-elle de l’eau au village ? Le trésorier tient-il convena-blement les comptes ? )

Les questions suivantes porteront sur

Par exemple

Quelles sont les institutions qui vous ont aidé pour mettre en œuvre votre plan d’action ? Quelles sont celles qui ont constitué un frein ?

o Les relations avec le CAP/l’AE o Les relations avec la mairie ? (signature d’une convention, validation

du plan et du projet ? assiste-elle aux réunions, bilan annuel, etc.) o Les relations avec l’école ? o Le CGS joue-t-il vraiment son rôle : A quelle fréquence visitez-vous

l’école ? A quelle occasion ? Quelle relation avec les enseignants ? Le directeur, accepte-t-il de donner les cotisations aux CGS ? Un bilan annuel est-il organisé avec l’école ? Suivez-vous la scolarité des

Page 152: EVALUATION DU PROGRAMME WASH A L ECOLE AU MALI · 2020-04-29 · EVALUATION DU PROGRAMME WASH A L’ECOLE AU MALI Evaluation commanditée et financée par le Comité Espagnol UNICEF

HYDROCONSEIL

Evaluation du programme WASH à l’école -Spanish Natcom - Rapport d’évaluation Page 152

élèves ? )

Selon vous, quels sont les impacts visibles/invisibles du programme ? Pou-vez-vous les hiérarchiser ?

o Pour l’école ? (santé, propreté, scolarité) : Avez-vous participé au concours Ecoles Propres. Pourquoi ? Etes-vous fiers de votre école ?

o Pour la communauté ? (changement des comportements dans le vil-lage ?)

o Pour le CGS ? (renforcement de capacité : en matière de tenue d’un livre de compte, de développement de micro-entreprises)

Pour vous, s’il y n’avait eu qu’une intervention dans le village, l’impact au-rait-il été le même dans l’école ?; A l’inverse, s’il y n’avait eu qu’une inter-vention dans l’école, l’impact aurait-il été le même dans le village ?

Questions supplémentaires (permettent de remplir la grille de notation Hygiène scolaire)

CGS 10 points

Au sein du CGS, est-ce qu’il y a une personne spécifiquement désignée

comme responsable de l’eau, hygiène et assainissement ? Oui (2 points) Non (0 point)

Est-ce que le CGS a un plan d’action pour l’année que l’on peut consul-

ter ? Oui (2 points) Non (0 point)

Quand est-ce que la dernière réunion a eu lieu ? Moins de 3

mois (2 points)

Plus de 3 mois

(0 point)

Est-ce que le PV de cette réunion est consultable ? Oui (2 points) Non (0 point)

Est-ce qu’il y a de l’argent dans la caisse du CGS aujourd’hui ? Oui (2 points) Non (0 point)

Page 153: EVALUATION DU PROGRAMME WASH A L ECOLE AU MALI · 2020-04-29 · EVALUATION DU PROGRAMME WASH A L’ECOLE AU MALI Evaluation commanditée et financée par le Comité Espagnol UNICEF

HYDROCONSEIL

Evaluation du programme WASH à l’école -Spanish Natcom - Rapport d’évaluation Page 153

7) FICHE 7 : ENTRETIENS AVEC LES SERVICES DE L’ETAT

Rencontre avec les AE

1. Connaissez-vous le programme WASH à l’école supporté par l’UNICEF et ses partenaires ?

2. Comment expliqueriez-vous le rôle de l’AE dans le cadre du programme Wash à l’école ?

3. Avez-vous été concerté dans le cadre de la sélection des sites ? En 2012 quels étaient les critères de sélection ? Combien d’école deviez-vous présenter ? Ce processus de sélection a-t-il évolué entre 2012 et 2014 ? Si oui de quelle manière ?

4. Selon vous, quels sont les impacts visibles du programme ? Invisibles ?

(les hiérarchiser par ordre d’importance). Comment arrivez -vous à les

Page 154: EVALUATION DU PROGRAMME WASH A L ECOLE AU MALI · 2020-04-29 · EVALUATION DU PROGRAMME WASH A L’ECOLE AU MALI Evaluation commanditée et financée par le Comité Espagnol UNICEF

HYDROCONSEIL

Evaluation du programme WASH à l’école -Spanish Natcom - Rapport d’évaluation Page 154

mettre en évidence = avez-vous des outils à votre disposition ? Des rapports réalisés par les CAP ? Si oui à quelle fréquence, lors de quelles occasions.

5. Avez-vous participé au concours école propre ? Expliquez

6. Si vous deviez décrire ce que vous a apporté (personnellement ou en tant AE) le programme Wash à l’école vous diriez que :

Rencontre avec les CAP

Page 155: EVALUATION DU PROGRAMME WASH A L ECOLE AU MALI · 2020-04-29 · EVALUATION DU PROGRAMME WASH A L’ECOLE AU MALI Evaluation commanditée et financée par le Comité Espagnol UNICEF

HYDROCONSEIL

Evaluation du programme WASH à l’école -Spanish Natcom - Rapport d’évaluation Page 155

1. Dans le cadre du programme WASH à l’école, quels sont vos rôles et responsabilités ? Avez-vous reçu une formation à ce sujet ?

2. Par an, combien de fois vous rendez-vous dans chaque école (attention il faudra veiller à identifier si le nombre annoncé est le même dans toutes les écoles, ou s’il varie, et s’il varie d’en identifier les facteurs (distance, etc.). Lister les visites obligatoires et identifier si elles do n-nent lieu à 1 CR de visite et quelle utilisation est en faite.

3. Dans le cadre du programme, combien de fois vous -êtes vous rendu dans l’école ? Expliquez à quelles occasions et quel été votre rôle.

4. Entre le début du programme et la fin du programme, pourriez -vous nous dire quels sont les changements observés dans les écoles (ATTENTION Citer les écoles de l’échantillon), tant sur le plan des i n-frastructures que sur le plan des changements de comportements

Page 156: EVALUATION DU PROGRAMME WASH A L ECOLE AU MALI · 2020-04-29 · EVALUATION DU PROGRAMME WASH A L’ECOLE AU MALI Evaluation commanditée et financée par le Comité Espagnol UNICEF

HYDROCONSEIL

Evaluation du programme WASH à l’école -Spanish Natcom - Rapport d’évaluation Page 156

5. Disposez-vous d’outils de suivi ? Détailler et précisez, à quoi servent-ils ?

7. Selon vous, quels sont les impacts visibles du programme ? Invisibles ? (les hiérarchiser par ordre d’importance). Comment arrivez -vous à les mettre en évidence = avez-vous des outils à votre disposition ? Des rapports réalisés par les écoles ? Si oui à quelle fréquence, lors de quelle occasion.

8. Avez-vous participé au concours école propre ? Expliquez

Page 157: EVALUATION DU PROGRAMME WASH A L ECOLE AU MALI · 2020-04-29 · EVALUATION DU PROGRAMME WASH A L’ECOLE AU MALI Evaluation commanditée et financée par le Comité Espagnol UNICEF

HYDROCONSEIL

Evaluation du programme WASH à l’école -Spanish Natcom - Rapport d’évaluation Page 157

9. Si vous deviez décrire ce que vous a apporté (personnellement ou en tant que CAP) le programme Wash à l’école vous diriez que :

10. Citez 2 choses que vous aimeriez changer/améliorer par rapport à votre implication dans le programme ?