Paniier le suivi et l’évaluation - · PDF fileDepuis 1943, Catholic Relief Services (CRS) a le privilège de servir les pauvres et les personnes défavorisées dans le monde. Sans

Suivi amp eacutevaluation

Panifier le suivi et lrsquoeacutevaluation

Directives et outils

de Scott G Chaplowe

Croix Rouge ameacutericaine

Depuis 1943 Catholic Relief Services (CRS) a le privilegravege de servir les pauvres et les personnes deacutefavoriseacutees dans le monde Sans distinction de race de religion ou de nationaliteacute CRS apporte une assistance drsquourgence agrave la suite de catastrophes naturelles ou causeacutees par lrsquohomme Par le biais de projets de deacuteveloppement dans des domaines de lrsquoeacuteducation la paix et la justice lrsquoagriculture la microfinance la santeacute et le VIHSida CRS travaille agrave faire respecter la digniteacute humaine et agrave promouvoir une meilleure qualiteacute de vie CRS travaille aussi aux Eacutetats-Unis pour mieux faire connaicirctre aux catholiques et autres personnes inteacuteresseacutees les problegravemes de paix et de justice internationales afin qursquoils agissent en ce sens Ses programmes et ses ressources reacutepondent agrave lrsquoappel des eacutevecircques des Eacutetats-Unis qui demandent de vivre dans la solidariteacute comme une seule famille humaine par delagrave les frontiegraveres les oceacuteans et les diffeacuterences de langues de cultures et de conditions eacuteconomiques

Par des initiatives mondiales et des programmes au niveau des communauteacutes la Croix Rouge Ameacutericaine aide les personnes vulneacuterables partout dans le monde agrave preacutevenir les catastrophes les urgences humanitaires complexes et les conditions sanitaires dangereuses agrave srsquoy preacuteparer et agrave y reacutepondre En se concentrant sur la santeacute au niveau mondial la preacuteparation et la reacuteaction aux catastrophes la restauration des liens familiaux et la disseacutemination de la loi humanitaire internationale la Croix Rouge Ameacutericaine offre une assistance humanitaire rapide efficace et de grande ampleur aux personnes dans le besoin Pour reacutealiser ses buts la Croix Rouge Ameacutericaine travaille avec ses partenaires dans le mouvement international de la Croix Rouge et du Croissant Rouge et avec drsquoautres organisations internationales drsquoassistance et de deacuteveloppement pour deacutevelopper les capaciteacutes locales mobiliser et habiliter les communauteacutes et eacutetablir des partenariats Son programme le plus important est actuellement le Programme de Reconstruction apregraves le Tsunami qui ameacuteliore la santeacute communautaire et preacutevient les eacutepideacutemies appuie les communauteacutes pour reconstruire leur vie et reacutetablir leurs moyens drsquoexistence et aide les socieacuteteacutes concerneacutees de la Croix Rouge et du Croissant Rouge ainsi que leurs communauteacutes agrave deacutevelopper des capaciteacutes de preacuteparation aux catastrophes

Publieacute en 2008 par Catholic Relief Services American Red Cross 228 W Lexington Street 2025 E Street NW Baltimore MD 21201-3413 USA Washington DC 20006 USA

Auteur Scott G Chaplowe (Croix Rouge ameacutericaine) Eacutediteur de la seacuterie Guy Sharrock (CRS) Lecteurscorrecteurs Cynthia Green et Dina Towbin Traductrice Odile Adjavon Revu par Alexandre Diouf Conception graphique Jeanne Ivy Photo de couverture Sean Sprague

Ce module a eacuteteacute produit par CRS et la Croix Rouge Ameacutericaine avec un appui financier des subventions Food for Peace (FFP) de lrsquoAgence des Eacutetats-Unis pour le Deacuteveloppement International (USAID) Subvention de deacuteveloppement des capaciteacutes institutionnelles du CRS (AFP A-00-03-00015-00) et Subvention de deacuteveloppement des capaciteacutes institutionnelles de la Croix Rouge Ameacutericaine (AFP A-00-00007-00) Les points de vue exprimeacutes dan ce documents sont ceux de lrsquoauteur et ne repreacutesentent pas neacutecessairement ceux de lrsquoUSAID ou de FFP

Citation recommandeacutee Chaplowe Scott G 2008 laquo Planifier le suivi et lrsquoeacutevaluation raquo Seacuterie de modules sur le SampE Croix Rouge ameacutericaineCRS Croix Rouge ameacutericaine et CRS Washington DC et Baltimore MD

Pour voir la seacuterie complegravete veuillez aller sur le site wwwcrsorg ou wwwredcrossorg

Table des matiegraveres

iii Preacuteface

iii Remerciements

iv Sigles

Planifier le suivi et lrsquoeacutevaluation

1 Introduction

3 Le systegraveme de SampE ndash preacutesentation geacuteneacuterale

5 Les quatre principales composantes drsquoun systegraveme de SampE

16 Autres aspects de la planification de SampE

annexes drsquooutils et de ressources

20 Annexe I Reacutefeacuterences et ressources

23 Annexe II Exemple de cadre logique

24 Annexe III Exemple de tableau des indicateurs

27 Annexe IV Outils et techniques de collecte de donneacutees

Preacuteface Le suivi et lrsquoeacutevaluation (SampE) sont des responsabiliteacutes centrales des gestionnaires de programmes de la Croix Rouge Ameacutericaine et de CRS qui permettent de garantir la qualiteacute de la programmation Le module Planifier le suivi et lrsquoeacutevaluation fait partie drsquoune seacuterie de modules de formation et de renforcement des capaciteacutes sur laquelle la Croix Rouge Ameacutericaine et CRS ont deacutecideacute de collaborer dans le cadre de leurs subventions respectives de deacuteveloppement des capaciteacutes institutionnelles Ces modules sont conccedilus pour reacutepondre agrave des besoins identifieacutes sur le terrain de directives et drsquooutils particuliers qui ne semblaient pas pouvoir ecirctre trouveacutes dans des publications existantes Bien que les exemples des modules concernent principalement les programmes du Titre II les directives et les outils fournis sont valables en dehors du domaine de la seacutecuriteacute alimentaire

Notre intention en eacutecrivant le module Preacuteparer le suivi et lrsquoeacutevaluation eacutetait de donner aux lecteurs des directives concises pour leur permettre drsquoeacutelaborer un systegraveme complet de SampE pour les programmes internationaux drsquoassistance humanitaire et de deacuteveloppement Veuillez envoyer vos commentaires et vos suggestions sur ce module par e-mail agrave mampefeedbackcrsorg

Remerciements Lrsquoauteur voudrait exprimer sa reconnaissance pour le travail de Cynthia Green qui travaillait pour la Croix Rouge ameacutericaine pour sa revue et sa correction patientes de ce module ainsi que pour le travail de Dina Towbin (consultante) qui a aideacute agrave guider le document dans ses derniegraveres phases et Joe Schultz (CRS) et Jeanne Ivy (consultante) qui eacutetaient responsables du travail de preacutesentation graphique

Panifier le suivi et lrsquoeacutevaluation bull iii

Sigles

CRS Catholic Relief Services

SampE Suivi et eacutevaluation

MaRP Meacutethode acceacuteleacutereacutee de recherche participative

onuSiDa Programme Commun des Nations Unies sur le VIHSIDA

PnuD Programme des Nations Unies pour le deacuteveloppement

uSaiD United States Agency for International Development (Agence des Eacutetats-Unis pour le deacuteveloppement international)

Panifier le suivi et lrsquoeacutevaluation bull iv

Ce module Planifier le

suivi et lrsquoeacutevaluation est

conccedilu pour ecirctre utiliseacute

par les speacutecialistes en

SampE les gestionnaires

de programmes

humanitaires ou de

deacuteveloppement et les

deacutecideurs responsables

de la supervision et

du financement des

programmes

Introduction

Ce module Planifier le suivi et lrsquoeacutevaluation a pour objectif de donner des directives pour permettre drsquoeacutelaborer un systegraveme complet de suivi et eacutevaluation (SampE) pour les programmes internationaux drsquoassistance humanitaire et de deacuteveloppement Il aborde les principaux documents et processus de planification neacutecessaires pour creacuteer et mettre en œuvre un systegraveme de SampE pour la planification la mise en œuvre et lrsquoeacutevaluation des projets Il est conccedilu pour ecirctre utiliseacute par les speacutecialistes en SampE les gestionnaires de programmes humanitaires ou de deacuteveloppement et les deacutecideurs responsables de la supervision et du financement des programmes

En deacuteveloppant ce module il est apparu que certaines personnes travaillant dans des programmes internationaux utilisaient le terme laquo plan de SampE raquo pour parler drsquoun document de planification pour tout le systegraveme de SampE drsquoun projet tandis que drsquoautres lrsquoutilisent pour parler drsquoun document particulier qui deacutefinit les indicateurs du projet et la faccedilon dont ils vont ecirctre mesureacutes ndash un tableau des indicateurs Dans un objectif de clarteacute ce module adopte lrsquousage plus large du plan de SampE un document de planification permettant la coheacuterence et la continuiteacute dans le systegraveme de SampE drsquoun projet Le format ou le contenu particuliers drsquoun plan de SampE devront ecirctre adapteacutes aux besoins particuliers du projet

Ce module traite des principales composantes drsquoun systegraveme de SampE qui fournissent des informations pour la planification de SampE du projet Ces composantes forment une ligne de penseacutee logique depuis les hypothegraveses sur la maniegravere dont le projet amegravenera les changements dans un secteur particulier jusqursquoaux objectifs neacutecessaires pour ces changements aux meacutethodes pour mesurer les reacutealisations par le projet de ses objectifs deacuteclareacutes et aux protocoles pour la collecte et lrsquoanalyse de donneacutees et drsquoinformations utiliseacutees dans la mesure Les quatre composantes principales drsquoun systegraveme de SampE sont

1 Un cadre drsquoanalyse causale

2 Un cadre logique

3 Un tableau des indicateurs

4 Un plan de collecte et drsquoanalyse des donneacutees

Panifier le suivi et lrsquoeacutevaluation bull 1

Introduction

Agrave la suite drsquoune preacutesentation geacuteneacuterale du systegraveme de SampE ce module eacutetudie ces quatre composantes cleacutes du SampE Il est important drsquoinsister sur le fait que les diffeacuterentes composantes drsquoun systegraveme de SampE sont interdeacutependantes et que la planification du SampE demande drsquoautres eacuteleacutements que cela soit indiqueacute explicitement ou implicitement Drsquoautres consideacuterations cleacutes pour la planification du SampE sont preacutesenteacutees dans la section finale de ce module et sont clarifieacutees dans les diffeacuterents cadres tout au long du module

Cadre 1 Planifier tocirct et impliquer les parties prenantes La planification du SampE doit commencer degraves la phase de conception du projet ou juste apregraves Une planification preacutecoce guidera la conception du projet et permettra drsquoavoir le temps drsquoorganiser les ressources et le personnel avant la mise en œuvre du projet La planification du SampE doit aussi impliquer les personnes utilisant le systegraveme de SampE Lrsquoimplication du personnel de projet et des principales parties prenantes garantit la faisabiliteacute la compreacutehension et lrsquoappropriation du systegraveme de SampE


Le SampE doit faire

partie inteacutegrante de la

conception des projets

ainsi que de leur mise

en œuvre et de leur

achegravevement

Le systegraveme de SampE ndash Preacutesentation geacuteneacuterale

le systegraveme de SampE fournit les informations neacutecessaires pour eacutevaluer et guider la strateacutegie du projet permettre des opeacuterations efficaces respecter les demandes de rapports internes et externes et informer la programmation future Le SampE doit faire partie inteacutegrante de la conception des projets ainsi que de leur mise en œuvre et de leur achegravevement Ce module va donc commencer par deacutecrire lrsquoensemble du systegraveme de SampE et les correspondances avec ces principales eacutetapes du cycle du projet (cf Figure 1)

Figure 1 Le SampE et le cycle du projet

Fin du projet

Milieu du projet

Suite du projet

Conception Diffusion du projet

et utilisation Eacutevaluation des leccedilons initiale

des besoins

Eacutevaluation finale (avec enquecircte Cadre logique

finale) et indicateurs

Suivi continu du Planification projet et reacuteflexion

du projet Eacutevaluation

agrave mi- Eacutelaboration parcours du plan de SampE

ou annuelle (tableau des indicateurs)

Suivi du Enquecircte projet (QPR) de base

Mise en œuvre du projet

Un systegraveme de SampE est baseacute sur les paramegravetres cleacutes du projet

1 Le but global ou le changement ou effet deacutesireacute

1 Les principaux beacuteneacuteficiaires ou publics auxquels le projet veut beacuteneacuteficier

1 Les hypothegraveses ou suppositions qui relient les objectifs du projet et des interventions ou activiteacutes particuliegraveres

1 Lrsquoampleur et la taille du projet

1 Lrsquoimportance de la participation et de la capaciteacute en SampE



1 La dureacutee du projet

1 Le budget geacuteneacuteral du projet

Chaque projet peut avoir des besoins diffeacuterents pour le SampE selon le contexte ougrave il opegravere la capaciteacute de lrsquoagence de mise en œuvre les exigences des bailleurs de fonds et drsquoautres facteurs Quand on preacutepare un plan de SampE il est important drsquoidentifier ces besoins et de coordonner les meacutethodes proceacutedures et outils utiliseacutes pour y reacutepondre Ceci permet drsquoeacuteconomiser les ressources et de simplifier la planification du SampE

Il nrsquoy a pas une seule norme reconnue par tout le secteur pour eacutevaluer la qualiteacute drsquoun systegraveme de SampE cependant on trouvera quelques critegraveres reacutesumeacutes ci-dessous (IFAD 2002 pp 4-20)

1 utiliteacute Le systegraveme de SampE preacutevu servira les besoins drsquoinformation des utilisateurs preacutevus

1 Faisabiliteacute Les meacutethodes les seacutequences le calendrier et les proceacutedures de traitement sont reacutealistes prudents et eacuteconomiques

1 Moraliteacute Les activiteacutes de SampE seront conduites de faccedilon leacutegale eacutethique et en tenant suffisamment compte du bien-ecirctre des personnes affecteacutees par les reacutesultats

1 Justesse Les produits du SampE reacutevegraveleront et transmettront des informations techniquement adeacutequates


Il y a quatre composantes

cleacutes qui forment la

fondation sur laquelle est

construit le systegraveme de

SampE

Les quatre principales composantes drsquoun systegraveme de SampE

Les quatre composantes cleacutes preacutesenteacutees ci-dessous forment la fondation sur laquelle est construit le systegraveme de SampE Elles jouent un rocircle crucial dans la planification du SampE en reacutepondant aux quatre questions correspondantes

1 Que veut changer le projet et comment

2 Quels sont les objectifs speacutecifiques pour reacutealiser ce changement

3 Quels sont les indicateurs et comment mesureront-ils cela

4 Comment les donneacutees seront-elles collecteacutees et analyseacutees

Cadre drsquoanalyse causale Un cadre drsquoanalyse causale vise agrave preacuteciser les points suivants

1 Le principal problegraveme et la ou les principales conditions que le projet veut changer

2 Les facteurs causant cetteces condition(s)

3 Des maniegraveres drsquoinfluer sur les facteurs causaux sur la base des hypothegraveses sur les relations entre les causes et les solutions probables

4 Les interventions pour influer sur les facteurs causaux

5 Les changements attendus ou les effets deacutesireacutes

Lrsquoanalyse causale doit ecirctre baseacutee sur une eacutetude approfondie des conditions locales et des donneacutees disponibles ainsi que sur une consultation avec les beacuteneacuteficiaires potentiels ceux qui mettront en œuvre le programme drsquoautres parties prenantes et des experts techniques On pourra trouver ces informations dans des eacutevaluations initiales des besoins des eacutetudes de faisabiliteacute des Meacutethodes Acceacuteleacutereacutees de Recherche Participative (MARP) la cartographie des communauteacutes et des analyses SWOT (Forces faiblesses opportuniteacutes et menaces) CARE preacutesente une approche holistique pour lrsquoeacutevaluation des facteurs socioeacuteconomiques permettant drsquoidentifier les populations cibles et les interventions approprieacutees (Caldwell 2002)

Les hypothegraveses qui sous-tendent lrsquoanalyse causale peuvent ecirctre eacutevalueacutees en impliquant les beacuteneacuteficiaires potentiels les gestionnaires des programmes et les personnes devant faire la mise en œuvre les autres parties prenantes et des experts techniques



Tableau 1 Cadre drsquoanalyse causale

Analyse causale Eacutelaboration de lrsquohypothegravese

Conception du projet

CauseConditions Les megraveres ne savent pas qursquoune eau impure rendra leurs enfants malades (connaissance)

Si les megraveres ont conscience des dangers dune eau impure

Interventions Eacuteduquer les megraveres aux dangers drsquoune eau impure

Les megraveres croient que le lait maternel agrave lui seul ne suffit pas aux nourrissons de moins de 6 mois (attitude)

Et que le lait maternel est suffisamment nutritif pour les nourrissons de moins de 6 mois

Eacuteduquer les megraveres agrave la valeur nutritive du lait maternel pour les nourrissons de moins de 6 mois

Les megraveres donnent des substituts du lait maternel agrave des nourrissons de moins de 6 mois (pratique)

Alors elles feront un allaitement exclusif de leur enfant pour eacuteviter quil ne soit exposeacute agrave une eau impure

Effets deacutesireacutes Augmentation de lrsquoallaitement maternel des nourrissons de moins de 6 mois

Problegraveme Forts taux de diarrheacutee chez les nourrissons de moins de 6 mois

Et par lagrave contribueront agrave la reacuteduction des cas de diarrheacutee chez les nourrissons de moins de 6 mois

Diminution des cas de diarrheacutee chez les nourrissons de moins de 6 mois

Conseacutequence Fort taux de mortaliteacute infantile

Et par lagrave contribueront agrave la reacuteduction de la mortaliteacute infantile

But geacuteneacuteral Diminution de la mortaliteacute infantile

De nombreux projets ne preacuteparent pas de cadre explicite drsquoanalyse causale Pourtant ce cadre aide agrave preacuteciser les principales interventions et agrave identifier les variables neacutecessaires pour eacutevaluer les effets du projet Par exemple le cadre preacutesenteacute dans le Tableau 1 fait lrsquohypothegravese que les megraveres allaiteront leurs enfants une fois qursquoelles auront appris les dangers que repreacutesente lrsquoeau impure Cependant si les megraveres ont une autre raison de ne pas allaiter comme des normes culturelles ou le fait qursquoelles travaillent loin de chez elles on a alors besoin drsquoautres interventions Le systegraveme de SampE teste les hypothegraveses pour deacuteterminer si les interventions et les produits drsquoun projet ont contribueacute aux effets deacutesireacutes

Le choix des problegravemes agrave traiter et des interventions approprieacutees doivent ecirctre baseacutes sur les reacutesultats de la recherche et sur lrsquoexpeacuterience des programmes dans des situations similaires Lrsquoanalyse causale est utile pour examiner les relations de cause agrave effet et pour deacuteterminer les besoins de la communauteacute agrave partir desquels on formulera une hypothegravese de travail Parmi les autres formes drsquoanalyses on peut citer lrsquoanalyse de problegraveme comme lrsquoarbre agrave problegraveme qui permet drsquoisoler les conditions et les conseacutequences afin drsquoidentifier les objectifs et les strateacutegies (Stetson et al 2004 p 78) et lrsquoanalyse de la theacuteorie du changement qui utilise une cartographie agrave rebours permettant drsquoidentifier les conditions neacutecessaires pour arriver aux effets agrave long terme deacutesireacutes (Theory of Change 2008)


outils et ressources

Exemple de cadre logique


Cadre logique Un cadre logique montre la fondation conceptuelle sur laquelle est construit le systegraveme de SampE Fondamentalement le cadre logique est un tableau qui preacutecise ce que le projet doit reacutealiser (objectifs) et comment cette reacutealisation sera mesureacutee (indicateurs) Il est essentiel de comprendre les diffeacuterences entre les intrants les produits les effets et lrsquoimpact du projet car les indicateurs qui seront mesureacutes dans le cadre du systegraveme de SampE reflegravetent cette hieacuterarchie Le Tableau 2 deacutefinit les principaux termes et composantes drsquoun tableau classique 4x5 de cadre logique et lrsquoAnnexe II donne un exemple de cadre logique pour les niveaux des produits et des effets Il est important de noter que les diffeacuterentes organisations engageacutees dans le deacuteveloppement utilisent des formats et des termes diffeacuterents pour les types drsquoobjectifs dans un cadre logique Jim Rugh (2008) a eacutelaboreacute un guide utile pour deacutecoder les termes utiliseacutes par de grandes agences de deacuteveloppement

Pour la planification de SampE il est essentiel de bien comprendre la hieacuterarchie des objectifs du cadre logique Crsquoest ce qui en fin de compte fournira des informations pour les questions cleacutes qui guideront lrsquoeacutevaluation des processus et des impacts du projet

1 But Dans quelle mesure le projet a-t-il contribueacute agrave ses buts agrave plus long terme Pourquoi ou pourquoi pas Quels conseacutequences impreacutevues positives ou neacutegatives a eu le projet Pourquoi sont-elles survenues

1 Effets Quels changements ont reacutesulteacute des produits et dans quelles mesures ceux-ci ont-ils des chances de contribuer agrave lrsquoobjet et agrave lrsquoimpact deacutesireacute du projet Le projet a-t-il reacutealiseacute les changements dont il peut raisonnablement ecirctre tenu pour responsable

1 Produits Quels produits ou services directs tangibles le projet a-t-il fourni comme reacutesultat des activiteacutes

1 activiteacutes Les activiteacutes preacutevues ont-elles eacuteteacute reacutealiseacutees agrave temps et dans le budget Quelles activiteacutes impreacutevues ont eacuteteacute reacutealiseacutees

1 intrants Les ressources ont-elles eacuteteacute utiliseacutees efficacement

De la mecircme faccedilon il est important de comprendre la hieacuterarchie des indicateurs du cadre logique Par exemple il est geacuteneacuteralement plus facile de mesurer les indicateurs des niveaux infeacuterieurs comme le nombre de participants agrave un atelier alors que les indicateurs des niveaux supeacuterieurs comme le changement de comportement demandent geacuteneacuteralement plus drsquoanalyse et de synthegravese des informations Cella affecte les meacutethodes de collecte et drsquoanalyse des donneacutees et cela a des implications sur le recrutement du personnel les budgets et les calendriers



Tableau 2 Tableau de deacutefinitions du cadre logique

Objectifs du projet

Indicateurs Moyens de veacuterification

Hypothegraveses

But Eacutenonceacute simple et clair de lrsquoimpact ou des reacutesultats que doit reacutealiser le projet

Indicateur drsquoimpact Moyen quantitatif ou qualitatif pour mesurer les reacutealisations ou pour refleacuteter les changements lieacutes au but

Meacutethode de mesure source de donneacutees et freacutequence de la collecte des donneacutees pour lrsquoindicateur

Facteurs externes qui sont neacutecessaires pour maintenir limpact agrave long terme mais qui sont hors du controcircle du projet

Effets Changements neacutecessaires au niveau des beacuteneacuteficiaires et de la population pour reacutealiser le but (geacuteneacuteralement connaissances attitudes et pratiques)

Indicateur des effets Moyen quantitatif ou qualitatif pour mesurer les reacutealisations ou pour refleacuteter les changements lieacutes aux effets


Facteurs externes neacutecessaires pour que les effets contribuent agrave la reacutealisation du but

Extrants Indicateur Meacutethode de Facteurs hors du Produits drsquoextrant mesure source controcircle du projet ou services Moyen quantitatif de donneacutees et qui pourraient neacutecessaires pour ou qualitatif freacutequence de restreindre ou reacutealiser les effets de mesurer la

reacutealisation des extrants (mesure le produit immeacutediat drsquoune activiteacute)

la collecte des donneacutees pour lrsquoindicateur

empecirccher la reacutealisation des effets par les extrants

activiteacutes Indicateur de Meacutethode de Facteurs hors du Efforts reacuteguliers processus mesure source controcircle du projet neacutecessaire pour Moyen quantitatif de donneacutees et qui pourraient obtenir les ou qualitatif freacutequence de restreindre ou produits pour mesurer la

reacutealisation des activiteacutes

la collecte des donneacutees pour lindicateur

empecirccher la reacutealisation des produits par les activiteacutes

intrants Indicateur Meacutethode de Facteurs hors du Ressources drsquointrant mesure source controcircle du projet utiliseacutees pour Moyen quantitatif de donneacutees et qui pourraient mettre en œuvre ou qualitatif pour freacutequence de restreindre ou les activiteacutes mesurer lrsquoutilisation la collecte des empecirccher lrsquoaccegraves (financiegraveres des intrants donneacutees pour aux intrants mateacuterielles (ressources utiliseacutees lindicateur humaines) pour les activiteacutes)

Source Auteur baseacute sur un exemple de Caldwell (Project Design Handbook 2002 130)

Des indicateurs efficaces sont un eacuteleacutement crucial du cadre logique Il est utile drsquoavoir une expertise technique et avant que les indicateurs ne soient finaliseacutes il est important de les revoir avec des employeacutes locaux pour veacuterifier qursquoils sont reacutealistes et faisables et qursquoils reacutepondent aux besoins en informations des utilisateurs



Quand vous concevez des indicateurs posez-vous les questions suivantes

1 Les indicateurs sont-ils SMART (Speacutecifiques Mesurables Atteignables en Rapport avec les activiteacutes limiteacutees dans le Temps) Les indicateurs doivent ecirctre faciles agrave interpreacuteter et agrave expliquer rapides eacuteconomiques et faisables techniquement Chaque indicateur doit ecirctre valide (pouvoir mesurer le concept preacutevu de maniegravere exacte) et fiable (produire les mecircmes donneacutees lors drsquoobservations reacutepeacuteteacutees drsquoune variable)

1 Y a-t-il des indicateurs standards au niveau international ou au niveau du secteur Par exemple les indicateurs eacutelaboreacutes par lrsquoONUSIDA les Objectifs de deacuteveloppement du milleacutenaire du PNUD et les eacutetudes deacutemographiques et de santeacute ont eacuteteacute largement utiliseacutes et testeacutes

1 Y a-t-il des indicateurs exigeacutes par le bailleur de fonds le projet ou le programme Ceci peut ecirctre particuliegraverement important si lrsquoindicateur au niveau du projet doit passer agrave un cadre supeacuterieur de responsabiliteacute au niveau du programme

1 Y a-t-il des sources secondaires drsquoindicateurs Il peut ecirctre eacuteconomique drsquoadopter des indicateurs pour lesquels des donneacutees ont eacuteteacute ou vont ecirctre collecteacutees par un ministegravere du gouvernement une agence internationale etc

Cadre 2 Piegraveges Surcharge drsquoindicateurs Les indicateurs ne doivent pas rendre compte de tout

dans un projet mais seulement de ce qui est neacutecessaire et suffisant pour le suivi et lrsquoeacutevaluation

Fixation sur les produits Compter des myriades drsquoactiviteacutes et de produits est utile pour la gestion du projet mais ne montre pas lrsquoimpact du projet Pour mesurer les effets du projet il est preacutefeacuterable de seacutelectionner quelques indicateurs de produits importants et de se concentrer sur les indicateurs drsquoeffet et drsquoimpact chaque fois que crsquoest possible

Impreacutecision des indicateurs Les indicateurs doivent ecirctre speacutecifiques pour pouvoir ecirctre facilement mesureacutes Par exemple il vaut mieux demander combien drsquoenfants de moins de 5 ans ont dormi sous une moustiquaire impreacutegneacutee drsquoinsecticide la nuit derniegravere que de poser la question geacuteneacuterale de savoir si les meacutenages pratiquent des mesures de protection contre le paludisme

Complexiteacute excessive Des informations complexes peuvent prendre du temps ecirctre coucircteuses et le personnel local peut les trouver difficiles agrave comprendre agrave reacutesumer agrave analyser et agrave employer Il faut que les informations restent simples claires et concises

Les deacutecisions concernant les indicateurs sont en lien avec le plan global de recherche Le type de donneacutees et drsquoinformations qui sera collecteacute deacutependra des questions de recherche qui sont traiteacutees du niveau de preacutecision rechercheacute pour la mesure des effets du projet et de la taille et de la complexiteacute du projet Ces questions doivent ecirctre prises en compte lors de lrsquoeacutelaboration du cadre logique car elles sont lieacutees au choix des interventions et des produits du projet au budget de SampE proposeacute et le personnel neacutecessaire

Il est important de noter que drsquoautres types de cadre sont utiliseacutes pour montrer les relations entre les objectifs du projet et les indicateurs signalant




Exemple de tableau des indicateurs

la reacutealisation de ces objectifs ou la progression en direction de ces objectifs Le preacutesent module se concentre sur le cadre logique parce qursquoil est largement utiliseacute pour les projets de deacuteveloppement mais il a ses limites (cf Cadre 3) Un autre cadre utiliseacute par lrsquoAgence des Eacutetats-Unis pour le deacuteveloppement international (USAID) et drsquoautres bailleurs de fonds est le cadre des reacutesultats appeleacute parfois cadre strateacutegique En utilisant des diagrammes pour illustrer les eacutetapes ou le niveau des reacutesultats le cadre des reacutesultats insiste sur les relations causales qui relient la reacutealisation progressive de chaque reacutesultat agrave lrsquoimpact total du programme

Cadre 3 Limites du cadre logique Dans la planification du SampE Il faut savoir que les modegraveles logiques sont critiqueacutes parce qursquoils sont technocentriques avec un biais culturel en faveur de la logique lineacuteaire qui peut alieacutener plutocirct qursquoencourager la compreacutehension la participation et lrsquoappropriation locales Il est essentiel de consulter et drsquoimpliquer les partenaires surtout les gestionnaires pour ameacuteliorer leur compreacutehension des cadres logiques

Le tableau des indicateurs Un tableau des indicateurs est crucial pour planifier et geacuterer la collecte lrsquoanalyse et lrsquoutilisation des donneacutees Il eacutelargit le cadre logique pour identifier les principaux besoins drsquoinformations pour chaque indicateur et reacutesume les principales tacircches de SampE pour le projet Le nom et le format du tableau des indicateurs peuvent varier (par exemple Plan de SampE tableau de planification des indicateurs ou plan de collecte de donneacutees) mais les fonctions geacuteneacuterales restent les mecircmes Souvent le bailleur de fonds du projet demande un format particulier (cf par exemple USAID 1996 IFRC 2007 p 6 Stetson et al 2004 p 140 Barton 1997 p 53 Caldwell 2002 p 103 IFAD 2002 Annexe C AusAID 2006 p6)

LrsquoAnnexe III donne un modegravele de format pour un tableau des indicateurs avec des exemples de lignes remplies pour des indicateurs drsquoeffets et de produits Voici les principales composantes (titres des colonnes) du tableau des indicateurs

1 indicateurs Les indicateurs eacutenoncent clairement et preacuteciseacutement les informations neacutecessaires pour eacutevaluer si les changements preacutevus ont eu lieu Les indicateurs peuvent ecirctre soit quantitatifs (numeacuteriques) soit qualitatifs (observations descriptives) Geacuteneacuteralement ceux du tableau des indicateurs sont pris directement dans le cadre logique

2 Deacutefinition des indicateurs Pour chaque indicateur on a besoin drsquoune deacutefinition deacutetailleacutee de ses termes cleacutes avec une explication des aspects particuliers qui seront mesureacutes (comme qui quoi et quand lrsquoindicateur srsquoapplique) La deacutefinition doit expliquer preacuteciseacutement comment lrsquoindicateur sera calculeacute comme le numeacuterateur et le deacutenominateur pour un pourcentage On notera aussi dans cette colonne si lrsquoindicateur doit ecirctre deacutetailleacute selon le genre des beacuteneacuteficiaires leur acircge origine ethnique ou selon une autre variable



3 Meacutethodessources Cette colonne montre les sources drsquoinformations et les meacutethodes ou les outils de collecte des donneacutees comme lrsquoutilisation de donneacutees secondaires un suivi reacutegulier ou une eacutevaluation peacuteriodique des enquecirctes de deacutebut ou de fin des MARP et des discussions en groupes focaux Cette colonne doit aussi indiquer si les outils de collecte de donneacutees (questionnaires check-lists) existent deacutejagrave ou devront ecirctre eacutelaboreacutes On notera que la colonne du cadre logique laquo moyens de veacuterification raquo peut donner une source ou une meacutethode comme laquo enquecircte dans les meacutenages raquo Le plan de SampE doit avoir beaucoup plus de deacutetails car le travail de SampE sera baseacute sur les meacutethodes particuliegraveres noteacutees

4 Freacutequencecalendriers Cette colonne montre agrave quel intervalle les donneacutees seront collecteacutees pour chaque indicateur par exemple mensuel trimestriel ou annuel Il est souvent utile de preacuteciser le moment ou le calendrier de la collecte des donneacutees comme les dates ougrave commencera ou se terminera la collecte ou les dates limites pour preacuteparer les outils Quand on preacutepare le calendrier de la collecte des donneacutees il est important de prendre en compte des facteurs comme les variations saisonniegraveres les vacances scolaires les fecirctes et les rites religieux (par ex le Ramadan)

5 Personne(s) responsable(s) Cette colonne donne la liste des personnes responsables et devant rendre compte de la collecte et de lrsquoanalyse des donneacutees comme les volontaires de la communauteacute le personnel sur le terrain les gestionnaires de projet le ou les partenaires locaux et les consultants externes En plus du nom des personnes ajoutez le titre du poste pour que ce soit plus clair srsquoil y a des changements de personnel Cette colonne est utile pour faire une eacutevaluation initiale des capaciteacutes et preacutevoir un renforcement des capaciteacutes pour le systegraveme de SampE

6 analyse des donneacutees Cette colonne deacutecrit la compilation et lrsquoanalyse des donneacutees pour juger si lrsquoindicateur a eacuteteacute atteint ou non Par exemple les donneacutees drsquoenquecirctes font geacuteneacuteralement lrsquoobjet drsquoune analyse statistique tandis que les donneacutees qualitatives peuvent ecirctre eacutetudieacutees par des chercheurs ou des membres de la communauteacute

7 utilisation de lrsquoinformation Cette colonne deacutetermine quel est le public preacutevu et lrsquoutilisation preacutevue des informations Par exemple les reacutesultats peuvent ecirctre utiliseacutes pour faire le suivi de la mise en œuvre du projet pour eacutevaluer les interventions preacutevoir le travail futur du projet ou pour rendre compte agrave des deacutecideurs politiques ou agrave des bailleurs de fonds Cette colonne devra aussi expliquer le format qui sera utiliseacute pour les reacutesultats (par ex des tableaux des graphiques des cartes des histogrammes des rapports narratifs) et la faccedilon dont ils seront diffuseacutes (par ex sites Internet bilans reacuteunions communautaires listes de diffusion et meacutedias)

Le tableau des indicateurs peut ecirctre adapteacute aux demandes drsquoinformations pour la direction du projet Par exemple on peut creacuteer drsquoautres colonnes pour identifier les sources des donneacutees les meacutethodes et les outils de collecte lrsquoutilisation des informations et le public et la ou les personnes responsables de la collecte et de lrsquoanalyse des donneacutees Il peut aussi ecirctre preacutefeacuterable drsquoutiliser des tableaux seacutepareacutes pour les indicateurs de SampE

Il faut absolument eacutelaborer le tableau des indicateurs avec la participation



de ceux qui vont lrsquoutiliser Pour remplir le tableau il faut une connaissance deacutetailleacutee du projet et du contexte qui est fourni par lrsquoeacutequipe locale du projet et par les partenaires locaux Leur implication contribue agrave la qualiteacute des donneacutees car elle leur permet de mieux comprendre ce qursquoil faut collecter comme donneacutees et comment les collecter

Plan de collecte et drsquoanalyse des donneacutees Le plan de collecte et drsquoanalyse des donneacutees complegravete les informations fournies dans le tableau des indicateurs en deacutecrivant en deacutetail comment les donneacutees et les informations seront deacutefinies collecteacutees organiseacutees et analyseacutees En geacuteneacuteral ce plan est constitueacute drsquoun texte narratif deacutetailleacute qui explique comment chaque type de donneacutees sera collecteacute ainsi que toutes les eacutetapes neacutecessaires qui permettront drsquoavoir des donneacutees de qualiteacute et de bonnes pratiques de recherche Les principales composantes du plan sont lrsquouniteacute drsquoanalyse le lien entre les indicateurs les variables et les questionnaires le cadre et la meacutethodologie de lrsquoeacutechantillonnage le calendrier et le mode de la collecte des donneacutees les responsabiliteacutes du personnel de recherche la seacutelection la formation et la supervision des enquecircteurs le calendrier et la logistique du travail sur le terrain les controcircles de qualiteacute des donneacutees la saisie et le stockage des donneacutees les relations supposeacutees entre les variables et les meacutethodes drsquoanalyse des donneacutees Les analyses speacuteciales comme la dissociation par genre acircge lieu ou statut socioeacuteconomique seront aussi deacutecrites

Il est important de preacutesenter le raisonnement qui sous-tend les meacutethodes de collecte et drsquoanalyse Celui-ci comprend la triangulation des meacutethodes (quantitatives etou qualitatives) et des sources permettant de reacuteduire les biais et de garantir que les donneacutees soient fiables et complegravetes La planification doit ecirctre baseacutee sur les normes qui guident les bonnes pratiques de lrsquoeacutevaluation de projet et permettent des eacutevaluations de qualiteacute eacutethiques et responsables Il y a dans la communauteacute de lrsquoeacutevaluation de nombreuses ressources utiles preacutesentant les principes cleacutes permettant drsquoavoir des eacutevaluations eacutethiques responsables et de qualiteacute (par exemple American Evaluation Association [AEA] 2004 Australian Evaluation Society [AES] 2002 et Development Assistance Commitee [DAC] 2008)

Ce plan doit aussi traiter de lrsquoobjectif de la collecte et de lrsquoanalyse des donneacutees pour ce qui est des fonctions speacutecifiques au suivi et agrave lrsquoeacutevaluation Certaines fonctions cleacutes du suivi sont le suivi de la conformiteacute du processus des reacutesultats du contexte des beacuteneacuteficiaires et de lrsquoorganisation Geacuteneacuteralement un projet utilisera une combinaison de ces fonctions de suivi et concevra la collecte et lrsquoanalyse des donneacutees en conseacutequence Pour les eacutevaluations des projets il faudra deacuteterminer non seulement les meacutethodes utiliseacutees mais aussi le calendrier de lrsquoactiviteacute drsquoeacutevaluation (eacutetudes des donneacutees de base revues




Reacutefeacuterences et ressources

outils et techniques de collecte de donneacutees

annuelles eacutevaluation agrave mi-parcours et eacutevaluation finale) et les raisons pour lesquelles on choisit des eacutevaluateurs posseacutedant des compeacutetences particuliegraveres et un certain niveau drsquoindeacutependance (crsquoest-agrave-dire eacutevaluateurs internes ou externes)

Les principales sources de donneacutees et drsquoinformations pour le suivi et lrsquoeacutevaluation drsquoun projet sont

1 les donneacutees secondaires On peut obtenir des informations utiles dans drsquoautres recherches comme des enquecirctes ou drsquoautres eacutetudes meneacutees auparavant ou preacutevues agrave un moment qui correspond aux besoins de SampE du projet des eacutevaluations initiales approfondies et des rapports de projets Les sources de donneacutees secondaires sont par exemple des deacutepartements de planification du gouvernement des universiteacutes ou des centres de recherche des agences internationales drsquoautres projetsprogrammes travaillant dans la mecircme zone et des institutions financiegraveres

1 Des enquecirctes sur des eacutechantillons Une enquecircte baseacutee sur un eacutechantillon aleacuteatoire des beacuteneacuteficiaires ou du public cible du projet est souvent la meilleure source de donneacutees sur les effets du projet Les enquecirctes demandent beaucoup de travail et reviennent cher mais elles fournissent des donneacutees plus objectives que des meacutethodes qualitatives De nombreux bailleurs de fonds demandent de faire des enquecirctes de deacutebut et de fin srsquoil srsquoagit drsquoun grand projet et qursquoil nrsquoy a pas de donneacutees alternatives

1 Donneacutees sur les produits du projet La plupart des projets collectent des donneacutees sur leurs diverses activiteacutes comme le nombre de personnes servies et les nombre drsquoobjets distribueacutes

1 eacutetudes qualitatives Des meacutethodes qualitatives largement utiliseacutees dans la conception et lrsquoeacutevaluation des projets sont meacutethode acceacuteleacutereacutee de recherche participative cartographie entretiens avec des informateurs cleacutes discussions en groupes focaux et observation

1 Check-lists Une revue systeacutematique des composantes particuliegraveres du projet peut ecirctre utile pour fixer des normes de base et eacutetablir des mesures peacuteriodiques drsquoameacutelioration

eacutevaluations externes Ceux qui mettent en œuvre le projet ainsi que les bailleurs de fonds recrutent souvent des experts exteacuterieurs pour revoir ou eacutevaluer les produits et les effets du projet Ces eacutevaluations peuvent ecirctre biaiseacutees par la briegraveveteacute du contact avec le projet et une trop grande deacutependance par rapport aux informateurs cleacutes Cependant elles sont moins chegraveres et plus rapides qursquoune enquecircte sur un eacutechantillon repreacutesentatif et cela peut amener des points de vue diffeacuterents une expertise technique et un degreacute drsquoobjectiviteacute qui est plus creacutedible pour les parties prenantes

eacutevaluations participatives Lrsquoutilisation des beacuteneacuteficiaires dans les revues ou les eacutevaluations de projets peut les habiliter et deacutevelopper lrsquoappropriation locale la capaciteacute et la peacuterenniteacute du projet Mais ces eacutevaluations peuvent ecirctre biaiseacutees par la politique locale ou domineacutees par les voix les plus puissantes de la communauteacute La formation et la gestion des beacuteneacuteficiaires locales peuvent ecirctre aussi coucircteuses en temps argent et expertise et demandent lrsquoadheacutesion des parties prenantes Cependant les eacutevaluations participatives peuvent en valoir



la peine car les gens ont plus de chance drsquoaccepter et drsquointernaliser des reacutesultats et des recommandations qursquoils auront trouveacutes eux-mecircmes et drsquoagir en conseacutequence

Cf lrsquoAnnexe IV pour une liste plus complegravete de sources de donneacutees LrsquoAnnexe I donne aussi une liste de guides de SampE qui deacutecrivent le processus de la collecte et de lrsquoanalyse des donneacutees

Certaines consideacuterations pratiques pour la planification de la collecte des donneacutees

1 Preacuteparer des directives pour la collecte des donneacutees Cela permet la standardisation la coheacuterence et la fiabiliteacute dans le temps et avec des personnes diffeacuterentes du processus de collecte des donneacutees Veacuterifiez que toutes les donneacutees neacutecessaires pour les indicateurs sont collecteacutees par au moins une source de donneacutees

1 tester agrave lrsquoavance les outils de collecte des donneacutees Des tests agrave lrsquoavance permettent de deacutetecter des questions ou des techniques posant problegraveme de veacuterifier le temps de collecte drsquoidentifier des questions eacutethiques potentielles et de renforcer la compeacutetence des personnes qui collecteront les donneacutees

Former les personnes qui collecteront les donneacutees Preacutesentez le systegraveme de collecte des donneacutees les techniques les outils lrsquoeacutethique de la collecte des donneacutees et fournissez des compeacutetences en communication interpersonnelle adapteacutees culturellement Donnez aux personnes formeacutees une expeacuterience pratique de la collecte des donneacutees

1 Reacutepondre aux questions eacutethiques Identifiez les inquieacutetudes exprimeacutees par la population cible et reacutepondez-y Assurez-vous qursquoon a obtenu la permission ou lrsquoautorisation neacutecessaires des autoriteacutes locales que les coutumes et les normes vestimentaires locales sont respecteacutees et que la confidentialiteacute et la participation volontaire sont garanties

Cadre 4 Reacuteduire les coucircts de la collecte des donneacutees La collecte des donneacutees peut ecirctre coucircteuse Lrsquoune des meilleures maniegraveres de reacuteduire les coucircts de la collecte des donneacutees est de reacuteduire la quantiteacute de donneacutees collecteacutees (Bamberger et al 2006) Les questions suivantes peuvent aider agrave simplifier la collecte des donneacutees et agrave reacuteduire les coucircts

1Les informations sont-elles neacutecessaires et suffisantes Collectez seulement ce qui est neacutecessaire pour la gestion et lrsquoeacutevaluation du projet Limitez les besoins en informations aux objectifs indicateurs et hypothegraveses du cadre logique

Y a-t-il des sources fiables de donneacutees secondaires Cela peut permettre drsquoeacuteconomiser de lrsquoargent sur la collecte de donneacutees primaires

La taille de lrsquoeacutechantillon est-elle adapteacutee mais pas excessive Deacuteterminez la taille drsquoeacutechantillon qui est neacutecessaire pour estimer ou deacutetecter les changements Envisagez drsquoutiliser des eacutechantillons stratifieacutes ou groupeacutes

Les instruments de collecte des donneacutees peuvent-ils ecirctre simplifieacutes Eacuteliminez les questions inutiles des questionnaires et des check-lists En plus de faire gagner du temps et de lrsquoargent cela a lrsquoavantage suppleacutementaire drsquoeacuteviter de lasser les personnes interrogeacutees durant lrsquoenquecircte



Un plan drsquoanalyse des donneacutees doit identifier

Quand lrsquoanalyse des donneacutees sera faite Ce nrsquoest pas un eacutevegravenement isoleacute agrave la fin de la collecte des donneacutees mais une tacircche continue depuis le deacutebut du projet Lrsquoanalyse des donneacutees peut ecirctre structureacutee par des reacuteunions ou autres forums pour coiumlncider avec des dates importantes de la mise en œuvre ou des rapports

Agrave quel point lrsquoanalyse sera quantitative etou qualitative et quelles sont les compeacutetences speacutecialiseacutees et les eacutequipements neacutecessaires pour lrsquoanalyse

1 Qui fera lrsquoanalyse crsquoest-agrave-dire des experts externes des employeacutes du projet des beacuteneacuteficiaires etou drsquoautres parties prenantes

1 Si et comment on fera drsquoautres analyses plus tard On peut avoir besoin de ces analyses pour veacuterifier les reacutesultats pour faire un suivi sur les sujets de recherche pour une extension du projet et pour drsquoautres financements ou pour fournir des informations pour des programmes futurs

Une chose importante dans la planification de la collecte et de lrsquoanalyse des donneacutees est drsquoidentifier les limites biais et menaces eacuteventuelles agrave la justesse des donneacutees et de lrsquoanalyse On peut avoir une distorsion des donneacutees dues agrave des limites ou agrave des erreurs dans la conception lrsquoeacutechantillonnage les entretiens sur le terrain et lrsquoenregistrement et lrsquoanalyse des donneacutees Il vaut mieux faire un suivi attentif du processus et demande lrsquoavis drsquoexperts si crsquoest neacutecessaire

Il est aussi important de bien preacutevoir la gestion des donneacutees du systegraveme de SampE Il srsquoagit de lrsquoensemble des proceacutedures personnes compeacutetences et eacutequipements neacutecessaires pour stocker et geacuterer systeacutematiquement les donneacutees de SampE Si cette eacutetape nrsquoest pas bien planifieacutee des donneacutees peuvent ecirctre perdues ou enregistreacutees de faccedilon incorrecte ce qui compromet non seulement la qualiteacute et la fiabiliteacute des donneacutees mais aussi lrsquoanalyse et lrsquoutilisation de ces donneacutees Des donneacutees mal geacutereacutees sont un gaspillage de temps et de ressources


Les comptes rendus sont

eacutetroitement lieacutes au le

travail de SampE car on a

besoin de donneacutees pour

appuyer les principaux

reacutesultats et conclusions

preacutesenteacutes dans un

rapport de projet

Autres aspects de la planification du SampE

Rendre compte des informations et utilisation des informations Les comptes rendus sur les reacutealisations du projet et les reacutesultats de lrsquoeacutevaluation ont de nombreuses fonctions importantes

1 Faire avancer lrsquoapprentissage des employeacutes du projet ainsi que de la communauteacute du deacuteveloppent dans son ensemble

1 Ameacuteliorer la qualiteacute des services fournis

1 Informer les parties prenantes sur les beacuteneacutefices du projet et les impliquer dans un travail qui fait avancer les buts du projet

1 Informer les bailleurs de fonds les deacutecideurs politiques et les speacutecialistes techniques sur des interventions efficaces (et sur celles qui nrsquoont pas fonctionneacute comme on lrsquoespeacuterait)

1 Concevoir un modegravele de projet qui peut ecirctre reproduit et dont on peut augmenter lrsquoeacutechelle

Les comptes rendus sont eacutetroitement lieacutes au travail de SampE car on a besoin de donneacutees pour appuyer les principaux reacutesultats et conclusions preacutesenteacutes dans un rapport de projet Souvent le contenu et la freacutequence des processus de SampE sont deacutetermineacutes par les demandes et les calendriers des rapports

Quelques consideacuterations pratiques pour la planification des comptes rendus sur les informations et sur lrsquoutilisation des informations

1 Concevoir le plan de communication du SampE autour des besoins drsquoinformations des utilisateurs Le contenu et le format des rapports sur les donneacutees seront diffeacuterents selon que ces rapports doivent ecirctre utiliseacutes pour suivre les progregraves faire une planification strateacutegique reacutepondre agrave des conditions identifier des problegravemes justifier une demande de financement ou mener une eacutevaluation drsquoimpact

1 Identifier la freacutequence agrave laquelle on a besoin des donneacutees Par exemple les gestionnaires de projets peuvent avoir besoin drsquoeacutetudier les donneacutees freacutequemment pour eacutevaluer lrsquoavancement du projet et prendre des deacutecisions alors que les bailleurs de fonds peuvent nrsquoavoir besoin des donneacutees qursquoune ou deux fois par an pour avoir un compte rendu

1 Adapter le format des rapports aux utilisateurs preacutevus Les rapports peuvent ecirctre plus ou moins complexes et ecirctre reacutedigeacutes dans un jargon plus ou moins technique Le format et le moyen de diffusion du rapport doivent ecirctre adapteacutes aux utilisateurs particuliers et on utilisera des meacutethodes diffeacuterentes pour demander un feedback

Identifier les bons moyens et les bons meacutedias pour communiquer les donneacutees du SampE Envisager agrave la fois des comptes rendus internes comme des rapports reacuteguliers sur le projet pour la direction et des rapports drsquoactiviteacutes pour les bailleurs de fonds et des comptes



rendus externes comme des forums publics des communiqueacutes de presse des bilans et des sites internet

Personnel de SampE et renforcement des capaciteacutes Le choix du personnel est un souci particulier du travail de SampE parce que celui-ci demande une formation particuliegravere et une combinaison de capaciteacutes en recherche et en gestion de projets Lrsquoefficaciteacute du travail de SampE deacutepend aussi souvent de lrsquoassistance drsquoemployeacutes et de volontaires qui ne sont pas experts en SampE Le deacuteveloppement des capaciteacutes est donc un aspect crucial de la mise en œuvre drsquoun bon travail de SampE

Suggestions pour permettre un bon appui au SampE

Identifier les diffeacuterentes tacircches et les compeacutetences neacutecessaires qui y correspondent comme de bons systegravemes de collecte de donneacutees sur le terrain la conception de la recherche et la saisie et lrsquoanalyse de donneacutees

Eacutevaluer les compeacutetences correspondantes qui existent dans lrsquoeacutequipe du projet les organisations partenaires et les beacuteneacuteficiaires de la communauteacute eux-mecircmes

Speacutecifier dans quelle mesure les parties prenantes locales vont ou ne vont pas participer au processus de SampE (Cf Tableau 3)

1 Assigner des rocircles et responsabiliteacutes preacutecises aux membres de lrsquoeacutequipe et deacutesigner un gestionnaire de SampE

1 Recruter des consultants des eacutetudiants et autres pour les compeacutetences qui manquent et pour les besoins particuliers comme les traductions lrsquoanalyse statistique et les connaissances culturelles

1 Deacuteterminer les sujets pour lesquels on a besoin drsquoune formation formelle et faire des sessions de formation

1 Encourager les employeacutes agrave faire une formation informelle gracircce agrave des conseils et un feedback sur le lieu de travail par exemple des commentaires sur un rapport ou des conseils drsquoutilisation des programmes informatiques

Faire particuliegraverement attention au deacuteveloppement des capaciteacutes locales de SampE

Il faut du temps et de la patience pour deacutevelopper des compeacutetences naissantes en SampE mais en fin de compte les contributions des divers collaborateurs enrichiront le travail de SampE et permettront que le rocircle du SampE dans la mise en œuvre du projet soit mieux accepteacute



Tableau 3 Consideacuterer le SampE participatif

Avantages potentiels Inconveacutenients potentiels

Habilite les beacuteneacuteficiaires agrave analyser Il faut plus de temps et drsquoargent pour leur propre situation et agrave agir sur former et geacuterer le personnel local et les celle-ci (en tant que laquo participants membres de la communauteacute actifs raquo et non en tant que laquo Il faut des facilitateurs compeacutetentsbeacuteneacuteficiaires passifs raquo) pour que tout le monde comprenne

Deacuteveloppe la capaciteacute locale agrave geacuterer le processus et soit impliqueacute de faccedilon srsquoapproprier et maintenir le projet eacutegale du fait que les gens ont plus de La qualiteacute des donneacutees collecteacuteeschance drsquoaccepter et drsquointeacuterioriser les peut ecirctre compromise par la politiqueconstatations et les recommandations locale lrsquoanalyse des donneacutees et qursquoils donnent la prise de deacutecision peuvent ecirctre

Deacuteveloppe la collaboration et le domineacutees par les voix les plus consensus agrave diffeacuterents niveaux entre puissantes de la communauteacute (en lien les beacuteneacuteficiaires le personnel et les avec les facteurs de genre drsquoorigine partenaires locaux et la direction ethnique ou de religion)

Renforce la responsabiliteacute des Il faut que les populations locales beacuteneacuteficiaires en empecircchant qursquoune srsquoimpliquent vraiment et que les seule perspective ne domine le bailleurs de fonds soient drsquoaccord processus de SampE car le projet risque de ne pas utiliser

Fait eacuteconomiser du temps et de des indicateurs ou des formats lrsquoargent dans la collecte des donneacutees traditionnels pour rendre compte des par rapport agrave ce que cela coucircterait constatations drsquoutiliser le personnel du projet ou de recruter une aide exteacuterieure

Donne rapidement des informations inteacuteressantes venant du terrain pour prendre des deacutecisions de gestion afin drsquoexeacutecuter des mesures correctives

Budget du SampE Un travail important dans la planification du SampE est lrsquoestimation des coucircts du personnel et des autres ressources neacutecessaires pour faire le travail de SampE Il est important qursquoagrave la phase de conception du projet les speacutecialistes du SampE aient leur mot agrave dire dans les deacutecisions sur les besoins budgeacutetaires du SampE pour que des fonds soient alloueacutes speacutecifiquement au SampE et soient disponibles pour mettre en œuvre des tacircches speacutecifiques de SampE

Voici des suggestions pour preacuteparer un budget reacutealiste

1 Faire la liste de toutes les tacircches et des responsabiliteacutes geacuteneacuterales de SampE analysez ce qui est neacutecessaire pour chaque tacircche et deacuteterminer ce que cela coucirctera

Faire un budget pour le personnel le personnel agrave plein temps les consultants externes le deacuteveloppement des capaciteacutes la formation et drsquoautres deacutepenses pour les ressources humaines

Veacuterifier que le budget comprend toutes les deacutepenses drsquoeacutequipement les coucircts pour les locaux les eacutequipements et fournitures de bureau les voyages et lrsquoheacutebergement les mateacuteriels et programmes informatiques etc



1 Deacuteterminer si toutes les tacircches sont couvertes dans le budget geacuteneacuteral du projet comme lrsquoappui pour un systegraveme de gestion de lrsquoinformation le transport sur le terrain et lrsquoentretien des veacutehicules la traduction et le publication des documents ou outils de SampE

1 Eacutetudier les conditions du bailleur de fonds pour deacuteterminer srsquoil y a drsquoautres eacuteleacutements qui doivent ecirctre inclus dans le budget ou au contraire que le bailleur de fonds peut financer directement

Tenir compte des impreacutevus comme lrsquoinflation la deacutevaluation de la monnaie des vols drsquoeacutequipement ou la neacutecessiteacute de faire une collecte ou une analyse suppleacutementaires des donneacutees pour veacuterifier des constatations

Un texte justifiant chaque ligne budgeacutetaire peut proteacuteger contre des coupes budgeacutetaires arbitraires Il peut ecirctre neacutecessaire de clarifier ou de justifier certaines deacutepenses comme les salaires diffeacuterents de ce qui est normalement payeacute pour un certain type de poste les honoraires des consultants et des experts externes ou les diffeacuterentes eacutetapes drsquoune enquecircte qui srsquoadditionnent dans les frais (concevoir et tester un questionnaire traduire dans un sens puis dans lrsquoautre formation des enquecircteurs coucircts journaliers pour les enquecircteurs et les superviseurs sur le terrain coucircts de voyage et de logement pour faire lrsquoenquecircte analyse et reacutedaction des donneacutees etc)

Les gestionnaires de programmes demandent souvent quelle proportion du budget drsquoun projet devrait ecirctre alloueacutee au SampE Il nrsquoy a pas de formule fixe Divers bailleurs de fonds et organisations recommandent drsquoallouer entre 3 et 10 du budget drsquoun projet au SampE (Frankel et Gage 2007 p 11) En regravegle geacuteneacuterale le budget du SampE ne devrait pas ecirctre tellement bas qursquoil compromet la justesse ou la creacutedibiliteacute des reacutesultats mais il ne devrait pas non plus deacutetourner les ressources du projet au point drsquoaffecter la programmation


Annexe I Reacutefeacuterences et ressources

Annexe I Reacutefeacuterences et ressources1

Reacutefeacuterences AEA (American Evaluation Association) 2004 Principes directeurs de lrsquoAssociation ameacutericaine drsquoeacutevaluation pour

les eacutevaluateurs wwwevalorgPublicationsGuidingPrinciplesPrintableasp

AES (Australian Evaluation Association) 2002 Directives de la Socieacuteteacute australienne drsquoeacutevaluation sur la conduite eacutethique drsquoeacutevaluations httpwwwaesasnau

AusAID 2006 laquo MampE Framework Good Practice Guide raquo (Premiegravere version drsquoexposition 17 mars 2006) AusAID du Gouvernement australien wwwmandecoukdocsMEF20QAG_Guide20(ver7)201703016pdf

Bamberger Michael Jim Rugh et Linda Mabry 2006 RealWorld Evaluation Working Under Budget Time Data and Political Constraints Thousand Oaks Londres New Delhi SAGE Publications

Barton Tom 1997 laquo Guidelines to Monitoring and Evaluation How Are We Doing raquo CARE International Kampala Ouganda httppqdlcareorgpv_obj_cachepv_obj_id_1DCDB23F514606B280C36E5E42B6EF31F9D70700

Caldwell Richard 2002 Project Design Handbook Atlanta CARE International httppqdlcareorgpractice Design20Monitoring20and20EvaluationFormsBy20Languageaspx

CAD (Comiteacute drsquoaide au deacuteveloppement) 2008 laquo DAC Evaluation Quality Standards (draft) raquo reacuteseau drsquoeacutevaluation de DAC Organisation de coopeacuteration et de deacuteveloppement eacuteconomiques (OCDE) Paris France httpwww oecdorgdataoecd306236596604pdf

Frankel Nina et Anastasia Gage 2007 laquo MampE Fundamentals A Self-Guided Minicourse raquo Agence des Eacutetats-Unis pour le deacuteveloppement eacuteconomique (USAID) Washington DC httpwwwcpcuncedumeasure publicationspdfms-07-20pdf

IFAD (Fond international pour le deacuteveloppement agricole) 2002 laquo A Guide for Project MampE raquo IFAD Rome httpwwwifadorgevaluationguidetochtm

FICR (Feacutedeacuteration internationale des Socieacuteteacutes de la Croix Rouge et du Croissant Rouge) 2007 laquo Monitoring and Evaluation in a Nutshell raquo IFRC Genegraveve httpparticipation110mbcomPCDM20and20E20guide20finalpdf

Rugh Jim 2008 laquo The Rosetta Stone of Logical Frameworks raquo Compileacute par Jim Rugh pour CARE International et InterActionrsquos Evaluation Interest Group httpwwwmandecoukdocsRosettastonedoc

Stetson Valerie Guy Sharrock et Susan Hahn 2004 laquo ProPack le dossier projet de CRS raquo Catholic Relief Services Baltimore httpcrsorgpublicationslistcfmsector=19

1 Lagrave ougrave crsquoeacutetait possible on a fourni des liens Internet pour teacuteleacutecharger des reacutefeacuterences et des ressources Si un lien nrsquoest plus actif essayez de faire une recherche par mots cleacutes sur la publication dans un moteur de recherche tel que Google par exemple



Theory of Change 2008 Une collaboration de ActKnowledge et de la table ronde de lrsquoAspen Institute sur le changement communautaire httpwwwtheoryofchangeorghtmloverviewhtml

USAID (Agence des Eacutetats-Unis pour le deacuteveloppement international) 1996 laquo Preparing a Performance Monitoring Plan Performance Monitoring and Evaluation TIPS Number 7 raquo USAID Washington DC httppdfusaidgovpdf_docspnaby215pdf

Ressources Croix Rouge ameacutericaine 2006 laquo Integrated Planning Process Project Design amp Proposal Writing Guide raquo Croix

Rouge ameacutericaine Washington DC httpwwwredcrossorgstaticfile_cont5976_lang0_2296pdf

Agence canadienne de deacuteveloppement 2008 Ressources utiles pour le SampE sur httpwwwacdi-cidagcca CIDAWEBacdicidansfEnJUD-111795644-KJX

CAD (Comiteacute drsquoaide au deacuteveloppement) Reacuteseau sur lrsquoeacutevaluation dans le deacuteveloppement 2008 httpwww oecdorgdocument3503343en_21571361_34047972_31779555_1_1_1_100html Organisation pour la cooepeacuteration et le deacuteveloppement eacuteconomiques (OCDE) documents publications reacuteseaux et liens de SampE avec des critegraveres et des normes pour lrsquoeacutevaluation

Danida 1996 laquo Logical Framework Approach A Flexible Tool for Participatory Development raquo httpamgumdkenmenuTechnicalGuidelinesLogicalFrameworkApproach

Deacutepartement pour le deacuteveloppement international (DFID) 2006 laquo A Guide for DFID-contracted Research Programmes raquo httpwwwdfidgovukresearchme-guide-contracted-researchpdf

IntraHealth International 2008 Sample PI Monitoring and Evaluation Plan httpwwwintrahealthorgssttool5-1html

MandE News httpmandecouk Un site complet de ressources pour le SampE avec des liens vers drsquoautres ressources de SampE Par exemple on peut acceacuteder agrave de nombreuses ressources sur les cadres logiques et leurs avantages et inconveacutenients sur httpportalswdiwurnlppmeindexphpLogical_Framework_Approach and httpportals wdiwurnlppmeindexphpLogical_Framework_Approach and httpwwwmandecouklogframehtm

MEASURE (Measure and Evaluation to Assess and Use Results Evaluation) 2008 httpwwwcpcuncedumeasure Financeacute par lrsquoUSAID le cadre MEASURE offre des publications des outils des formations et drsquoautres ressources de SampE

Portail participatif de ressources sur le suivi et lrsquoeacutevaluation (PPMampE) 2008 Contient de multiples ressources pour la planification du SampE httpportalswdiwurnlppmeindexphpHome

Centre de ressource pour lrsquoeacutevaluation de la performance (PARC) 2008 httpwwwparcinfoorg Contient des ressources utiles pour le SampE

Resources for Methods in Evaluation and Social Research 2008 httpgsociologyicaaporgmethods Donne la liste de ressources utiles pour lrsquoeacutevaluation des programmes et les meacutethodes de recherche sociale

ONUSIDA 2002 Manuel opeacuterationnel de suivi et eacutevaluation Programme conjoiont des Nations Unies sur le VIH Sida httpwww1worldbankorghiv_aidsdocsMampEManualpdf



UNICEF Eacutevaluation httpwwwuniceforgevaluation Donne des ressources utiles pour le SampE ainsi que des liens vers drsquoautres sites de SampE

Programme des Nations Unies pour le deacuteveloppement (PNUD) 2008 httpwwwundporgeo Ressources utiles pour le SampE ainsi que des liens vers drsquoautres sites de SampE

Groupe drsquoeacutevaluation des Nations Unies (UNEG) 2008 httpwwwunevalorg Normes ressources et eacutevegravenements de SampE

Fonds des Nations Unies pour la population (FNUAP) 2000 laquo The Programme Managerrsquos Planning Monitoring and Evaluation Toolkit Planning and Managing an Evaluation raquo Bureau de supervision et drsquoeacutevaluation du FNUAP httpwwwunfpaorgmonitoringtoolkithtm

USAID (Agence des Eacutetats-Unis pour le deacuteveloppement international) 2002 laquo Developing a Participatory Monitoring and Evaluation Plan raquo Produit pour lrsquoUSAID par le Synergy Project wwwsynergyaidscom

mdashmdashmdash 2007 laquo Monitoring and Evaluation Systems Strengthening Tool raquo USAID Washington DC httpwww pepfargovdocumentsorganization79624pdf

USAID Centre pour lrsquoinformation de deacuteveloppement et drsquoeacutevaluation 1996 Publications drsquoeacutevaluation sur http wwwusaidgovpubsusaid_eval Ressources de SampE de1996 mais toujours inteacuteressantes et utiles surtout la seacuterie concise de documents sur le TSIP Par exemple laquo Preparing a Performance Monitoring Plan Performance Monitoring and Evaluation TIPS Number 7 raquo

USAIDDCHAFFP 2005 Politiques de programme du Titre II PL 480 et projet de directives provisoires 14 mars 2005 Annexe A p 9

W K Kellogg Foundation 2001 laquo Logic Model Development Guide raquo WK Kellogg Foundation Battle Creek Michigan httpwwwwkkforgPubsToolsEvaluationPub3669pdf

Groupe indeacutependant drsquoeacutevaluation de la Banque Mondiale (IEG) 2008 Programme international de formation pour lrsquoeacutevaluation dans le deacuteveloppement Les modules du cours preacutesentent les principaux concepts et pratiques du SampE httpwwwworldbankorgoedipdetmoduleshtml

Autres modules de renforcement des capaciteacutes institutionnelles Seacuterie de modules de formation sur le SampE produite par la Croix Rouge ameacutericaineCatholic Relief Services (CRS) American Red CrossCRS Washington DC et Baltimore wwwcrsorg et wwwredcrossorg

Hagens Clara avec lrsquoaide de Guy Sharrock 2008 laquo Recruter du personnel de SampE raquo

McMillan Della E et Alice Willard 2008 laquo Preacuteparer une eacutevaluation raquo

McMillan Della E Guy Sharrock et Alice Willard 2008 laquo Directives et outils pour la preacuteparation et lrsquoutilisation des tableaux de suivi des indicateurs de performance (TSIP) raquo


Annexe II Exemple de Cadre logique

Objectifs du projet Indicateurs Moyens de veacuterification

Hypothegraveses

But Ameacuteliorer la santeacute dans les communauteacutes cibles du District de Matara au Sri Lanka en reacuteduisant lrsquoincidence de la polio

Indicateur drsquoimpact B1 Pourcentage drsquoenfants de moins de 5 ans qui sont morts de la polio (taux de mortaliteacute infantile)

1 Enquecircte dans les meacutenages

2 Archives des cliniques

La situation seacutecuritaire et politique du Sri Lanka reste stable pour le pays et permet la mise en œuvre du projet

Effet 1 Augmentation de la vaccination des enfants de moins drsquoun an dans les communauteacutes cibles

Indicateur drsquoeffet 1a Pourcentage des enfants de moins drsquoun an qui ont reccedilu une vaccination complegravete contre la polio (couverture de la vaccination)


2 Archives des vaccinations

Acceptation du vaccin contre la polio dans la communauteacute

Produit 11 Atelier de conscientisation agrave la vaccination contre la polio (et participation de la population)

Indicateur de produit 11a Nombre de personnes srsquooccupant drsquoenfants participant aux ateliers de conscientisation agrave la vaccination contre la polio

1 Liste des preacutesents agrave lrsquoatelier

2 Groupe focal

La capaciteacute de la communauteacute agrave participer au projet nrsquoest pas compromise par drsquoautres initiatives de deacuteveloppement agrave lrsquointeacuterieur de la communauteacute par une catastrophe naturelle etc

Activiteacute A1 Traduction des livrets sur la la vaccination

Indicateur de processus A1a Nombre de livrets sur la vaccination traduits

Inventaire des livrets traduits

Intrant I1 Livrets sur la vaccination contre la polio formateurs locaux etc

Indicateur drsquointrant I1a Nombre de livrets sur la vaccination contre la polio imprimeacutes

Inventaire de lrsquoentrepocirct pour les livrets et reccedilus de lrsquoimprimerie


Annexe III Exemples de tableaux des indicateurs2

Indicateurs Deacutefinition des Meacutethodes Personne(s) Freacutequence Analyse des Utilisation de indicateurs sources responsable(s) calendriers donneacutees lrsquoinformation

Exemple 1 Les laquo enfants raquo 1 Enquecircte Eacutequipe externe 1 Lrsquoenquecircte de 1 Eacutequipe de 1 Mise en œuvre Effet 1a sont acircgeacutes de 3 aleacuteatoire des drsquoeacutevaluation fin deacutepend du gestion du du projet et Pourcentage jours agrave 1 an meacutenages agrave la fin calendrier du projet durant prise de deacutecishydes enfants de moins drsquoun an qui ont reccedilu une vaccinashytion complegravete pour la polio (couverture de la vaccination)

2 Une laquo vaccinashytion totale raquo signifie avoir reccedilu un vacshycin contre la polio selon les normes de lrsquoOMS (1e dose agrave nrsquoimporte quel moment apregraves la naisshysance 2e dose 1-2 mois plus tard 3e dose 6-12 mois apregraves le second vacshycin)

3 Numeacuterateur nombre drsquoenfants entiegraverement vaccineacutes dans la

du projet 2 Discussion en

groupe focaux communaushytaires

3 Entretiens avec des informashyteurs cleacutes de la communauteacute

projet 2 Discussions en

groupes focaux dans les eacutecoles enseignants eacutelegraveves et adshyministration agrave la fin du projet

3 Deacutebut de la collecte des donneacutees selon le calendrier du projet

4 Questionnaire drsquoenquecircte de fin en cours deacutepend du calendrier du projet

la reacuteunion de reacuteflexion sur le projet

2 Reacuteunion apregraves le projet avec les partenaires de mise en œushyvre (Socieacuteteacute de la Croix Rouge du Sri Lanka) faciliteacutee par le gestionnaire de projet

sions avec la communauteacute

2 Suivi du proshycessus du projet avec la gestion de la Socieacuteteacute de la Croix Rouge du Sri Lanka

3 Gestion du programme de reconstrucshytion apregraves le tsunami

4 Eacutevaluation drsquoimpact pour justifier lrsquointervention au Ministegravere de la santeacute et aux bailleurs de fonds

communauteacute Deacutenominateur Nombre total drsquoenfants de la commushynauteacute dans la cateacutegorie drsquoacircge deacutefinie

2 Note Les indicateurs de lrsquoAnnexe III sont des exemples et ne viennent pas neacutecessairement du mecircme projet ni du mecircme objectif


Annex III Exemples de tableaux des indicateurse

Indicateurs Deacutefinition des indicateurs

Meacutethodes sources

Personne(s) responsable(s)

Freacutequencecalendriers

Analyse des donneacutees

Utilisation de lrsquoinformation

Exemple 1 Les laquo personnes Liste des par- Responsable de Donneacutees des 1 Reacuteunion 1 Mise en œuvre Produit IIa srsquooccupant ticipants agrave lrsquoatelier lrsquoeacuteducation sur le listes de particishy trimestrielle de du projet avec Nombre de drsquoenfants raquo sont sur la vaccination terrain (Priyantha pants collecteacutees agrave compte rendu les beacuteneacuteficiaires personnes les beacuteneacuteficiaires contre la polio Perrea) lrsquoatelier pour des et de reacuteflexion de la commushysrsquooccupant de la commushy comptes rendus sur le projet nauteacute drsquoenfants participant aux ateliers de conshyscientisation agrave la vaccination contre la polio

nauteacute identifieacutes par lrsquoagent du Gouvernement local (Grama Niladari) et qui participent aux activiteacutes du projet

trimestriels

2 Eacutequipe de gestion du projet durant la reacuteunion trimestrielle de reacuteflexion

2 Suivre la formashytion dans la communauteacute avec la direcshytion avec la Socieacuteteacute de la Croix Rouge du Sri Lanka

3 Gestion du 2 Les laquo ateliers de programme

conscientisation de retour agrave la agrave la vaccinashy normale apregraves tion contre la le tsunami polio raquo sont des formations drsquoune journeacutee

4 IEacutevaluation drsquoimpact pour justifier

conccedilues pour donner des connaissances sur la vaccinashytion contre la polio selon le

lrsquointervention au Ministegravere de la santeacute et les bailleurs de fonds

programme standard reconnu par le ministegravere de la santeacute

3 Numeacuterateur nombre de beacuteshyneacuteficiaires qui participent agrave un atelier drsquoune journeacutee complet




Exemple

Effet 2a

Pourcentage des eacutecoles cibleacutees qui reacuteussissent agrave faire au moins un exercice drsquoeacutevacuation drsquourgence par trimestre

1 Les laquo eacutecoles raquo sont toutes les eacutecoles de la maternelle agrave la terminale dans le district de Matara

2 Critegraveres de la laquo reacuteussite raquo exercice non annonceacute gracircce au systegraveme drsquoalerte preacutecoce temps de reacuteacshytion de moins de 20 minutes les membres de lrsquoeacutecole se renshydent agrave lrsquoendroit preacutevu dans le Plan de reacuteponse agrave la crise de lrsquoeacutecole

3 Numeacuterateur Nombre drsquoeacutecoles qui reacuteussissent agrave faire lrsquoexercice par trimestre Deacutenominateur Nombre total drsquoeacutecoles cibleacutees

1 Visites preacutevues des sites durant un exercice drsquoeacutevacuation

2 Remplir la check-list sur lrsquoexercice drsquoeacutevacuation et lrsquoentrer dans le rapport trimesshytriel du projet

3 Discussions de groupes focaux agrave lrsquoeacutecole (enseishygnants eacutelegraveves administration)

Responsable sur le terrain de lrsquoeacutecole Shantha Mande

1 Donneacutees des check-lists colshylecteacutees chaque trimestre

2 Discussions de groupes focaux enseignants eacutelegraveves et administration tous les 6 mois

3 Commencer la collecte des donneacutees le 150406

4 Check-list de lrsquoexercice remplie pour le 080306

1 Reacuteunion apregraves lrsquoexercice avec le Comiteacute de lrsquoeacutecole contre les catastroshyphes animeacute par le responsable sur le terrain


1 Mise en œuvre du projet avec les comiteacutes des eacutecoles contre les catastrophes

2 Suivre la formation dans lrsquoeacutecole avec la direction avec la Socieacuteteacute de la Croix Rouge du Sri Lanka

3 Gestion du programme de retour agrave la normale apregraves le tsunami

4 Eacutevaluation drsquoimpact pour justifier lrsquointervention au Ministegravere de lrsquoassistance apregraves les catastrophes les bailleurs de fonds etc


Annexe IV Outils et techniques de collecte de donneacutees3

eacutetude de cas Une description narrative deacutetailleacutee de personnes communauteacutes organisations programmes ou peacuteriodes de temps Les eacutetudes de cas sont particuliegraverement utiles pour eacutevaluer des situations complexes et pour eacutetudier lrsquoimpact qualitatif

Check-list Une liste drsquoeacuteleacutements pour valider ou veacuterifier que les proceacutedureseacutetapes ont eacuteteacute suivies ou que des comportements examineacutes sont preacutesents

Entretien agrave questions fermeacutees (structureacute) Une technique drsquoentretien qui utilise des questions bien organiseacutees qui ne permettent qursquoun nombre limiteacute de reacuteponses comme ouinon ou des reacuteponses exprimeacutees par une note ou un chiffre sur une eacutechelle Les reacuteponses peuvent facilement ecirctre codeacutees numeacuteriquement pour une analyse statistique

Entretiensreacuteunions communautaires Une forme de reacuteunion publique ouverte agrave tous les membres de la communauteacute Il y a une interaction entre les participants et lrsquoenquecircteur qui preacuteside la reacuteunion et pose des questions selon un guide pour les entretiens preacutepareacutes

observation directe Un compte rendu de ce que des observateurs voient et entendent sur un site particulier en utilisant une forme drsquoobservation deacutetailleacutee Ils peuvent observer lrsquoenvironnement physique les activiteacutes ou les processus Lrsquoobservation est une bonne technique pour collecter des donneacutees sur des scheacutemas de comportement et sur des conditions physiques

Discussion en groupe focal Discussion organiseacutee avec un petit groupe (geacuteneacuteralement de 8 agrave 12 personnes) de participants pour noter les attitudes perceptions et convictions inteacuteressants pour les questions qursquoon examine Un animateur introduit le sujet et utilise un guide pour les entretiens preacutepareacutes pour diriger la discussion et susciter des discussions des opinions et des reacuteactions

Entretien avec un informateur cleacute Un entretien avec une personne qui a des informations speacuteciales sur un sujet particulier Ces entretiens suivent geacuteneacuteralement un format ouvert ou semi-structureacute

tests en laboratoire Mesures preacutecises drsquoun pheacutenomegravene objectif particulier par exemple le poids des nourrissons ou la qualiteacute de lrsquoeau

Mini-enquecircte Donneacutees collecteacutees par des entretiens avec 25 agrave 30 personnes souvent seacutelectionneacutees en utilisant des techniques drsquoeacutechantillonnage non probabiliste

Changement le plus significatif (MSC) Une technique participative de suivi baseacutee sur des eacutetudes des changements importants ou significatifs plutocirct que des indicateurs Elles donnent une image riche de lrsquoimpact du travail de deacuteveloppement et fournissent la base drsquoun dialogue sur les principaux objectifs et sur la valeur des programmes de deacuteveloppement

Entretien ouvert (semi-structureacute) Une technique pour poser des questions qui permet agrave lrsquoenquecircteur drsquoaller

3 Note This list is not exhaustive as tools and techniques are emerging and evolving in the MampE field


Annexe IV Outils et techniques de collecte de donneacutees

plus loin et drsquoapprofondir les sujets inteacuteressants (plutocirct que de ne poser que des questions auxquelles on peut reacutepondre par oui ou par non)

observation des participants Une technique utiliseacutee agrave lrsquoorigine par les anthropologistes Pour cela le chercheur doit passer beaucoup de temps avec le groupe eacutetudieacute (des jours) et interagir avec eux en tant que participant agrave leur communauteacute Cette meacutethode permet drsquoavoir des perspectives qursquoon ne pourrait pas avoir autrement mais elle prend beaucoup de temps

Meacutethode acceacuteleacutereacutee de recherche participative Cette meacutethode utilise des techniques drsquoimplication de la communauteacute pour comprendre les points de vue de la communauteacute sur une question particuliegravere Cela se fait geacuteneacuteralement de maniegravere rapide et intensive sur une peacuteriode de 2 agrave 3 semaines On utilise des entretiens des groupes focaux et une cartographie de la communauteacute

Questionnaire Un instrument de collecte de donneacutees qui contient un ensemble de questions organiseacutees de maniegravere systeacutematique ainsi que des instructions pour lrsquoenquecircteur sur la maniegravere de poser les questions (geacuteneacuteralement utiliseacutee pour une enquecircte)

Bilan (ou eacutevaluation) rapide Une technique rapide et agrave moindre cout permettant de collecter des donneacutees systeacutematiquement pour prendre des deacutecisions en utilisant des meacutethodes qualitatives et quantitatives comme des visites sur le site des observations ou des enquecirctes sur des eacutechantillons Cette technique a beaucoup de caracteacuteristiques communes avec lrsquoeacutevaluation participative (comme la triangulation et les eacutequipes multidisciplinaires) et reconnait que la connaissance indigegravene est une consideacuteration cruciale pour prendre des deacutecisions

Enquecircte auto-administreacutee Enquecircte eacutecrite remplie par la personne interrogeacutee soit en groupe soit chacun pour soi Les personnes interrogeacutees doivent ecirctre alphabeacutetiseacutees (par exemple on peut lrsquoutiliser pour faire une enquecircte sur les opinions des enseignants)

Revue de donneacutees statistiques Une revue de recensements de population drsquoeacutetudes de recherche et drsquoautres sources de donneacutees statistiques

Enquecircte Collecte systeacutematique drsquoinformations dans une population deacutefinie geacuteneacuteralement gracircce agrave des entretiens ou agrave des questionnaires administreacutes agrave un eacutechantillon des uniteacutes de la population (par ex les personnes les beacuteneacuteficiaires les adultes)

techniques visuelles Les participants preacuteparent des cartes des diagrammes des calendriers des chronogrammes et drsquoautres eacuteleacutements visuels pour examiner les sujets de lrsquoeacutetude Les participants peuvent ecirctre inciteacutes agrave construire des reacuteponses visuelles agrave des questions poseacutees par les intervieweurs par exemple en dessinant une carte de leur zone locale Cette technique est particuliegraverement efficace lagrave ougrave des meacutethodes verbales peuvent ecirctre difficiles parce que les populations cibles sont peu alphabeacutetiseacutees ou qursquoelles ont des langues diffeacuterentes ou dans des situations ougrave les informations que lrsquoon cherche ne peuvent pas ecirctre facilement exprimeacutees en mots ni en chiffres

Revue de documents eacutecrits Une revue de documents (donneacutees secondaires) archives et rapports de projets bases de donneacutees administratives mateacuteriels de formation correspondance leacutegislation et documents de politique


Depuis 1943 Catholic Relief Services (CRS) a le privilegravege de servir les pauvres et les personnes deacutefavoriseacutees dans le monde Sans distinction de race de religion ou de nationaliteacute CRS apporte une assistance drsquourgence agrave la suite de catastrophes naturelles ou causeacutees par lrsquohomme Par le biais de projets de deacuteveloppement dans des domaines de lrsquoeacuteducation la paix et la justice lrsquoagriculture la microfinance la santeacute et le VIHSida CRS travaille agrave faire respecter la digniteacute humaine et agrave promouvoir une meilleure qualiteacute de vie CRS travaille aussi aux Eacutetats-Unis pour mieux faire connaicirctre aux catholiques et autres personnes inteacuteresseacutees les problegravemes de paix et de justice internationales afin qursquoils agissent en ce sens Ses programmes et ses ressources reacutepondent agrave lrsquoappel des eacutevecircques des Eacutetats-Unis qui demandent de vivre dans la solidariteacute comme une seule famille humaine par delagrave les frontiegraveres les oceacuteans et les diffeacuterences de langues de cultures et de conditions eacuteconomiques

Par des initiatives mondiales et des programmes au niveau des communauteacutes la Croix Rouge Ameacutericaine aide les personnes vulneacuterables partout dans le monde agrave preacutevenir les catastrophes les urgences humanitaires complexes et les conditions sanitaires dangereuses agrave srsquoy preacuteparer et agrave y reacutepondre En se concentrant sur la santeacute au niveau mondial la preacuteparation et la reacuteaction aux catastrophes la restauration des liens familiaux et la disseacutemination de la loi humanitaire internationale la Croix Rouge Ameacutericaine offre une assistance humanitaire rapide efficace et de grande ampleur aux personnes dans le besoin Pour reacutealiser ses buts la Croix Rouge Ameacutericaine travaille avec ses partenaires dans le mouvement international de la Croix Rouge et du Croissant Rouge et avec drsquoautres organisations internationales drsquoassistance et de deacuteveloppement pour deacutevelopper les capaciteacutes locales mobiliser et habiliter les communauteacutes et eacutetablir des partenariats Son programme le plus important est actuellement le Programme de Reconstruction apregraves le Tsunami qui ameacuteliore la santeacute communautaire et preacutevient les eacutepideacutemies appuie les communauteacutes pour reconstruire leur vie et reacutetablir leurs moyens drsquoexistence et aide les socieacuteteacutes concerneacutees de la Croix Rouge et du Croissant Rouge ainsi que leurs communauteacutes agrave deacutevelopper des capaciteacutes de preacuteparation aux catastrophes

Publieacute en 2008 par Catholic Relief Services American Red Cross 228 W Lexington Street 2025 E Street NW Baltimore MD 21201-3413 USA Washington DC 20006 USA

Auteur Scott G Chaplowe (Croix Rouge ameacutericaine) Eacutediteur de la seacuterie Guy Sharrock (CRS) Lecteurscorrecteurs Cynthia Green et Dina Towbin Traductrice Odile Adjavon Revu par Alexandre Diouf Conception graphique Jeanne Ivy Photo de couverture Sean Sprague

Ce module a eacuteteacute produit par CRS et la Croix Rouge Ameacutericaine avec un appui financier des subventions Food for Peace (FFP) de lrsquoAgence des Eacutetats-Unis pour le Deacuteveloppement International (USAID) Subvention de deacuteveloppement des capaciteacutes institutionnelles du CRS (AFP A-00-03-00015-00) et Subvention de deacuteveloppement des capaciteacutes institutionnelles de la Croix Rouge Ameacutericaine (AFP A-00-00007-00) Les points de vue exprimeacutes dan ce documents sont ceux de lrsquoauteur et ne repreacutesentent pas neacutecessairement ceux de lrsquoUSAID ou de FFP

Citation recommandeacutee Chaplowe Scott G 2008 laquo Planifier le suivi et lrsquoeacutevaluation raquo Seacuterie de modules sur le SampE Croix Rouge ameacutericaineCRS Croix Rouge ameacutericaine et CRS Washington DC et Baltimore MD

Pour voir la seacuterie complegravete veuillez aller sur le site wwwcrsorg ou wwwredcrossorg


iii Preacuteface

iii Remerciements

iv Sigles


1 Introduction













Sigles













de programmes

humanitaires ou de




du financement des

programmes

Introduction





2 Un cadre logique




Introduction




Le SampE doit faire





achegravevement




Fin du projet

Milieu du projet

Suite du projet



des besoins






























SampE




















































Objectifs du projet


Hypothegraveses








































































































rapport de projet







































































































Hypothegraveses














2 Groupe focal







































trimestriels













Exemple

Effet 2a















































iii Preacuteface

iii Remerciements

iv Sigles


1 Introduction













Sigles













de programmes

humanitaires ou de




du financement des

programmes

Introduction





2 Un cadre logique




Introduction




Le SampE doit faire





achegravevement




Fin du projet

Milieu du projet

Suite du projet



des besoins






























SampE




















































Objectifs du projet


Hypothegraveses








































































































rapport de projet







































































































Hypothegraveses














2 Groupe focal







































trimestriels













Exemple

Effet 2a


















































Sigles













de programmes

humanitaires ou de




du financement des

programmes

Introduction





2 Un cadre logique




Introduction




Le SampE doit faire





achegravevement




Fin du projet

Milieu du projet

Suite du projet



des besoins






























SampE




















































Objectifs du projet


Hypothegraveses








































































































rapport de projet







































































































Hypothegraveses














2 Groupe focal







































trimestriels













Exemple

Effet 2a














































Sigles













de programmes

humanitaires ou de




du financement des

programmes

Introduction





2 Un cadre logique




Introduction




Le SampE doit faire





achegravevement




Fin du projet

Milieu du projet

Suite du projet



des besoins






























SampE




















































Objectifs du projet


Hypothegraveses








































































































rapport de projet







































































































Hypothegraveses














2 Groupe focal







































trimestriels













Exemple

Effet 2a



















































de programmes

humanitaires ou de




du financement des

programmes

Introduction





2 Un cadre logique




Introduction




Le SampE doit faire





achegravevement




Fin du projet

Milieu du projet

Suite du projet



des besoins






























SampE




















































Objectifs du projet


Hypothegraveses








































































































rapport de projet







































































































Hypothegraveses














2 Groupe focal







































trimestriels













Exemple

Effet 2a














































Introduction




Le SampE doit faire





achegravevement




Fin du projet

Milieu du projet

Suite du projet



des besoins






























SampE




















































Objectifs du projet


Hypothegraveses








































































































rapport de projet







































































































Hypothegraveses














2 Groupe focal







































trimestriels













Exemple

Effet 2a














































Le SampE doit faire





achegravevement




Fin du projet

Milieu du projet

Suite du projet



des besoins






























SampE




















































Objectifs du projet


Hypothegraveses








































































































rapport de projet







































































































Hypothegraveses














2 Groupe focal







































trimestriels













Exemple

Effet 2a




























































SampE




















































Objectifs du projet


Hypothegraveses








































































































rapport de projet







































































































Hypothegraveses














2 Groupe focal







































trimestriels













Exemple

Effet 2a


















































SampE




















































Objectifs du projet


Hypothegraveses








































































































rapport de projet







































































































Hypothegraveses














2 Groupe focal







































trimestriels













Exemple

Effet 2a


















































































Objectifs du projet


Hypothegraveses








































































































rapport de projet







































































































Hypothegraveses














2 Groupe focal







































trimestriels













Exemple

Effet 2a




























































Objectifs du projet


Hypothegraveses








































































































rapport de projet







































































































Hypothegraveses














2 Groupe focal







































trimestriels













Exemple

Effet 2a
















































Objectifs du projet


Hypothegraveses








































































































rapport de projet







































































































Hypothegraveses














2 Groupe focal







































trimestriels













Exemple

Effet 2a

































































































































rapport de projet







































































































Hypothegraveses














2 Groupe focal







































trimestriels













Exemple

Effet 2a



















































































































rapport de projet







































































































Hypothegraveses














2 Groupe focal







































trimestriels













Exemple

Effet 2a









































































































rapport de projet







































































































Hypothegraveses














2 Groupe focal







































trimestriels













Exemple

Effet 2a
































































































rapport de projet







































































































Hypothegraveses














2 Groupe focal







































trimestriels













Exemple

Effet 2a


























































































rapport de projet







































































































Hypothegraveses














2 Groupe focal







































trimestriels













Exemple

Effet 2a












































































rapport de projet







































































































Hypothegraveses














2 Groupe focal







































trimestriels













Exemple

Effet 2a






























































rapport de projet







































































































Hypothegraveses














2 Groupe focal







































trimestriels













Exemple

Effet 2a





















































rapport de projet







































































































Hypothegraveses














2 Groupe focal







































trimestriels













Exemple

Effet 2a






































































































































Hypothegraveses














2 Groupe focal







































trimestriels













Exemple

Effet 2a
























































































































Hypothegraveses














2 Groupe focal







































trimestriels













Exemple

Effet 2a









































































































Hypothegraveses














2 Groupe focal







































trimestriels













Exemple

Effet 2a


































































































Hypothegraveses














2 Groupe focal







































trimestriels













Exemple

Effet 2a

















































































Hypothegraveses














2 Groupe focal







































trimestriels













Exemple

Effet 2a
































































Hypothegraveses














2 Groupe focal







































trimestriels













Exemple

Effet 2a
















































Hypothegraveses














2 Groupe focal







































trimestriels













Exemple

Effet 2a












































































trimestriels













Exemple

Effet 2a























































trimestriels













Exemple

Effet 2a
















































Exemple

Effet 2a




















































































Documents

Paniier le suivi et l’évaluation - · PDF fileDepuis 1943, Catholic Relief Services (CRS) a le privilège de servir les pauvres et les personnes défavorisées dans le monde. Sans