1

L’évaluation de la SSIcomment et pourquoi ?

• Les questions, traitées par l’évaluation, ont été articulées autour de

- La pertinence et la cohérence des stratégies du projet

- L’efficacité des actions menées

- L’efficience de l’organisation du projet

- L’impact auprès des publics touchés et auprès de acteurs et l’impact de la médiatisation

• Les résultats attendus de l’évaluation pour le comité de pilotage

- Permettre au projet de gagner en efficacité et d’examiner la pertinence des stratégies et modes d’intervention,

- Evaluer l’impact global de l’action sur le terrain,

- Vérifier si ce qui est donné à voir de la solidarité internationale par les animations locales correspond aux postulats fondateurs du projet,

- Préciser la place de la SSI par rapport aux autres campagnes.

1 Introduction

2

La méthodologie

• Les séances de régulation de l’évaluation• Les méthodes de recueil de l’information• Les modes d’analyses• Les difficultés rencontrées

1 Introduction

3

L’enjeu de la SSI est d’articuler une mission de communication et une

mission d’éducation.

Elle mobilise pour cela son réseau à partir d’un fonctionnement sur le mode du consensus.

La mobilisation massive d’acteurs à travers la France aura pour effets la mise en acte des prises de conscience provoquées par les animations, associée à une communication médiatique auprès d’un public le plus large possible.

1 Introduction

4

• Le manque d’affirmation d’un positionnement clair et fort sur la SI

• Le rôle de la charte de la SSI• La création d’un label SSI

Affirmer le positionnement de la SSI, c’est répondre à la question « Pourquoi être solidaire ? » et préciser les

enjeux, les contenus et les contours de la solidarité internationale.

2 Pertinence

5

• L’articulation entre le niveau national et le niveau local

Intégrer la participation des collectifs régionaux

• Les animations en région

L’évolution de la mobilisation des acteurs en région

La traduction des objectifs par les acteurs en région

2 Pertinence

6

La SSI pour les acteurs en région« C’est un peu un forum social par les thèmes et les messages que l’on

veut passer et parce qu’on est les relais locaux des acteurs nationaux »

« La Semaine a un effet de dynamique et de catalyseur en local »

« Tous les types d’acteurs peuvent s’y retrouver et toutes les facettes de la solidarité peuvent y être »

« La Semaine n’a pas de thématique et permet la diversité et de faire connaître des choses pas forcément spectaculaires »

« La Semaine c’est la mise en lumière d’un travail tout au long de l’année »

« C’est le moment où on parle d’éducation au développement au niveau des médias »

« La Semaine c’est un peu le bazar de la solidarité internationale, la foire aux affaires »

2 Pertinence

7

Intérêt de la SSI pour les acteurs locaux

0 2 4 6 8 10

Participer à une opération nationale

Cadre pour des partenariats

Un « label national »

Bénéfice d’un soutien financier

Autre

Retombées médiatiques

Note moyenne obtenue par question sur un maximum de 10

Rapport final

2 Pertinence

8

Les outils de la coordination nationale

• Le rôle des outils dans la stratégie de communication et d’information

Susciter, soutenir et accompagner la mise en place d’initiatives locales, par une mobilisation des acteurs connus ou potentiels pour la réalisation d’animations

Sensibiliser les publics, par la promotion de l’opération nationale et la sensibilisation à la solidarité internationale

• Le rôle du site Internet, une double fonction,

• mobiliser les acteurs locaux et sensibiliser le public

• Quelques principes élucidés du contenu des outils

•Le message •Le support •Le graphisme •L’interactivité

2 Pertinence

9

Pertinence de la médiatisation de l’opération

Les stratégies de communication

Objectif de la SSI

« communiquer auprès des médias et du grand public sur la Semaine de la solidarité internationale et donc sur la solidarité internationale »

- Communiquer sur la SSI n’est pas communiquer sur la solidarité internationale.

- Le travail de communication pour faire passer un message de fond est un travail au long cours

2 Pertinence

10

Pertinence : points forts et faiblesses

• Points forts•

• Un rendez vous annuel et d’envergure nationale confirmé par le nombre croissant d’animations et d’organisateurs

• Faiblesses

• Un message flou difficilement communicable avec des valeurs de la solidarité internationale pas assez affichées,

• Un lien encore timide entre les acteurs en région et le niveau national.

2 Pertinence

11

Recommandations sur la pertinence des stratégies

• Construire un Message fort et clair de la SSI.• Renforcer la charte actuelle par une mise en relief

des valeurs de la solidarité internationale portées par la SSI

• Développer une interaction plus forte entre les collectifs régionaux et les acteurs locaux et avec la coordination nationale

2 Pertinence

12

La contextualisation du projet

Le postulat de départ« Le postulat fondateur du projet est que la solidarité

internationale n’est pas assez connue du grand public».

Le public présent aux manifestations était majoritairement non « militant » puisqu’une personne sur deux interrogée n’est pas engagée dans une association.

• L’évolution des objectifs

3 Cohérence

13

• La place des différentes campagnes

• La cohérence avec les autres campagnes au niveau national

• Les autres campagnes au niveau des régions

Les acteurs locaux perçoivent les différentes campagnes comme autant d’occasions de relancer la sensibilisation aux actions de solidarité.

Les acteurs locaux lors du bilan de la SSI 2003 ont confirmé leur souhait de ne pas retenir de thématique spécifique.

3 Cohérence

14

La cohérence des stratégies de communication – médias

• Des actions médias avec l’ensemble des partenaires

Le HCCI

Un service de presse en commun

• Vers une communication institutionnelle

3 Cohérence

15

Cohérence : points forts et faiblesses

• Points forts

• Créatrice de synergies et de partenariats locaux et régionaux,

• Ouverte sur d’autres milieux que ceux directement impliqués dans la solidarité internationale,

• Faiblesses

Des outils d’information, d’animation et de communication trop nombreux et complexes.

La communication de la SSI pourrait être mieux articulée avec des initiatives prises dans son environnement immédiat

pour en améliorer l’impact.

3 Cohérence

16

Recommandations sur la cohérence des stratégies

• Un travail de déclinaison des objectifs de la SSI en activités à mettre en œuvre et en résultats attendus rendrait plus cohérent la logique d’intervention.

• Une réflexion de fond sur la problématique de visibilité et de relation entre les campagnes et les médias pourrait faire l’objet d’un chantier dans le groupe « synergie inter – campagnes d’EAD SI »

• L’ouverture de la SSI aux autres acteurs de la société, doit être intégrée dans une stratégie à long terme et cohérente avec les publics - cibles prioritaires

• Il est proposé de ne garder que le « cahier pratique » pour les acteurs locaux et d’y joindre les cartes postales pour une diffusion locale. La charte graphique devra être simplifiée pour en augmenter l’impact et être utilisée sur tous les documents produits par la SSI.

• Soutenir l’effort amorcé d’une communication institutionnelle qui sert aussi de lisibilité aux partenaires institutionnels

3 Cohérence

17

• L’efficacité des animations en région• La SSI un rendez vous annuel d’envergure national• La ventilation sur le terrain• L’évolution des partenariats• La ventilation des manifestations par thème

1. Le développement durable

2. Le commerce équitable

3. Le respect des droits humains

4. L’interculturalité

Cette ventilation entre thématiques ne doit pas laisser penser à une dispersionLes organisateurs jouent souvent sur plusieurs thématiques et associent de fait développement durable, défense des droits humains avec un stand de commerce équitable

Les outils d’animation sont souvent transversaux par rapport aux thématiques annoncées, que ce soit des tables rondes, des manifestations artistiques, ou les repas festifs qui font souvent levier pour attirer le public.

4 Efficacité

18

Les stratégies de développement des partenariats

Rapport final

4 Efficacité

19Source rapport final

4 Efficacité

20

Paix / Non-violence

Chantiers jeunesSantéEpargne solidaire

Voyager autrement

APD / Coopération

Education pour tous

Développement durable

Commerce équitable

Respect des droits humains

Rencontres interculturelles

Thèmes des animations

4 Efficacité

Source Rapport final

21

L’efficacité des outils de la coordination

• Les outils à destination des acteurs locauxLes supports de communication proposés

Les outils pédagogiques

Le dispositif « coup de pouce »

• Les outils à destination des publicsLa plaquette « publics »

Les affiches

• Le site Internet

4 Efficacité

22

Une gamme d’outils de communication enrichie pour accompagner la montée en puissance de la SSI

Une volonté d’élaborer une gamme efficace tant pour la communication interne qu’en externe

IV Les outils de communication

Communication interne 1 998 1 999 2 000 2 001 2 002 2003

Plaquette Organisez une action     oui oui oui oui

Cahier de présentation et outils pratiques       oui oui oui

Livrets coup de pouce       oui oui  

Plaquette Comm'UNE Planète         oui  

Communication externe            

Plaquettes "publics" oui oui oui oui oui oui

Affiches 30x40   oui     oui oui

40x60         oui oui

60x80           oui

Tracts     oui oui    

4 Efficacité

Source Rapport final

23

La couverture médiatique au niveau local

• Les parutions dans la PQR correspondent le plus souvent à des articles de fonds sur la solidarité internationale accompagnés d’interviews des organisateurs des manifestations couvertes.

4 Efficacité

24

Parutions dans la presse quotidienne régionale

Article

Brève

Présentation

Programme

4 Efficacité

Source Rapport final

25

Le problème de l’accès aux médias « nationaux »

• La nécessité de redéfinir un message plus clair• L’affichage sur le projet de la SSI et pas sur les

solidarités• Les difficultés à déplacer des personnalités

médiatiques pour défendre un message perçu comme flou

• Le déficit d’engagement des autorités politiques pour porter ce type de manifestation

• Le manque de visibilité des actions pour la région Ile de France

4 Efficacité

26

La SSI et les pouvoirs publics

Au niveau national

• Ils participent au comité de pilotage

• Ils contribuent aux financements de la SSI

• Ils sont parfois têtes de réseau

• Leurs attentes

Au niveau local

• Les collectivités territoriales

• Les collectifs régionaux

• La relation ASI et collectivités locales pas simple

4 Efficacité

27

L’efficacité institutionnelle

• La Semaine a fait la preuve de son efficacité par une mobilisation croissante des acteurs en région et pas seulement des ASI.

• Même si ces dernières sont encore les organisateurs majoritaires des animations, les collectivités territoriales et les établissements d’enseignement s’impliquent de plus en plus pour réaliser des animations dans le cadre de la SSI.

4 Efficacité

28

Points forts et faiblesses• Points forts

La seule opération qui peut mobiliser l’ensemble des forces militantes quelques soient les thématiques sur lesquelles elles travaillent,

Une couverture médiatique régionale forte et de plus en plus d’articles de fond,

Des animations dans toutes les régions de France et qui semblent touchées un public jeune et pas seulement militant,

Le dispositif « coup de pouce » comme outil de reconnaissance des animations en local,

La participation de partenaires d’autres secteurs que ceux de la solidarité internationale dont les pouvoirs publics.

• Faiblesses

Un public informé mais ne trouvant pas systématiquement des pistes d’actions pour mettre en œuvre sa solidarité,

Une communication nationale avec peu d’impact,

Des outils d’information et d’animation trop denses et qui donnent une image brouillée,

4 Efficacité

29

Recommandations sur l’efficacité

• Insister sur les différents rôles à minima des collectifs régionaux et sur la plus value apportée par l’association d’acteurs de différents types.

• Simplifier les outils à destination des acteurs locaux

• Revoir l’exploitation des outils pédagogiques proposés

• Pour le site Web, différencier clairement sur la page d’accueil un espace public qui propose les pages destinées au public extérieur 

• Elaborer une stratégie pluriannuelle de sa communication avec des choix d’orientation sur des lectorats, des types de médias, … mais aussi et surtout de compétences

4 Efficacité

30

L’efficience du fonctionnement national

• Les interactions entre les instances de la coordination nationale

Le partage des responsabilités et la chaîne de décisions entre comité de pilotage et comité d’animation, équipe opérationnelle et groupes de travail est flou malgré un travail continu de perfectionnement et de

clarification • Tension dans les missions de la coordination

nationale : animer et communiquerLa tension entre ces deux pôles est forte et des arbitrages doivent régulièrement être pris pour en définir les priorités.

• Avancées du groupe de travail « évaluation »Le prochain chantier du groupe pourrait être de travailler la question suivante « En quoi les animations de la SSI participent elles à faire des publics, des citoyens « solidaires » ?

5

31

L’évolution et la répartition des ressources et des bailleurs

La SSI, malgré des efforts importants de diversification de ses ressources, reste très dépendante des financements publics. Cette dépendance et l’annualité de ces financements, liées au risque d’une remise en cause de leur principe ou d’une baisse de leurs montants sont une cause forte d’instabilité pour l’équipe en charge de la SSI.

Evolution des financements

0

50 000

100 000

150 000

200 000

250 000

1999 2000 2001 2002 2003

Année

Mon

tan

ts

Nombre de manifestations

0

500

1000

1500

2000

1999 2000 2001 2002 2003

Subventions publiques

Partenariats

Fonds propres

Autres financements

5 Efficience

32

Représentation des types d'acteurs au Comité de pilotage

0%

20%

40%

60%

80%

100%

1999 2000 2001 2002 2003

acteurs régionaux

syndicats

Etat

OSIM

Education populaire

collectivités locales

ASI

5 Efficience

Source Rapport final

33

Les instances de la coordination nationale

5 Efficience

34

• Un besoin d’une proximité plus forte

• Des délais trop courts de diffusion des outils d’information

Une efficience relative par la combinaison des facteurs suivants

• des restrictions budgétaires des organisations traditionnellement impliquées dans les instances de la coordination, qui est sans doute une des raisons du désistement de certaines d’entre elles recentrées sur leurs missions propres,

• un fonctionnement consommateur de temps avec une forte fréquence de mobilisation,

• et des rôles et responsabilités diluées.

La coordination nationale et les acteurs en région

Quelques conclusions sur l’efficience globale

5 Efficience

35

Points forts et faiblessessur l’efficience de l’opération

• FaiblessesUne forte dépendance de la SSI aux financements publics nationaux

Une coordination nationale pas encore stabilisée dans ses modalités de fonctionnement,

Une programmation annualisée de l’opération, des stratégies et des financements,

• Points fortsUn souci réel d’une représentativité d’acteurs de différents secteurs au sein de la coordination nationale,

Des têtes de réseaux membres de la coordination nationale mobilisatrices de leur base en région,

Une culture en évaluation interne en cours de développement.

5 Efficience

36

Recommandations sur l’efficience de l’opération

• Equilibrer les apports français pour la SSI par des financements d’autres bailleurs en fonction du portefeuille de projets que gère le CRID,

• Clarifier les rôles de chaque instance de la coordination nationale et les procédures de délégation,

• Sortir de l’annualité d’organisation et de gestion et développer une programmation stratégique pluriannuelle de la SSI et de ses financements,

• Développer la culture en évaluation interne initié par le groupe de travail, et améliorer les capacités nationales et locales de mesure de l’impact des actions sur les publics

5 Efficience

37

L’impact auprès des acteurs locaux

• Les visions de la solidarité

• Le label de la SSI

• Les outils de communication

6 Impact

38

Région LIEU THEME ANIMATION PUBLIC

Aquitaine Bordeaux Intercultureltables rondes ; Fête avec diner et musique Etudiants

Bassens Changer d'air, les chantiers de jeunes Projection de films : Table ronde Tout public

Franche Comté Frotey lès vesoul Education à la santé Table ronde Tout public

Besançon Festival de cinémma africain films documentaires Tout public

Belfort Non violence atelier collège st exupery Scolaire

Ile de France Paris Argentine Projection d'un film et débats ; Fête Tout public

Paris Enfants des rues Documentaires et débats Militants

Savigny SSI Tout Ville

Nord Boulogne Découvrir l'Afrique par la vie au village Heure du conte ; Exposition Tout public

Pays de Loire Nantes Découvrir l'Afrique Exposition Tout public

Nantes Actions de solidarité Présentation de projets Etudiants

Provence alpes côte d'azur Marseille Forum Social Européen témoignages FSE Tout

Marseille Tourisme solidaire voyager autrement Jeunes

Aix en provence Palestine Journée portes ouvertes : Palestine Tout

Rhone alpes Echirolles Dans le cadre de l'Agenda 21 atelier de travail habitants et asso

Limonest Projets de solidarité présentation de projets Scolaires

LyonL'eau ; L'engagement des jeunes dans la SSI Debat Tout public

Lyon Bielorussie et la francophonie conférence Etudiants

Sites enquêtés

Restitution intermédiaire – Décembre 2004

6 Impact

39

L’impact auprès des publics

• Qui sont – ils ?• Pourquoi viennent ils ?• Que retirent ils de leur participation ?

- Les jeunes (15-35 ans) participent aux animations, auxquelles ils sont venus d’abord pour le thème. On peut déduire de cette analyse que:

- Une personne sur deux a moins de 35 ans, - Une personne sur deux n’est pas engagée dans une association et- Une personne sur deux ne répond pas ou ne sait pas comment rendre

concrète cette solidarité.

Les résultats de cette étude laissent à penser que la SSI a un rôle à jouer pour rendre concrète la solidarité internationale auprès de son public jeune.

6 Impact

40

II Résultats provisoires d’enquête auprès des publics de la SSI

Total 327 questionnaires

Aquitaine 28

Franche Comté 41

Ile de France 65

Nord 17

Pays de la Loire 48

Provence Alpes Cote d'Azur 12

Rhône alpes 116

Restitution intermédiaire – Décembre 2004

6 Impact

41

< de 15 ans 2%

15 à 25 ans 39%

26 à 35 ans 19%

36 à 45 ans 9%

46 à 55 ans 8%

56 à 65 ans 4%

plus de 66 ans 4%

Pyramide d’age

travail à temps complet 24%

travail à temps partiel 8%

demandeur d'emploi 8%

étudiant, élève, stagiaire 33%

Retraité 8%

Situation professionnelle

ouvriers / employés 5%

social et sanitaire 15%

secteur culturel 3%

gestion / économie 11%

arts / architecture 6%

enseignants / instituteurs 12%

métiers du tertiaire 6%

technicien / ingénieur 5%

Métier

Echantillonnage de la population enquêtée

Restitution intermédiaire – Décembre 2004

6 Impact

42

J’ai été informé de la manifestation par

J’ai eu envie de venir par

0%

5%

10%

15%

20%

25%

30%

35%

0%

5%

10%

15%

20%

25%

30%

35%

Restitution intermédiaire – Décembre 2004

6 Impact

43

tracts

article de

presse

affiche

radio tele

internet

relation

personnelle

localisation

autres

réseau

associatif

partenaire

institutionnel

associé

Comment viennent ils

Rapport mars 2004 page 59Dossier ActeursLocauxFichier ExploitationQuestionnairesPublics2

6 Impact

Source Rapport final

44

L'aspect ludique

Quelqu'un m'a amené

Curiosité

Impliqué par solidarité Sujet

Rencontre d'associations

Leur envie de venir

Rapport mars 2004 page 60Dossier ActeursLocauxFichier ExploitationQuestionnairesPublics2

6 Impact

Source Rapport final

45

Je savais que cette manifestation se situait dans le cadre de la semaine de la solidarité internationale

Oui 35%Non 45%

J’étais déjà venu lors d’une édition précédente 20%

Je suis engagé dans une association oui 48%

non 50%

Je qualifie mon engagement de Je me suis senti impliqué dans cettemanifestation

très fort

fort

moyen

faible très forte

forte

moyenne

faible

Selon un sondage réalisé au FSE sur les mêmes questions, 40% des personnes connaissent la SSILe public de militants représentant 60% du public enquêté, soit des chiffres globalement comparables

Restitution intermédiaire – Décembre 2004

6 Impact

46

Donné envie d’en savoir plus 79%

Permis de mieux comprendre 45%

Donné envie d’agir plus = 49%autrement = 17%

Participer à la manifestation m’a

pas de réponse

La solidarité

Le sujet traité

Thème de l'animation

Solidarité

Altermondialisation

Rencontres associatives

Travail de terrain

Engagement associatif

Modification comportement

quotidien

ne sait pas comment

Thème de l'animation

Non répondu

Restitution intermédiaire – Décembre 2004

6 Impact

47

L’impact de la médiatisation

• La visibilité de la SSI

• La visibilité des autres campagnes

6 Impact

48

EtudeMedia par région d’origine

Nbre articles

Région

93 Bretagne

60 Ile de France

58 Pays de la Loire

55 Rhône alpes

45 Lorraine

36 Centre

28 Haute Normandie

26 Aquitaine

19 Nord

18 Provence Alpes Cote d'Azur

16 Alsace

13 Bourgogne

13 Poitou Charente

13 Auvergne

11 Champagne Ardennes

11 Picardie

10 Franche Comté

9 Languedoc Roussillon

9 Midi Pyrénées

4 Basse Normandie

4 Limousin

2 CorseRestitution intermédiaire – Décembre 2004

49

Ventilation du type d’article par type de medias

TypeJournal Total Affichette Article Brève Dossier InterviewPrésentati

onProgramm

e

Associative 33 1   13     12 7

Audiovisuel 26     7   10 1 8

Collectivité locale 45   5 12     3 25

Institutionnels 2     1     1  

Internet 70   3 12 1   21 33

National 55 4 3 28     11 9

PQR 513   257 57 1   16 182

Presse enfantine 1     1        

Presse syndicale 5   1 4        

Spécialisé 2     2        

Total 752 5 269 137 2 10 65 264

Restitution intermédiaire – Décembre 2004

50

Theme Total Affichette Article Brève Dossier Interview Présentation Programme

Activité 436   106 51   1 15 263

Migrants 1   1          

Bouge ta planete 2           2  

Coopération décentralisée 6   5       1  

Commerce équitable 21   17 2     1 1

Concours de cerfs volants 2   2          

Liberté presse Algérie 2   2          

Découverte des tziganes 1   1          

Droits de l'enfant 3   3          

Droits sociaux 1     1        L'eau 1   1          

Economie solidaire 3   2 1        

Ethique sur l'étiquette 1   1          

Expo d'artistes Sud 1   1          

FSE 7   5       2  

Islam et Chrétiens 1   1          

Mondialisation 1   1          

Murs taggés 2   2          

Palestine 1   1          

Réinsertion sociale 2   1       1  

Scolaires et étudiants 51   43 4     4  

SSI 203 5 69 78 2 10 39  

Volontariat 3   3          

Total 752 5 268 137 2 11 65 264

Ventilation par thème et type d’article

Restitution intermédiaire – Décembre 2004

51

Nombre de pages visitées

0

10000

20000

30000

40000

50000

60000

70000

Juillet Août Septembre Octobre Novembre Décembre

2000

2001

2002

2003

Le site Internet

6 Impact

Source Rapport final

52

programme 2003

programme 2002

La Semaine en

pratique

Organisez une

action !

Qu’est-ce que

c’est ?

Visages de la

solidarité

Presse

Lettre Info

Partenariats

Agir au quotidien

Pages visitées

6 Impact

Source Rapport final

53

Points forts et faiblesses

Points forts• Un public jeune présents aux

animations,

• Plus de la moitié des publics ne sont pas des « militants »,

• Les acteurs locaux déclinent bien les facettes de la solidarité internationale,

• Un bon ancrage régional avec des événements porteurs au niveau local est souvent bien accueilli par les médias.

• Le travail technique réalisé sur le site est clair et maîtrisé.

Faiblesses• Les animations n’offrent pas de

réelles pistes d’actions, d’engagements aux publics

• Une faible médiatisation nationale,

• Une réutilisation peu claire des outils d’information et de communication nationaux,

• Un site Internet peu tourné vers le public extérieur,

6

54

Recommandations sur l’impact de l’opération

• Ouvrir une réflexion participative sur les choix d’actions possibles à offrir aux publics et améliorer l’impact sur les publics visés,

• Inscrire la communication externe de la SSI dans le long terme,

• Développer des relations – médias à partir de cibles précises (jeunes moins de 15 ans, adolescents, jeunes adultes, …) et construire les sujets avec les rédactions (concours, dossier sur un thème…)

• Construire une stratégie de communication externe en concertation avec la plate forme EAD SI

• Réviser les contenus du site et leur organisation, tout particulièrement en direction du grand public et des médias

6