Embed Size (px)
Citation preview
Mesure du rendement : Savoir passer des sorties aux résultats
Savoir passer des sorties aux résultats Comment savons-nous que nous avons un impact sur
les enfants, les adolescents et les familles? Comment pouvons-nous collaborer pour veiller à ce que
les services que nous offrons soient appropriés et
efficaces?
SommaireSommaire
Aperçu Discussion : Connaître son public Exemple : Utilisation de l’échelle CAFAS
pour les résultats organisationnels et de programme
Discussion : Développer la capacité à mesurer le rendement
Aperçu Aperçu : : Mesure du rendement
QU’EST-CE que c’est? POURQUOI est-ce
nécessaire? QUI en bénéficie? COMMENT est-ce fait?
Qu’est-ce que la mesure du rendement?Qu’est-ce que la mesure du rendement?
«La collecte régulière d’informations pour surveiller le rendement d’une politique, d’un programme ou d’une initiative à un moment donné. Cela peut être utilisé pour préparer un rapport sur le niveau d’atteinte de résultats prévus et sur les tendances en matière de rendement au fil du temps».
- Secrétariat du Conseil du Trésor du Canada
Pourquoi est-ce nécessaire?Pourquoi est-ce nécessaire?
«Sert d’outil descriptif» de la manière dont un projet, une politique ou un programme évolue
Sert de signal précoce annonçant que la direction d’un programme, d’une politique ou d’un projet ne correspond pas aux attentes
Qui en est le public?Qui en est le public?
Utilisateurs finaux : clients, familles, aidants naturels
Fournisseurs de services, éducateurs, personnel des programmes
Organisation ou réseau Système de santé Grand public
Dans quelle mesure est-ce différent de Dans quelle mesure est-ce différent de l’évaluation?l’évaluation?
MR : fournit des clichés réguliers sur le rendement d’un programme ou d’une politique; met l’accent sur le résultat
Les sondages sur la satisfaction des clients sont souvent un indicateur clé de la MR
Évaluation : peut fournir des renseignements sur la manière dont un résultat se produit et pourquoi
La satisfaction des clients fait partie du processus d’évaluation et peut influer sur les résultats
Mesure et évaluation du rendementMesure et évaluation du rendement
SITUATION ACTIVITÉS RÉSULTATSINTRANTS EXTRANTS
Ressources du programme
Somme de travail, produits participants
Changement de public cible
Comment est-ce fait?Comment est-ce fait? Modèles logiques de
programmes Bulletins de scores équilibrés Feuilles de stratégie
Approche de bulletins de scores équilibrés à la Approche de bulletins de scores équilibrés à la promotion de la santépromotion de la santé
Source: ICES, 2004
Improve healthy behaviours, health
promotion and disease prevention
Improve healthy behaviours, health
promotion and disease prevention
Improve linkages and transitions between addiction, mental
health, health, education, social and
justice systems
Improve linkages and transitions between addiction, mental
health, health, education, social and
justice systems
Improve client focus of addiction
services
Improve client focus of addiction
services
Improve access to appropriate addiction
treatment
Improve access to appropriate addiction
treatment
Increase productive use &
appropriate allocation of
resources across system
Increase productive use &
appropriate allocation of
resources across system
Ensure the continuum of interventions
includes prevention, health promotion, early
intervention, harm reduction and treatment
services.
Ensure the continuum of interventions
includes prevention, health promotion, early
intervention, harm reduction and treatment
services.
Reducing Risk through influencing
the broader determinants of
health
Reducing Risk through influencing
the broader determinants of
health
Improve health outcomes at the individual and
population level
Improve health outcomes at the individual and
population level
Increase sustainability and equity of the
addiction & health systems
Increase sustainability and equity of the
addiction & health systems
Increase availability and retention of the
qualified human resources
Increase availability and retention of the
qualified human resources
Ensure evidence informed practices
are developed, implemented and maintained across
province
Ensure evidence informed practices
are developed, implemented and maintained across
province
Further develop & increase equitable
resources and capacity
Further develop & increase equitable
resources and capacity
Ensure quality assurance within
the addiction system
Ensure quality assurance within
the addiction system
Addiction System Strategy Map
Ontario Federation of Community Mental Health & Addictions Programs
Increase linkages, transition &
integration within addiction services
Increase linkages, transition &
integration within addiction services
Mesure du rendement en matière de bien-Mesure du rendement en matière de bien-être des enfantsêtre des enfants
Source: OACAS QA Framework, 2004
Types de mesures du rendementTypes de mesures du rendement
Mesure des résultats Mesure intermédiaire des résultats Mesure des processus Mesure des sorties Mesure des entrées
Strategic priorities by the Select Strategic priorities by the Select CommitteeCommittee
En petits groupesEn petits groupes Former cinq groupes Dans chaque groupe, de discuter :
• Du genre d’information dont le groupe ou les membres ont besoin (se concentrer sur deux ou trois aspects)
• De la fréquence à laquelle l’information est nécessaire.• De la façon dont devrait être présentée• Des craintes, des aspects ou des problèmes quant à
cette information• Des solutions, idées ou forces sur lesquelles s’appuyer
Défis et opportunitésDéfis et opportunités Choix des mesures
• Valides et fiables• Pertinentes, faisables, sensibles aux
changements• Appropriées sur le plan du développement et
de la culture Capacité de gestion des informations au sein
des agences et au gouvernement Collaboration, acceptation et cultures qui
favorisent l’apprentissage
Difficultés et possibilitésDifficultés et possibilités
Capacité de gestion de l’information au sein des organismes et du gouvernement
Collaboration et adhésion du personnel
Cultures organisationnelle favorisant l’apprentissage
Exemple : Utilisation de l’échelle CAFASExemple : Utilisation de l’échelle CAFAS L’échelle d’évaluation fonctionnelle des enfants et des
adolescents (CAFAS) (Hodges, 2002) sert à mesurer les résultats des services en santé mentale offerts aux six à 17 ans en Ontario.
Elle classe le fonctionnement selon sept catégories.• À la maison, à l’école, dans la collectivité, la
façon d’agir avec les autres, l’humeur et les émotions, consommation de drogue et d’alcool, façon de penser
Responsable : Dr Melanie Barwick, Hospital for Sick Kids
21
Soutien à la mise en œuvreSoutien à la mise en œuvre
Source: Barwick, 2009
(c) Barwick
Severe Impairment on CAFAS Subscales at Entry to Severe Impairment on CAFAS Subscales at Entry to Treatment – years 2005 to 2008Treatment – years 2005 to 2008
(c) Barwick
0
10
20
30
% o
f Clie
nts
2005 26.7 23.2 4.8 8.4 10.3 4.3 5.6 0.9
2006 26.2 21.5 4.5 8.1 9.8 3.7 4.6 0.9
2007 26.2 20.7 4.1 8.1 10.2 3.6 4.3 1.0
2008 27 21 4.2 8.8 10.3 3.2 4.3 1.1
School Home CommunityBehavior tow ards
Moods/ Emotions
Self-HarmSubstance
useThinking
Source: Barwick, 2009
Severity at Entry to Treatment for Ontario and RegionsSeverity at Entry to Treatment for Ontario and Regions(2005: N=9,065; N= 2006: N=18,255; 2007: N=23,566; (2005: N=9,065; N= 2006: N=18,255; 2007: N=23,566;
2008: N=26,974)2008: N=26,974)
(c) BarwickSource: Barwick, 2009
Utilité des données de la CAFAS pour les Utilité des données de la CAFAS pour les organismes locauxorganismes locaux
Tirer des variables et des indicateurs de rendement du rapport trimestriel de la CAFAS.
Faire des comparaisons dans le temps. Présenter les données au moyen d’un chiffrier. Modifier les tableaux pour les besoins de
l’interprétation.
Source : Roger Rolfe, 2009. Utilizing CAFAS exports and reports at CTYS.
SolutionSolution:: Agency CAFAS Performance since 2006.xlsAgency CAFAS Performance since 2006.xls
Source: Rolfe, 2009.
Sample ChartSample Chart
Source: Rolfe, 2009.
Program-level Chart:Program-level Chart:GW Male/Female Improvement ScoresGW Male/Female Improvement Scores
Source: Rolfe, 2009.
En petits groupesEn petits groupes
Quelles sont les pratiques ou stratégies utiles à votre organisation ou votre collectivité pour :• Obtenir l’adhésion du personnel et de la haute
direction ? • Créer des données et des rapports fidèles ?• Réaliser une évaluation ?
RésuméRésumé Les mesures du rendement sont utiles pour
déterminer l’amélioration de la santé mentale des enfants et des adolescents.
L’utilité des mesures de rendement varie selon les besoins du public cible et la qualité de l’information
Des stratégies d’apprentissage organisationnel sont nécessaires pour développer la capacité à mesurer le rendement.
Questions?Questions?
Evangeline Danseco, PhDDirectrice, Évaluation et recherche613.737.7600 poste [email protected]
Susan Kasprzak, MAAssociée de recherche613.737.7600 poste [email protected]
www.surlafinepointe.ca
