Mesure du rendement des S et T à Environnement Canada
Eric GagnéDirecteur par interim, Division de la politique scientifiqueEnvironnement Canada
Symposium sur la science publique de l’IPFPCle 13 mai, 2010
Page 2
Aperçu• Contexte
– Pourquoi mesurer le rendement des S et T?– Vue d’ensemble des S et T à Environnement
Canada (EC)
• Mesurer le rendement de la R et D : Méthodes et résultats du premier rapport (2009)
– Disponible en ligne à http://www.ec.gc.ca/scitech (sous « Gestion des S et T »)
• Mesurer les activités scientifiques connexes (ASC) : un travail en cours Mesurer le
rendement en matière d’activités
scientifiques connexes
(2009)
(2011)
Page 3
Pourquoi mesurer le rendement des S et T à EC?• Plan pour les sciences d’EC (2007)
«…les indicateurs de rendement fourniront des renseignements qui permettront d’évaluer les progrès accomplis, d’informer les futures prises de décision et d’assurer l’amélioration continue des activités scientifiques d’Environnement Canada »
• Stratégie fédérale des S et T (2007)« Le gouvernement fédéral du Canada renforcera sa responsabilité à l’égard des Canadiens en améliorant sa capacité de mesurer l’effet de ses dépenses en S et T et de faire rapport à ce sujet »
• Une meilleure gestion des enjeux horizontaux des S et T
• Positionnement stratégique des S et T en vue des vérifications ou examens importants et de communiquer les activités des S et T d’EC
Page 4
Aperçu de la R et D et des ASC
Lié à la science du « bien public », à l’évaluation des risques, à la prestation de services scientifiques, aux
sondages, à l’élaboration de normes et de règlements,
etc. »
Recherche et développement«Travail créatif et systématique visant à augmenter le bagage scientifique et technique ou à découvrir des applications nouvelles. »
Activités scientifiques connexes« Les activités qui complètent et élargissent le champ de la R-D en contribuant à la création, à la diffusion et à l'application des connaissances scientifiques et technologiques. »
• La R et D et les ASC ont des fonctions distinctes mais elles sont étroitement interconnectées et s’échangent des renseignements, en particulier dans le contexte de la science fédérale.
Lié à la chaîne de l’innovation et à la
création de nouveaux savoirs
• Tel qu’il est défini par l’OCDE et Statistique Canada :
Page 5
Quelques faits à propos de la R et D et des ASC à Environnement Canada
R et D ASC
R et D offre les connaissances de base, la crédibilité afin d’appuyer les réglementations, politiques, programmes, etc. d’EC.
Les Activités scientifiques connexes (ASC) permettent à EC de respecter son mandat par des activités de surveillance, de mise à l’essai et de prédictions, etc.
EC est l’un des dix plus importants établissements de R et D à l’échelle mondiale, et la principale source de recherche environnementale au Canada (2006).
EC est le plus grand producteur de sciences naturelles des ASC parmi les ministères fédéraux.
Environ 25 % du budget d’EC (250 M$) est consacré aux activités de R et D, et environ 15 % de ses employés (1000 équivalents à temps plein) travaillent en R et D.
Environ 45 % du budget (450 M$) est consacré aux ASC, et environ 40 % des employés (2500 équivalents à temps plein) y travaillent.
Page 6
Défis liés à la mesure des S et T à Environnement Canada• Tous les objectifs
stratégiques et les activités de programme se fondent sur les S et T
• Avec les structures de présentation de rapports actuelles, le défi consiste à mesurer les S et T en tant qu’activité horizontale
Architecture des activités de programmes (AAP) d’Environnement Canada
Résultats stratégiques
Activités de programmes
Sous-activités
Sous-sous-activités
LEGEND
1. L’environnement naturel du Canada est préservé et restauré pour les générations actuelles et futures.
3. Les menaces que représente la pollution pour les Canadiens ainsi que pour leur environnement sont
minimisées.
2. La population canadienne est équipée pour prendre des décisions éclairées quant aux conditions changeantes du
temps, de l'eau et du climat.
3.3 Promotion de la conformité et Application de la loi - Pollution
3.2 Changements climatiques et Qualité de l’air
3.1 Gestion des substances et des déchets
1.3 Écosystèmes durables
1.2 Ressources en eau
1.1 Biodiversité - Espèces sauvages et habitats
1.1.4 Conservation des habitats fauniques
1.1.3 Oiseaux migrateurs
1.1.2 Espèces en péril
1.3.4 Initiatives axées sur les écosystèmes
1.2.1 Qualité de l’eau et santé des écosystèmes aquatiques
3.1.3 Urgences environnementales 3.2.2 Partenariats sur
les Changements climatiques et la Qualité de l’air
3.1.2 Gestion des déchets
3.1.1 Gestion des substances
2.2 Services météorologiques et environnementaux pour les utilisateurs ciblés
2.1 Services météorologiques et environnementaux pour les Canadiens
2.2.4 Services aux secteurs économiques
2.1.3 Information, prévisions et outils climatologiques
2.1.2 Information météorologique liée à la santé
2.2.2 Services au transport maritime
2.2.1 Services à l’aviation
2.1.1 Observations, prévisions et avertissements météorologiques
2.2.3 Services au ministère de la Défense nationale
5.1 Services internes
3.1.4 Sites contaminés
3.2.2.3 Partenariats internationaux sur les Changements climatiques et la Qualité de l’air
3.2.2.2 Partenariats communautaires sur la Qualité de l’air
3.2.2.1 Mise à la ferraille des véhicules
1.3.4.2 Saint-Laurent
1.3.4.1 Grands Lacs
1.1.4.2 Partenariats sur les espèces exotiques envahissantes
1.1.4.1 Partenariats pour la conservation des habitats
3.2.1 Programme de réglementation sur les Changements climatiques et la Qualité de l’air
3.2.1.3 Secteur des produits de consommation et commerciaux
3.2.1.2 Émissions du secteur des transports
3.2.1.1 Émissions du secteur industriel
1.2.2 Gestion et utilisation des ressources en eau
3.1.2.2 Pollution marine
3.1.2.1 Réduction et gestion des déchets
1.3.4.3 Lac Simcoe
5.1.3.3 Acquisition
5.1.3.2 Matériel
5.1.3.1 Biens immobiliers
5.1.3 Services de gestion des biens
5.1.2.5 Voyages et autres services administratifs
5.1.2.4 Technologie de l’information
5.1.2.3 Gestion de l’information
5.1.2.2 Gestion financière
5.1.2.1 Gestion des ressources humaines
5.1.2 Services de gestion des ressources
5.1.1.3. Services juridiques
5.1.1.2 Communications
5.1.1.1 Gestion et surveillance
5.1.1 Soutien à la gouvernance et à la gestion
4. La population canadienne tire
profit du développement responsable des
ressources gazières Mackenzie
4.1 Projet gazier Mackenzie
1.4 Promotion de la conformité et Application de la loi - Faune
1.3.3 Mobilisation communautaire
1.3.3.2 Fonds pour dommages à l'environnement
1.3.3.1 Financement communautaire ÉcoAction
1.3.1 Politiques et rapports axés sur le développement durable
1.3.3.3 Programme d’emploi jeunesse en environnement
5. Services internes
1.1.1 Politiques et priorités sur la biodiversité
1.3.2 Évaluation et approches axées sur les écosystèmes
1.1.4.3 Aires protégées
1.3.3.4 Éducation et mobilisation
3.2.3 Technologie environnementale
3.2.3.2 Innovation dans la technologie environnementale
3.2.3.1 Technologies de développement durable
1.2.3 Service et relevé hydrologique
3.2.1.4 Mécanismes de marché
1.3.4.5 Partenariats communautaires sur les écosystèmes
1.3.4.4 Lac Winnipeg
Résultats stratégiques
Activités de programmes
Sous-activités
Sous-sous-activités
LEGEND
Résultats stratégiques
Activités de programmes
Sous-activités
Sous-sous-activités
LEGEND
Résultats stratégiques
Activités de programmes
Sous-activités
Sous-sous-activités
LEGEND
1. L’environnement naturel du Canada est préservé et restauré pour les générations actuelles et futures.
3. Les menaces que représente la pollution pour les Canadiens ainsi que pour leur environnement sont
minimisées.
2. La population canadienne est équipée pour prendre des décisions éclairées quant aux conditions changeantes du
temps, de l'eau et du climat.
3.3 Promotion de la conformité et Application de la loi - Pollution
3.2 Changements climatiques et Qualité de l’air
3.1 Gestion des substances et des déchets
1.3 Écosystèmes durables
1.2 Ressources en eau
1.1 Biodiversité - Espèces sauvages et habitats
1.1.4 Conservation des habitats fauniques
1.1.3 Oiseaux migrateurs
1.1.2 Espèces en péril
1.3.4 Initiatives axées sur les écosystèmes
1.2.1 Qualité de l’eau et santé des écosystèmes aquatiques
3.1.3 Urgences environnementales 3.2.2 Partenariats sur
les Changements climatiques et la Qualité de l’air
3.1.2 Gestion des déchets
3.1.1 Gestion des substances
2.2 Services météorologiques et environnementaux pour les utilisateurs ciblés
2.1 Services météorologiques et environnementaux pour les Canadiens
2.2.4 Services aux secteurs économiques
2.1.3 Information, prévisions et outils climatologiques
2.1.2 Information météorologique liée à la santé
2.2.2 Services au transport maritime
2.2.1 Services à l’aviation
2.1.1 Observations, prévisions et avertissements météorologiques
2.2.3 Services au ministère de la Défense nationale
5.1 Services internes
3.1.4 Sites contaminés
3.2.2.3 Partenariats internationaux sur les Changements climatiques et la Qualité de l’air
3.2.2.2 Partenariats communautaires sur la Qualité de l’air
3.2.2.1 Mise à la ferraille des véhicules
1.3.4.2 Saint-Laurent
1.3.4.1 Grands Lacs
1.1.4.2 Partenariats sur les espèces exotiques envahissantes
1.1.4.1 Partenariats pour la conservation des habitats
3.2.1 Programme de réglementation sur les Changements climatiques et la Qualité de l’air
3.2.1.3 Secteur des produits de consommation et commerciaux
3.2.1.2 Émissions du secteur des transports
3.2.1.1 Émissions du secteur industriel
1.2.2 Gestion et utilisation des ressources en eau
3.1.2.2 Pollution marine
3.1.2.1 Réduction et gestion des déchets
1.3.4.3 Lac Simcoe
5.1.3.3 Acquisition
5.1.3.2 Matériel
5.1.3.1 Biens immobiliers
5.1.3 Services de gestion des biens
5.1.2.5 Voyages et autres services administratifs
5.1.2.4 Technologie de l’information
5.1.2.3 Gestion de l’information
5.1.2.2 Gestion financière
5.1.2.1 Gestion des ressources humaines
5.1.2 Services de gestion des ressources
5.1.1.3. Services juridiques
5.1.1.2 Communications
5.1.1.1 Gestion et surveillance
5.1.1 Soutien à la gouvernance et à la gestion
4. La population canadienne tire
profit du développement responsable des
ressources gazières Mackenzie
4.1 Projet gazier Mackenzie
1.4 Promotion de la conformité et Application de la loi - Faune
1.3.3 Mobilisation communautaire
1.3.3.2 Fonds pour dommages à l'environnement
1.3.3.1 Financement communautaire ÉcoAction
1.3.1 Politiques et rapports axés sur le développement durable
1.3.3.3 Programme d’emploi jeunesse en environnement
5. Services internes
1.1.1 Politiques et priorités sur la biodiversité
1.3.2 Évaluation et approches axées sur les écosystèmes
1.1.4.3 Aires protégées
1.3.3.4 Éducation et mobilisation
3.2.3 Technologie environnementale
3.2.3.2 Innovation dans la technologie environnementale
3.2.3.1 Technologies de développement durable
1.2.3 Service et relevé hydrologique
3.2.1.4 Mécanismes de marché
1.3.4.5 Partenariats communautaires sur les écosystèmes
1.3.4.4 Lac Winnipeg
Page 7
Étapes échelonnées dans la mesure de la science
• Étape 1 : Mesure du rendement de la R et D à l’aide d’ indicateurs quantitatifs et qualitatifs disponibles
EC a mis sur pied un modèle logique et un cadre d’évaluation du rendement pour la R et D, à l’aide de quatre principes qui figurent dans le Plan pour les sciences
Le rapport 2009 est le premier dans son genre à EC.
• Étape 2 : Mesure du rendement des ASC Présidé par EC, le Groupe de travail interministériel élabore
présentement de nouveaux modèles et cadres et une série d’indicateurs préliminaires dans la mesure des ASC.
• Étape 3 : Mesure de la gestion des sciences et de la gouvernance d’EC (Politique des S et T)
• Étape 4 : Intégration de la S et T et des mesures du rendement des politiques
TERMINÉE
EN COURS
PLANIFIÉE
Page 8
Étape 1: Mesure du rendement de la R et D
• À la lumière des meilleures pratiques et en collaboration avec des scientifiques, des gestionnaires et des experts en mesure du rendement à travers EC, nous avons élaboré un cadre
• Chaque principe exigeait l’élaboration de plusieurs indicateurs qualitatifs et quantitatifs clés.
– Bibliométrie (collaborations, taux de référence, etc.)
– Enquêtes– Données quantitatives en RH– Budget et employés (Statistique
Canada)
Cadre d’évaluation du rendement de la R et D d’EC
Page 9
Une mesure du rendement de la R et D sous forme de « tableau de bord »
http://www.ec.gc.ca/scitech: “Gestion des S&T”
Page 10
1A11A2
1B1
1C1
1C21C3
2A1
2A22A3
2B1
2B2 2B3
2B5
3A23A4
3A5 3B1
3B2
3C1
3C2 3C3
6B4
7A2
7A47B2
7B3
7B4
Harmonisation : Les liens de la R et D avec les utilisateurs
Liens de la R et D dans l’ensemble de l'APP d’EC lesquels indiquent les relations entre les producteurs et les utilisateurs de la R et D (2009)
• Des liens horizontaux solides entre les utilisateurs et les producteurs de R et D à EC
• Les « carrefours » de R et D correspondent souvent aux priorités à l’échelle du gouvernement
• D’après les utilisateurs internes (politiques, réglementation, etc.), la « R et D d’EC est à la fois opportune et sensible »
http://www.ec.gc.ca/scitech: “Gestion des S&T”
Intendance environnementale Protection de l’environnement
Services internesServices météorologiques et climatologiques
Évaluation des risques
Protection / conservation des écosystèmes aquatiques
Surveillance environnementale
Approches stratégiques
Coordination de la politique et de la gouvernance de l'approche axée sur l'écosystèmeProtection / conservation de la faune
Gestion du risque
Atténuation du risque et mise en oeuvre
Recherches en prévisions météorologiques et environnementales
Information surles polluants et les GES
Liens: Taux de collaboration en croissance• Nous avons démontré
des collaborations avec des secteurs clés, des secteurs géographiques et le milieu scientifique
• Nous avons trouvé des liens solides en particulier avec les universités (plus de la moitié des recherches publiées)
• La collaboration augmente grandement le nombre de fois qu’une publication est citée
Taux de collaboration scientifique à EC (2003-2007)
Page 11 http://www.ec.gc.ca/scitech: “Gestion des S&T”
Page 12
Liens : Réseaux de collaboration nationale
Almost 90% of EC’s peer-reviewed scientific publications are co-authored with at least one external partner
Collaborations entre les directions et directions générales d’EC avec ses partenaires (Figure produite par Science-Metrix, 2009)
Remarque : L’épaisseur des lignes et la taille des cercles (directions, directions générales d’EC) indiquent le nombre de collaborations
http://www.ec.gc.ca/scitech: “Gestion des S&T”
Page 13
Démonstration de l’excellence : Analyse comparative de la science • Les publications d’EC sur
l’environnement sont citées 40 % plus souvent que la moyenne mondiale
• EC bénéficie de niveaux de spécialisation très élevés dans certains sous-secteurs de recherche environnementale
• Grand nombre de publications de grande visibilité dans des revues spécialisées interdisciplinaires de premier ordre
http://www.ec.gc.ca/scitech: “Gestion des S&T”
Page 14
Environnement favorable : intrants transectoriels qui font une différence
Dépenses en R et D, de F & E et salariales à EC (en dollars courants)
Dépenses en immobilisation pour R et D à EC (en dollars courants)
• Dépenses internes constantes• Nombre croissant de personnel en
R et D• Augmentation récente des
dépenses en immobilisation
http://www.ec.gc.ca/scitech: “Gestion des S&T”
Personnel en R et D à EC
Page 15
Prochaines étapes : faire avancer la « norme de comparaison »• Nos outils de mesure de
la R et D sont largement transférables à travers les ministères et les agences fondées sur la science
• Qu’en est-il du reste des S et T au fédéral?
• Comment pouvons-nous adapter et étendre les approches et outils existants afin de mesurer les activités scientifiques connexes?
0
1000
2000
3000
4000
5000
6000
7000
8000
mill
ions
of d
olla
rs
R&D
RSA
Intramural, naturalsciences R&D
Intramural, naturalsciences RSA
Dépenses fédérales en ASC / R et D (dollars courants)
Vers une mesure du rendement des ASC…
Page 16
Étape 2 : Pourquoi mesurer les ASC?• Afin d’être plus redevable au niveau des
dépenses des ASC de 1,5 milliard de dollars en sciences naturelles effectuées dans l’ensemble du gouvernement fédéral
• Afin de mieux comprendre la science du « bien public » – les ASC sont effectuées presque exclusivement par les gouvernements et appuient directement la réglementation et la législation fondées sur les sciences, les services aux Canadiens, etc.
• Afin de mieux situer les ASC au sein de la science au niveau fédéral et du système de l’innovation.
• Afin de mieux administrer les ASC comme fonction horizontale transectorielle, les lacunes ou les défis potentiels et saisir toutes les occasions.
Principaux investisseurs du niveau fédéral des ASC en activités intra muros, en sciences naturelles et en ingénierie (2006 2007)
3%
4%
5%
8%
15%
17%
19%
24%
Environment Canada
Natural ResourcesCanadaHealth Canada
Fisheries and OceansCanadaOther
National ResearchCouncilIndustry Canada
AAFC
Canadian Museum ofNatureCFIA
http://www.gcpedia.gc.ca: “Related Scientific Activities”
Page 17
Une approche collaborative en vue d’élaborer une boîte à outils fonctionnelle
• La mesure des ASC est un défi dans l’ensemble du gouvernement
• Notre objectif est d’élaborer des outils de mesure des ASC qui profiteront à tout le milieu scientifique du niveau fédéral
• EC a mis sur pied un groupe de travail afin de consulter les évaluateurs, les scientifiques, les responsables des sciences, les analystes de politiques, les gestionnaires et les planificateurs d’entreprise dans l’ensemble du MOVS
• Un lieu de collaboration ouvert est disponible sur GCPedia
• Établir les indicateurs de rendement des ASC (gestion, horizontalité et responsabilisation), mise en œuvre et public cible
• Offrir des renseignements généraux des ASC (aperçu, au sein du gouvernement fédéral et au sein d’Environnement Canada)
• Élaborer le Cadre pour mesurer le rendement des ASC et du modèle logique
• Introduire des indicateurs possibles des ASC, la portée de leurs possibilités d’application et comment les utiliser
• Indiquer les prochaines étapes dans l’élaboration et l’utilisation de mesures du rendement précises
Processus Résultats attendus
http://www.gcpedia.gc.ca: “Related Scientific Activities”
Page 18
Sommaire
• Le rapport de 2009 : Mesure du rendement de la R et D d’Environnement Canada
Résultat :• Démonstration du rendement
d’EC selon quatre éléments du cadre
• Gamme d’outils transférables élaborés pour la mesure de la R et D
• Élaboration d’une boîte d’outils pour mesurer les ASC, en collaboration avec d’autres ministères
Résultats attendus :• Un rapport sur le rendement
des ASC d’EC en 2011 qui permettra une meilleure prise en compte de « l’autre moitié » des S et T au fédéral
Page 19
Comment ces outils ainsi que d’autres approches en matière de mesure du rendement peuvent-ils nous renseigner sur les activités de S et T fédérales et leurs impacts?
Discussion
Pour plus d’information, visiter www.ec.gc.ca/scitech (cliquer sur « Gestion des S et T »)
Contribuer à l’élaboration de notre « boîte à outils » de mesure de la gestion des ASC à www.gcpedia.gc.ca (rechercher « Related Scientific Activities »)