24
Le Datamart : le serveur de données ouvertes du Service météorologique du Canada (SMC) Journée données ouvertes 2013 Société des Arts Technologiques, Montréal 23 février 2013 Miguel Tremblay Centre météorologique canadien

Le Datamart : le serveur de données ouvertes du Service météorologique du Canada (SMC)

Embed Size (px)

DESCRIPTION

Journée données ouvertes 2013 Société des Arts Technologiques, Montréal 23 février 2013 Miguel Tremblay Centre météorologique canadien

Citation preview

Page 1: Le Datamart : le serveur de données  ouvertes du Service météorologique du Canada (SMC)

Le Datamart : le serveur de données ouvertes du Service météorologique

du Canada (SMC)

Journée données ouvertes 2013

Société des Arts Technologiques, Montréal

23 février 2013

Miguel Tremblay

Centre météorologique canadien

Page 2: Le Datamart : le serveur de données  ouvertes du Service météorologique du Canada (SMC)

Page 2 – 13-02-26

Aperçu

• MT/EC/CMC• Le Datamart• Contexte• Écueils• EM Weather

Page 3: Le Datamart : le serveur de données  ouvertes du Service météorologique du Canada (SMC)

Page 3 – 13-02-26

Miguel Tremblay

• Montréal, Québec• Physicien• Ptaff.ca• Wikipédia• Environnement Canada

depuis 2004• Contributeur principal au

logiciel libre METRo• Responsable du contenu

du Datamart

Page 4: Le Datamart : le serveur de données  ouvertes du Service météorologique du Canada (SMC)

Les régions et les centres nationaux

Centre météorologique canadien

Page 5: Le Datamart : le serveur de données  ouvertes du Service météorologique du Canada (SMC)

CMC, l'édifice

Page 6: Le Datamart : le serveur de données  ouvertes du Service météorologique du Canada (SMC)

Page 6 – 13-02-26

• Mandat: prévoir les conditions et les avertissements météorologiques quotidiens et fournir des renseignements météorologiques détaillés à l'ensemble du Canada;

• Résultat stratégique 2 : La population canadienne est équipée pour prendre des décisions éclairées quant aux conditions changeantes du temps, de l'eau et du climat.

Environnement Canada

Page 7: Le Datamart : le serveur de données  ouvertes du Service météorologique du Canada (SMC)

Le Datamart

Page 8: Le Datamart : le serveur de données  ouvertes du Service météorologique du Canada (SMC)

Page 8 – 13-02-26

Historique

• Tôt dans les années 2000 – SMC adopte une politique d’accès libre à ses données– Veut se retirer des services commerciaux

• Doit complémenter son offre de dissémination générale:– WXO, WeatherRadio, 1-900, enregistrements téléphoniques, site

média…

• En 2004 – Création d’un dépôt de données (dd server ou datamart) pour

rendre disponibles les données numériques du temps en format GRIB

• 2006: – Le satellite AMIS arrive à la fin de sa vie – Datamart devient une des alternatives pour les bulletins alpha-

numériques

Page 9: Le Datamart : le serveur de données  ouvertes du Service météorologique du Canada (SMC)

Page 9 – 13-02-26

Historique (suite)

• Même période:– Financement pour conversion de la prévision officielle en format XML

pour usage par le secteur météo-routier ou des transports

• 2007-2010: – Direction des Services mentionnent besoins de leurs clients– ajout de plusieurs données pour des groupes d’usagers experts.– Gestion du contenu par la section de la Planification, des mesures de

performance et des relations externes du Centre météorologique canadien

• Les fils de données nécessitant un support 24-7 toujours disponibles sous recouvrement de coûts

Page 10: Le Datamart : le serveur de données  ouvertes du Service météorologique du Canada (SMC)

Serveur de données http://dd.meteo.gc.ca

Page 11: Le Datamart : le serveur de données  ouvertes du Service météorologique du Canada (SMC)

Exemple: Citypage XML

Page 12: Le Datamart : le serveur de données  ouvertes du Service météorologique du Canada (SMC)

Documentation: ASCII

Page 13: Le Datamart : le serveur de données  ouvertes du Service météorologique du Canada (SMC)

Page 13 – 13-02-26

Définitions

• Données ouvertes: Données publiques accessibles librement, dans un format ouvert* et sans restriction quand aux fins auxquelles elles peuvent être utilisées.

• Format ouvert: format avec des spécifications publiques et sans restriction de mise en oeuvre.

Page 14: Le Datamart : le serveur de données  ouvertes du Service météorologique du Canada (SMC)

Serveur de données

• Accès libre et gratuit aux usagers spécialisés – Formats ouverts, protocole HTTP– Connaissances météo et/ou informatique– Pour lecture automatique (par script)– Offre complémentaire à WXO qui est pour le public en général

▪ dd non contraint aux exigences CLF des pages web

• Licence:– Condition principale d’utilisation est de donner crédit à EC– Usage commercial accordé– Plus besoin de mot de passe ou de signature

Page 15: Le Datamart : le serveur de données  ouvertes du Service météorologique du Canada (SMC)

Page 15 – 13-02-26

Statistiques

Page 16: Le Datamart : le serveur de données  ouvertes du Service météorologique du Canada (SMC)

Statistiques

• 400 000 visiteurs/jour

• 10 millions fichiers téléchargés/jour (~260 Go/jour)

• Pour janvier 2013:– 177 millions City pages– 22 millions GRIB du modèle global– 7 millions images radar

Page 17: Le Datamart : le serveur de données  ouvertes du Service météorologique du Canada (SMC)

Qui sont les clients?

• Secteur public• ministères provinciaux

• sociétés d'états

• sécurité publique

• municipalités

• Secteur privé • Secteur météo

• Secteurs de l’agriculture, des transports, de l’énergie, de l’assurance,les universités, etc.

• Individus qui développent à la maison

• Clients des secteurs où la météo a un impact sur leurs opérations!

Page 18: Le Datamart : le serveur de données  ouvertes du Service météorologique du Canada (SMC)

Applications

Page 19: Le Datamart : le serveur de données  ouvertes du Service météorologique du Canada (SMC)
Page 20: Le Datamart : le serveur de données  ouvertes du Service météorologique du Canada (SMC)

Météogramme

Page 21: Le Datamart : le serveur de données  ouvertes du Service météorologique du Canada (SMC)

Répartition géographique

Page 22: Le Datamart : le serveur de données  ouvertes du Service météorologique du Canada (SMC)

Page 22 – 13-02-26

Communications

• « Contactez-nous » sur le site web• Communications courriel (bogue, questions, demande

d'ajouts de données)• Liste de diffusion: + 400 abonnés• Documentation

Page 23: Le Datamart : le serveur de données  ouvertes du Service météorologique du Canada (SMC)

Page 23 – 13-02-26

Règles pour ajouter des données

• Que l’information soit déjà produite à Environnement Canada;

• Que l’information distribuée soit d'intérêt général, destinée à plusieurs utilisateurs;

• Le format utilisé pour distribuer les données doit être ouvert (équité d’accès);

• La production des données doit bénéficier d’un support opérationnel (disponibilité des données);

• Les données doivent être documentées (le fournisseur des données est responsable de produire la documentation et de la maintenir à jour);

• Les données sont distribuées avec la licence générale du Datamart (clarté et généralité des termes d’utilisation des données).

Page 24: Le Datamart : le serveur de données  ouvertes du Service météorologique du Canada (SMC)

Questions?