1

Foru

m d

es

uti

lisate

urs

des

base

s d

e d

on

nées

IFR

EM

ER

Bre

st le 2

5 n

ovem

bre

20

05

Coriolis : portail de données in-situ

pour l’Océanographie Opérationnelle Hauturière

http://www.coriolis.eu.org codac@ifremer.fr

2

Foru

m d

es

uti

lisate

urs

des

base

s d

e d

on

nées

IFR

EM

ER

Bre

st le 2

5 n

ovem

bre

20

05

Le contexte

IN SITU OBSERVATION

L’objectif de Coriolis est d’être un des portails pour les données in situ (et même le portail unique de projetscomme Mercator)

ValidationTemps différé

SATELLITE OBSERVATION

ASSIMILATIONMODELES

Sorties demodèles

Temps réelAssimilation

3

Foru

m d

es

uti

lisate

urs

des

base

s d

e d

on

nées

IFR

EM

ER

Bre

st le 2

5 n

ovem

bre

20

05

Comment Coriolis s’est mis en ordre de marche pour répondre

à cette demande ?

http://www.coriolis.eu.org codac@ifremer.fr

En associant les efforts de 7 organismes

Par une approche en sous-projets

Science

Centre de donnéesDéploiements

Mesures Navires

Instrumentation

4

Foru

m d

es

uti

lisate

urs

des

base

s d

e d

on

nées

IFR

EM

ER

Bre

st le 2

5 n

ovem

bre

20

05

Le centre de données Coriolis

1. Quelles données ?- profils verticaux de température et salinité - trajectoires (profils horizontaux) de température et salinité (en surface ou en immersion)- données de courants (issues de trajectoires de flotteurs dérivants)

- quelques mesures bio-géochimiques (O², Fluorescence)

2. Quelles sources pour ces données ?- XBT en provenance des navires de recherche et des navires marchands- CTD en provenance des navires de recherche (tant français que européens)

- flotteurs Argo - données de flotteurs dérivant de surface - thermosalinonomètres (navires « coriolis », européens (Mersea) et

marchands (ORE SSS salinité de surface) - trajectoires (profils horizontaux) de température et salinité - données de courants (issues de trajectoires de flotteurs dérivants)

- données de mouillages

- éléphants de mer- gliders

source des données

Flotteurs Argo

Bouées ancrées

Navires océanographiques

Navires de commerce

Éléphants de mer

Glidders

Bouées dérivantes

6

Foru

m d

es

uti

lisate

urs

des

base

s d

e d

on

nées

IFR

EM

ER

Bre

st le 2

5 n

ovem

bre

20

05

Flux de données Coriolis

Base de données(Oracle)

Contrôles qualitécontrôle des doubles

produitsanalyses, graphiques, cartes

courantsDérive de capteurs

argodacs argocoriolis, gyroscope,Mfstep et 10 autres projets

météo-francegtslagrangian buoys

Navires de recherchexbt-ctdl’atalante, thalassa, suroît,Beautemps beaupré, marion Dufresne, Meteo, Discovery

tsgl’atalante, thalassa, suroît, Beautemps beaupré

irdtao, piratavos delayed modetsg woce

gtsppSmt (GTS)

US-Nodchistorical data

Météo-france gts

argo

web

woce/clivarcd-rom

mersea, mercatorgodae

soapSHOM

gtsppTemps réelTemps différé

12h

12h

1 an

ftp

dynamique

quotidien

quotidien

daily

hebdomadaire

1 an

1 an

Toutes les 2 heures

48h

1 an

12h

7

Foru

m d

es

uti

lisate

urs

des

base

s d

e d

on

nées

IFR

EM

ER

Bre

st le 2

5 n

ovem

bre

20

05

Circulation des données en temps réel et contrôles qualité associés

Données brutes Base de

données

QC auto

QCVisuel

QCStatistique

Distribution au responsable scientifique

(données non

qualifiées) Distribution SMT /

GTS

(Données qualifiées) Distribution au projet (ex.Argo)

(Données qualifiées)

Distribution aux modèles

(contrôle

qualité final)

8

Foru

m d

es

uti

lisate

urs

des

base

s d

e d

on

nées

IFR

EM

ER

Bre

st le 2

5 n

ovem

bre

20

05

Elaboration de jeux de données “temps différé” et contrôles qualité associé

Pour les besoins de la validation- recherche exhaustive de données- traitement de gros jeux de données

=>contrôle qualité par réanalyse (application des indicateurs qualité –flags- pertinents)

Pour les jeux de données dont nous sommes directement responsables :

exemple : Flotteurs Argo Le but du calcul en temps différé est de Le but du calcul en temps différé est de fournir fournir des corrections pour les sauts et les dérives linéaires (pente, offset). des corrections pour les sauts et les dérives linéaires (pente, offset).

Schéma : C.Coatanoan

9

Foru

m d

es

uti

lisate

urs

des

base

s d

e d

on

nées

IFR

EM

ER

Bre

st le 2

5 n

ovem

bre

20

05

Elaboration du jeu de données Argo Temps différé

Remerciements : C.Coatanoan

10

Foru

m d

es

uti

lisate

urs

des

base

s d

e d

on

nées

IFR

EM

ER

Bre

st le 2

5 n

ovem

bre

20

05

Elaboration du jeu de données Argo Temps différé

Pas assez de données dans la base de référence

pour effectuer correctement le temps

différé pour les flotteurs dans des régions peu fournies en donnée Remerciements :

C.Coatanoan

11

Foru

m d

es

uti

lisate

urs

des

base

s d

e d

on

nées

IFR

EM

ER

Bre

st le 2

5 n

ovem

bre

20

05

Diffusion des données

Adaptées en fonction des objectifs à atteindre :

- pour un service opérationnel (modèles, Mercator, Mersea, Mfstep, Medspiration, Argo)

- ftp (diffusion hebdomadaire, quotidienne adaptée aux besoins des utilisateurs x Diffusion Quotidienne Mersea (ensemble de la base)

x Diffusion quotidienne vers Medspiration pour colocalisations avec des produits de satellites

x diffusion hebdomadaire vers Mercator

- pour une utilisation régulière ou ponctuelle - site web http://www.coriolis.eu.org

x fonction de monitoring d’une zone (ex. Mediterranée, Golfe de Gascogne…)

x diffusion sélective des données (demande par web et livraison par ftp)

- au travers d’un serveur Live Access

12

Foru

m d

es

uti

lisate

urs

des

base

s d

e d

on

nées

IFR

EM

ER

Bre

st le 2

5 n

ovem

bre

20

05

Diffusion des données : quelques exemples : ARGO

600 flotteurs (Actifs et inactifs) de 30 projets traités par Coriolis

Parking Drift depth

Maximum depth 2000 m

Ascending Profile

ftp.ifremer.fr/ifremer/argo/

2169 flotteurs actifs

13

Foru

m d

es

uti

lisate

urs

des

base

s d

e d

on

nées

IFR

EM

ER

Bre

st le 2

5 n

ovem

bre

20

05

Diffusion des données : exemples des thermosalinometres

http://www.gosud.org

18 navires envoient depuis le début 2005 regulièrement les données de

thermosalinomètres (43 navires depuis le début)

18

Visit from R

IHMI Rus

sia 15

dece

mbe

r 20

04

Ship local network

TERMESCORIOLIS

Satellite transmissionINMARSAT-B

Data aquisition system

Data collectingsystem

Ship server

Ship main computersystem

Daily transmission

COLCOR

IfremerBrest

CORIOLIS Data Center

Data BaseSGBD

Meteo Data

Thermosalinometer (TSG)

Date 29/05/99 Heure:06h58Lat:NDeg:48 Min:22 ...Date 29/05/99 Heure:07h58Lat:NDeg:48 Min:23 ...

Ship position

Data ship

Resarchship

L’AtalanteThalassaLe Suroît

In-situ datafrom oceanographic vesselreal-time dataprocessing

14

Foru

m d

es

uti

lisate

urs

des

base

s d

e d

on

nées

IFR

EM

ER

Bre

st le 2

5 n

ovem

bre

20

05

Données de trajectoires de janvier au 24 novembre 2005 2 500 000 positions, 3 000 plate-formes

15

Foru

m d

es

uti

lisate

urs

des

base

s d

e d

on

nées

IFR

EM

ER

Bre

st le 2

5 n

ovem

bre

20

05

Diffusion personnalisée de données

16

Foru

m d

es

uti

lisate

urs

des

base

s d

e d

on

nées

IFR

EM

ER

Bre

st le 2

5 n

ovem

bre

20

05

Coriolis data centre : real time Atlantic analysesDistribution with LiveAccess

17

Foru

m d

es

uti

lisate

urs

des

base

s d

e d

on

nées

IFR

EM

ER

Bre

st le 2

5 n

ovem

bre

20

05

Centre de données Coriolis : 2 013 145 stations de1985 au 24/11/2005

Argo floats, XBT, CTD, Buoys, MooringsNumber of stations : 2 013 145Temperature measurements : 250 000 000 Salinity measurements : 10 000 000Oxygen measurements : 30 700

18

Foru

m d

es

uti

lisate

urs

des

base

s d

e d

on

nées

IFR

EM

ER

Bre

st le 2

5 n

ovem

bre

20

05

Produits élaborés à partir du contenu de la base

Analyses Objectives globales

19

Foru

m d

es

uti

lisate

urs

des

base

s d

e d

on

nées

IFR

EM

ER

Bre

st le 2

5 n

ovem

bre

20

05

Produits élaborés à partir du contenu de la base

Suivi technique de flotteurs Argo

20

Foru

m d

es

uti

lisate

urs

des

base

s d

e d

on

nées

IFR

EM

ER

Bre

st le 2

5 n

ovem

bre

20

05

Un accès unique à travers la page d’accueil du centre de données

21

Foru

m d

es

uti

lisate

urs

des

base

s d

e d

on

nées

IFR

EM

ER

Bre

st le 2

5 n

ovem

bre

20

05

Prospectives et futur

Constat :- recoupement important entre banque de Physique et Coriolis- gestion des données séparée pour des raisons historiques

- Modes de gestion différent :- Banque de Physique / Chimie : méta-données en base

de données. Données en fichiers- Coriolis : méta-données et données en base de données

- Banque de Physique / Chimie :- Méta-données mieux décrites. Gestion en campagnes- plusieurs centaines de paramètres

- Coriolis : - aspect temps réel développé : gestion par stations

- peu de paramètres - problèmes de gestion : duplication des données

- tout cela va à l’encontre d’un point d’accès unique même si le portail Nautilus apporte une solution

=> Décision de fusionner les bases Physique / Chimie et Coriolis

22

Foru

m d

es

uti

lisate

urs

des

base

s d

e d

on

nées

IFR

EM

ER

Bre

st le 2

5 n

ovem

bre

20

05

Prospectives et futur

Constat :- Coriolis et la BDOS (Base de Données Océanographique du SHOM) ont aussi des domaines d’activités qui se recouvrent- Les fournisseurs de données sont différents mais se complètent. Le SHOM a accès à des données auxquelles Coriolis n’a pas accès

Décision de mutualiser la gestion, le traitement et l’archivage des données hydrologiques entre le SHOM et

Coriolis

(convention signée en juillet. Réunion de lancement en octobre 2005

23

Foru

m d

es

uti

lisate

urs

des

base

s d

e d

on

nées

IFR

EM

ER

Bre

st le 2

5 n

ovem

bre

20

05

Conclusion

Finalement comment cela a t il été possible en 6 ans ?- Par une très forte implication dans les projets nationaux (ORE SSS de l’INSU par exemple) et les projets internationaux (Argo, Mersea, MFSTEP…)

- fourniture des données collectées mais aussi distribution de données

- Grâce à nos clients utilisateurs (Mercator en particulier) qui nous ont obligés à nous adapter en permanence

- Grâce à une collaboration étroite entre l’équipe scientifique de Coriolis et le centre de données. (Produits élaborés en R & D puis passage en opérationnel au centre de données)

- Grâce au soutien de l’équipe projet et des organismes partenaires - et le travail d’une équipe

Y. Raguenes, C. Coatanoan, T. Carval, V. Bernard, O. Desprez, Th. Loubrieu, E. Maros, L. Petit de la Villéon