Embed Size (px)
Citation preview
SISMER
Banque de données de physique et chimie Marine
M. FichautN. Carn
F. Le Hingrat
2
Ba
nq
ue
de
Ph
isiq
ue
-Ch
imie
Ju
in 2
00
6
L’EQUIPE SISMER
Direction : Catherine MAILLARDSecrétariat : Béatrice MILOSAVLJEVIC
Banque nationale de physique et chimie +
catalogues
Michèle FICHAUTFrançoise LE HINGRAT
Nolwenn CARN
Banque Nationale de géologie te géophysique
Eric MOUSSATCéline CORDIER
Guillaume GALIBERT (CDD)
Océanographie opérationnelle
CD ARGO/CORIOLIS
Loic PETIT DE LA VILLEONVincent BERNARD
Christine COATANOANArmel BONNAT
Philippe LAINE – Pascal ROGARD
Fabrice LEBEL (CDD)
Données de référence(Données maillées, données
géographiques)
Michel BELLOUISPatrick DANEL
3
Ba
nq
ue
de
Ph
isiq
ue
-Ch
imie
Ju
in 2
00
6Données de Physique /
Chimie
CTD (30 989 stations)
BOUTEILLES (42 334 stations)SERIES TEMPORELLES
2075 Courantomètres 123 Chaînes de thermistances 39 Piège à sédiments 46 Marégraphes
Données temps différé des campagnes françaises ou des programmes internationaux
4
Ba
nq
ue
de
Ph
isiq
ue
-Ch
imie
Ju
in 2
00
6
5
Ba
nq
ue
de
Ph
isiq
ue
-Ch
imie
Ju
in 2
00
6
6
Ba
nq
ue
de
Ph
isiq
ue
-Ch
imie
Ju
in 2
00
6
7
Ba
nq
ue
de
Ph
isiq
ue
-Ch
imie
Ju
in 2
00
6
Enrichissement de la BDD
Evolution du nombre de données de Physique/ Chimie
0
5000
10000
15000
20000
25000
30000
35000
40000
45000
Bouteilles CTD Courantos
1997
1998
1999
2000
2001
2002
2003
2004
2005
+1915
+575
+33
8
Ba
nq
ue
de
Ph
isiq
ue
-Ch
imie
Ju
in 2
00
6
Répartition temporelle
Répartition temporelle
0
500
1000
1500
2000
2500
3000
Bouteilles Ctd Courantos
9
Ba
nq
ue
de
Ph
isiq
ue
-Ch
imie
Ju
in 2
00
6
Circuit des données
Fichier de donnéesFormat
MEDATLASFlags qualité = 0
(pas de CQ)
CONVMED
reformatage
BDDSERVEUR SISMER
IndexationP50
BDD SCOOPMETA DATA
SCOOP
Fichier de donnéesformat
MEDATLASFlags qualitésRenseignés
Contrôle qualitéContrôle doubles
Demande de données
NAUTILUS
Fichier de données
Format XASCII
10
Ba
nq
ue
de
Ph
isiq
ue
-Ch
imie
Ju
in 2
00
6Recherche des données
manquantes
A partir de : Catalogue des campagnes océanographiques françaises Une fois par an : scientifiques contactés pour savoir s’ils peuvent nous remettre leurs données de : bouteilles, CTD, séries temporelles (courantomètres, chaînes de thermistance, marégraphes).Nouvelles données mises au format MEDATLAS, contrôlées et archivées
11
Ba
nq
ue
de
Ph
isiq
ue
-Ch
imie
Ju
in 2
00
6
Récupération des données
Mini Maxi Moyen Mini Maxi MoyenTemps
(jours)1 946 439 1 1098 485
1ère relance - Réception 1ère relance - Stop Relance
Nb Reçues Stop Contact Rien TOTAL
138 130 125 7 400
34.50% 32.50% 31.25% 1.75% 100%TOTAL
2004 : temps écoulé entre la demande et la réception des données
2004 : Nombre de jeux de données reçus
12
Ba
nq
ue
de
Ph
isiq
ue
-Ch
imie
Ju
in 2
00
6
Format MEDATLAS
Format ASCII auto-descriptif adapté aux mesures au point fixe : séries temporelles et aux profils verticauxMéta-données
Information sur la campagne ou le mouillage
Commentaires • Méthodes de mesures
• Description des capteurs …. Nombre de paramètres variable d’un profil vertical ou d’une série temporelle à l’autre au sein d’un même fichier de données
13
Ba
nq
ue
de
Ph
isiq
ue
-Ch
imie
Ju
in 2
00
6
MEDATLAS
FORMAT
14
Ba
nq
ue
de
Ph
isiq
ue
-Ch
imie
Ju
in 2
00
6
Contrôles qualité (QC)
QCO : Contrôle automatique du formatQC1 : Contrôle automatique et visuel des en-têtes stations QC2 : Contrôle automatique et visuel des données
un indicateur de qualité à chaque valeur numérique (Échelle GTSPP)
0 1 2 3 4 5 9Pas QC Bon Hors
statDouteux Faux Modif. Défau
t
15
Ba
nq
ue
de
Ph
isiq
ue
-Ch
imie
Ju
in 2
00
6
QC des entêtes de stations
Contrôle des dates et des positions
Vitesse du navireRoute du navireBathymétrie
16
Ba
nq
ue
de
Ph
isiq
ue
-Ch
imie
Ju
in 2
00
6QC données : profils
verticauxQC multi-paramètres
PicsValeurs régionalesProfils constantsInversion de densité (T,S)Rapports de Redfield (nutritifs)Comparaisons avec les statistiques existantes (Levitus, Medatlas)
VisualisationSuperposéeDécalée
17
Ba
nq
ue
de
Ph
isiq
ue
-Ch
imie
Ju
in 2
00
6QC données : séries
temporelles
QC multi-paramètres
PicsValeurs régionalesPression mesurée comparée à prof. CapteurDate croissanteComparaison avec la statistique sur la série temporelle
VisualisationSuperposéeDécalée
18
Ba
nq
ue
de
Ph
isiq
ue
-Ch
imie
Ju
in 2
00
6
Durée des QC
Temps avant contrôle
Disponibilité personnel SISMERInformations manquantes Disponibilité fournisseur
Durée contrôle Erreurs sur les dates, positions ou sur les donnéesDisponibilité fournisseur
Moy Min Max Moy Min Max
CTD 2203 43 <1 364 77 < 1 522
Bouteilles 610 77 <1 213 4 1 14
Courantos 76 164 53 235 44 1 159
Durée du
contrôle
(jours)
Type de
données
Nombre total
de stations
ou séries
Temps avant
contrôle
(jours)
19
Ba
nq
ue
de
Ph
isiq
ue
-Ch
imie
Ju
in 2
00
6
Projet associé : MATER
MAss Transfer and Ecosystem Response
Projet Européen ciblé Méditerranée 1996-1999Projet multidisciplinaire : biologie, physique, chimie, geologie, …
Avec de nombreux partenaires 53 groupes de recherche de 13 pays 5 équipes pour la gestion de données
20
Ba
nq
ue
de
Ph
isiq
ue
-Ch
imie
Ju
in 2
00
6
Produit final : CDRom
Documentation HTML sur :Le projetLes partenairesLes Méthodes de contrôle qualitéLe format MEDATLASLe jeux de donnéesLes documents de référence du projet
Cartes de localisationFichier de données SELMATER Logiciel d’extraction et de visualisation des données
21
Ba
nq
ue
de
Ph
isiq
ue
-Ch
imie
Ju
in 2
00
6
Projet associé : MEDAR/MEDATLAS II
MEDiterranean Data Archeology and Rescue (Godar component)
Compilation et archivage : Température, salinité et les principaux paramètres biochimiques (oxygène, nutritifs, …) dans la Méditerranée et la Mer NoireCalcul d’une climatologie pour les paramètres principauxPublication et distribution du jeux de données et de la climatologie à la communauté scientifique
22
Ba
nq
ue
de
Ph
isiq
ue
-Ch
imie
Ju
in 2
00
6
CDROM 1 documentation HTML sur
le projet et le jeux de données
Inventaire des campagnes CDROM 2
Jeu de données +SELMED : Logiciel d’extraction et de visualisation des données
Format de sortie : MEDATLAS, CSV ou ODV.
CDROM 3 et 4: cartes, figures et fichiers Netcdf
Climatologie
Un jeu de 4 CDRoms
Produit final : CDRom
23
Ba
nq
ue
de
Ph
isiq
ue
-Ch
imie
Ju
in 2
00
6Défi Golfe de Gascogne
(IFREMER)
101086 profils de Température
21971 profils de Salinité
24
Ba
nq
ue
de
Ph
isiq
ue
-Ch
imie
Ju
in 2
00
6
Données ADCP
3 navires IFREMER (Transect)L’ATALANTE : NB 75 et NB 300 THALASSA : NB75 et BB 150SUROÎT : BB 150
1 navire SHOM (Vmdas)BEAUTEMPS-BEAUPRE : NB 38 et BB 150
25
Ba
nq
ue
de
Ph
isiq
ue
-Ch
imie
Ju
in 2
00
6
Mode de transmission
Depuis 2001, configuration standard sur les navires IFREMER
Données brutes transmises au SISMER à la fin de la campagne en temps différé
Depuis 2004, Beautemps-Beaupré transmet les données d’ADCP en temps réel, une fois par jour
Données pré-traitées par le logiciel VMAS d’acquisitionDonnées traitées par le SISMER à la fin de chaque campagne
26
Ba
nq
ue
de
Ph
isiq
ue
-Ch
imie
Ju
in 2
00
6
Traitement des données
Logiciel CASCADE développé à l’IFREMER par le Laboratoire de Physique des Océans (Matlab)4 étapes de traitement :
Reformatage des données brutes au format Oceansites NetCDF Conversion des données en coordonnées terrestre, filtrage, moyenneCalcul des vitesses absoluesContrôle qualité des données
27
Ba
nq
ue
de
Ph
isiq
ue
-Ch
imie
Ju
in 2
00
6
Contrôle qualité de l’ADCP
Des flags sont attribués aux valeurs numériques
1 Données bonnes
2 Données douteuses (points isolés, trop diff érents des 5 voisins)
3 Pic
4 Composante horizontale avec cisaillement vertical diff érentiel > 0.021 cm/ s
5 Vitesse verticale du courant > 30 cm/ s
6 Une des vitesses absolues horizontales (U ou V) > 4 m/ s
7 Données absentes
8 Cellules sous le f ond en f onction du Bottom Ping (ADCP) ou
de la Bathymétrie
9 Données invalidées manuellement
10 Données sous le f ond en f onction de la détection amplitude
ADCP
28
Ba
nq
ue
de
Ph
isiq
ue
-Ch
imie
Ju
in 2
00
6ADCP : 63 campagnes
traitées
29
Ba
nq
ue
de
Ph
isiq
ue
-Ch
imie
Ju
in 2
00
6
Données diffusées
2 fichiers NetCDF par campagne1 fichier avant filtrage1 fichier filtré
Date/heure, Latitude, Longitude, Profondeur, N/S, E/W components, Vitesse verticale du courant, Echo intensité
1 fichier compressé d’archiveCartes des sections, images et vecteurs des sections
1 rapport d’exploitationInformation sur le collecte des donnéesInformation sur les contrôles qualité et sur les traitements appliqués aux donnéesLes problèmes éventuels rencontrés avec les données
30
Ba
nq
ue
de
Ph
isiq
ue
-Ch
imie
Ju
in 2
00
6
Exemple de QC
Transit ATALANTE avril 2005
Route du navireBathymetrie et route du navireFlags pour les données ADCP de tout le transit
31
Ba
nq
ue
de
Ph
isiq
ue
-Ch
imie
Ju
in 2
00
6
Vecteurs de courant
Section Panama - FdF30 - 50 m
Section Panama - FdF100 - 200 m
32
Ba
nq
ue
de
Ph
isiq
ue
-Ch
imie
Ju
in 2
00
6
Images d’une section
Section Panama – FdF
Composante E/W du courant
Section Panama – FdF
Composante N/S du courant
