BASS2000, archive long terme : bilan et projets

Présentation du service Archive et diffusion

Bilan Producteurs : intégrés et en projet Nouveaux types de données Intégration des données THEMIS Relation avec les autres bases

Aide aux utilisateurs de la base Utilisation de la base de données Diffusion de logiciels Ateliers

Pédagogie

Notre équipe

1 Ingénieur d’études (responsable technique) 1 Assistant ingénieur : CDD > juillet 2002 ; concours

pour un poste début 2003 environ

1 Adjoint technique ½ secrétaire

1 Astronome adjointe (responsable scientifique) : congé maternité d’octobre 2002 – janvier 2003

1 Chargé de recherche associé à BASS2000

Présentation du matériel

BASS2000 : Base ORACLE

BASS2001 : Modifications des données

Sauvegardes CNES

Copies PIs – Réponses requêtes

OCEANIDE : Dépouillement

BASSGRAV PC WINDOWS 3 PCs linux équipe 2 PCs portables

BASS2000

Type : Alpha Serveur 1000A 5/400 Date d’achat : 06/96 SE : Tru64 Compaq V4.0F RAM : 128 MO Disques : 80 Go Lecteurs : DDS2 - DLT Logiciels : Oracle V8.0.6 – Apache – PHP3

BASS2001

Type : Alpha Station 255 4/233 Date d’achat : 06/96 SE : Tru64 Compaq V4.0F RAM : 64 Mo Disques : 104 Go Lecteurs : DDS2- Exabyte –Dlt Logiciels : IDL

OCEANIDE

Type : Compaq Workstation W8000 Processeur: Bi-processeur Intel Pentium4

1.7 Ghz Date d’achat : 11/2001 SE : Linux Redhat RAM : 1 Go Disques : 182 Go. Lecteur : DDS4 Logiciels : IDL

Bilan

Données intégrées : THEMIS 1999-2001 : 2063 Go (1635

séquences) NRH 1999-2001 : 192 Go (833 séquences) Coupole-Tourelle : 3 Go (1 séquence)

Requêtes : surtout PIs et coIs 600 Go en 2000 330 Go en 2001

Consultations du site : ~1080 /mois

Producteurs (actuels et projets)

THEMIS Le Radiohéliographe de Nancay La Coupole-Tourelle du Pic du Midi Le Coronographe du Pic du Midi

A plus long terme : Données DPSM-VTT IRIS

THEMIS

3 modes d’observation MTR DPSM IPM

Données brutes, disponible 1 an après l’observation Remarques sur les données IPM :

Les données ne sont pas sous format FITSPas d’intérêt à les archiver à BASS2000 si une archive à déjà

été développée Il faudrait rendre la base IPM locale accessible à tous

}ARTHEMIS (archive LOCALE)

BASS2000 (données 1999-2001)

Le Radiohéliographe de Nancay

2 réseaux EO et NS Données brutes

(visibilités) 5 fréquences

(150 à 450 MHz) Cadence 1/8 sec Depuis avril 1999

La Coupole-Tourelle du Pic du Midi Sélection des meilleures séquences Numérisation à la MAMA Formatage

1 séquence intégrée

Le Coronographe du Pic du Midi 200 images / jour 170 jours par an Depuis 1995

-Valeur ajoutée : niveau d’activité de la journée et variabilité-Fiches quotidiennes : seront en ligne

Nouveaux types de données

Simulation de la granulation Films (MPEG, …) Données réduites (FITS)

Simulation de la granulation 8 Heures « solaires » Pas = 20 secondes Réalisation : Rieutord, Ludwig, Roudier, Nordlund & Stein Paramètres physiques

Vitesse Densité Energie interne Température Intensité

image

Films (MPEG)

Coronographe du Pic du Midi (J.C. Noëns et T. Roudier)

Film global basse résolution : Meudon Détails de certaines régions : Tarbes Films montrés au public (Pic du Midi)

Données réduites (FITS) : en projet

NRH (visibilités cartes 2D) ? THEMIS (questionnaire)

Mode DPSM Cartes de champs B// et V//

Mode MTR Paramètres de Stokes Cartes de champs B// et V// Vecteur champ magnétique

Extrapolation (FROMAGE)

Sélection des donnéesTests des différents codesUtilisation d’un code « standard »Disponibilité : 1 an ?

Données réduites par FROMAGE Service d’extrapolation de cartes de champ

magnétique (T. Amari, G. Aulanier)

Données réduites : Carte d’origine Fichiers textes (demande et commentaires) Fichier (binaire) résultat Fichiers postscript (visualisation partielle) « Entête » fits pour l’intégration dans le catalogue

Problème de la mise à disposition des cartes d’origine :

Producteurs divers (MDI, Kitt Peak, THEMIS, etc.) Réduction par le demandeur

Intégration des données THEMIS

Difficultés rencontrées pour 1999-2001 Schéma et requête actuelle Nécessité d’amélioration de la requête Nouvelle requête, nouveau schéma

Difficultés d’intégration des données THEMIS

Données 1999 et 2000 Mots-clés manquants Mots-clés peu fiables Problèmes de DLT DPSM : pas des fits MTR : des fichiers incomplets

Toutes les entêtes ont dues être modifiées(223 000 fichiers)

Données 2001 Problèmes de coordonnées (incohérence,

définitions, mauvais pointage) Longueurs d’onde parfois mauvaises Institut parfois mauvais OBJECT pas toujours fiable MTR : des fichiers incomplets

Autres mots-clés à problème : DATE_END toujours mauvais NAXIS3 parfois mauvais

5 DLT intégralement corrects sur 23

Définition d’une séquence

Contient un ensemble cohérent de fichiers (observations + calibrations associées)

Si un réglage change etc. : doit être une séquence différente

En pratique : selon l’IO THEMIS et l’observateur …

SCHEMA BASS 2000 actuelSCHEMA BASS 2000 actueltab_sequence

id_sequencedate1id_prodsequinddateobsimagetteid_dltfilenameid_cmpnameid_contactthemisffdateendid_institutid_instrume

id_prodproducteur

id_cmpnamecmp_name

id_contactcontact

id_institutinstitut

id_instrumeinstrume

id_dltid_productdlt_produc

t_seqmulti

id_sequenceid_regionid_frequenceid_object

id_regionpolarangsvectorlongitudhlatitudh

t_region

id_freqwavelnthwaveunit

t_frequence

id_objectobject

t_object

id_obsmodeobsmodeextension

t_obsmode

id_physparaphyspara

t_physpara

id_sequenceid_obsmode id_sequence

id_physpara

t_seqobsmodet_seqphyspara

1

t_prod

t_cmpname

t_contact

t_institu

t_instrument

t_dlt

Requête THEMIS Actuellement :

Date, Heure, Longueur d’onde, Instrument, Coordonnées, Objet

Exemple de résultat de requête en MTR : Tache en Hα : 32 séquences Région active en Hα : 144 séquences Tache à 6302 : 83 séquences Protubérances en Hα : 42 séquences

Trop de Go pour l’utilisateur !

6 critères utilisés

Projet à partir de la campagne 2002 ou 2003 si les mots-clés sont validés :

Seeing, Nébulosité, Préfente / Visée de champ Séquence de Stokes, configuration de la polarisation Paramètres du scan (bal. / pos. fixe, nb d’observation

par position, taille fente) Campagne, numéro NOAA

Nouvelles imagettes Entêtes en ligne

Projet à partir de la campagne 2003 ou plus Brutes / Dépouillées Miroir actif ?

Nécessité de davantage contraindre les requêtes

16 critères utilisés

Complément Schéma THEMIS The_seq

Id_th date seqindIxwidthIywidthPrefenteViseeActifmirPol_confCmp_noCmp_typeCmp_descheaderId_sequence

The_see

Id_seeing date1 seqindSeeing

NebulositeId_sequence

Id_thId_NOAA

Themis_NOAA

T_NOAA

Id_NOAANOAA

Themis_seqstokes

Id_thId_stokes

T_stokes

Id_stokesstokes

Themis_seqstep

Id_thId_step

T_step

Id_stepNbstepnbburst

Nouvelle imagetteen ligne

Nouveau formulaire de requête :

Une partie « requête de base » Une partie « recherche avancée » pour

chaque instrument / type de données Tableau résultat : format au choix de

l’utilisateur (avec un défaut proposé)

Nouvelles données Davantage de mots-clés

Relation avec les autres bases de données solaires Liens avec BASS2000 – Meudon

Complémentarité (données systématiques - archive long terme)

Harmonisation (page web commune, Oracle)

Liens avec MEDOC Futures requêtes MEDOC Tarbes Tests réalisés avec succès (I. Scholl)

Aide aux utilisateurs de la base

Thésaurus et avertissements Description des instruments, exemple de

données, disponibilité (Tarbes+Meudon) Bibliographie avec date des données utilisées

(THEMIS) Pages producteurs (CORO, THEMIS) Problème de l’information sur les conditions

d’observation et les calibrations utilisées

Diffusion des donnéesTraitement des données

Aide aux observations et au traitement des données Bibliographie : profondeur de formation

des raies, etc. Mise à disposition de logiciels

Traitement de données

Organisation d’ateliers sur le traitement des données THEMIS (questionnaire):

DPSM : Février 2002 / Hiver 2002-2003 MTR : Hiver 2002-2003

Projet d’atelier DPSM

Objectif : apprendre aux utilisateurs des données DPSM à se

servir du code fourni par P. Mein

Date : hiver 2003 Durée : 3 jours Travail préalable : modifications dans le code

(fortran / IDL), documentation à rédiger

Projet d’atelier MTR

Objectifs : Echanges sur les techniques de traitementAide à la définition d’un code « standard » pour

BASS2000Discussions sur la diffusion de codesRédaction d’un compte-rendu détaillé

Date : hiver 2003 Durée : 2 ou 3 jours A plus long terme : autre atelier pour

apprendre aux utilisateurs à utiliser le(s) code(s) diffusé

Site pédagogique : la physique solaire à l’école Propositions de leçons

Le cycle solaire La rotation solaire La granulation La couronne solaire L’héliosismologie Le Soleil à différentes longueurs d’onde

FAQ Bibliographie, liens, glossaire En projet : actualités, exercices

Conclusion

Diversification des données Producteurs Valeur ajoutée

Proposition de nouveaux services Ateliers dépouillement Diffusion de logiciels, informations …

Importance de la pérennisation des données Entêtes des fichiers d’observations Fiches d’observations Evénements intéressants et problèmes rencontrés Calibrations

Points sur lesquels des recommandations sont nécessaires Date intégration avec nouveau schéma Recommandations détaillées vis à vis de

THEMIS / CS Gestion des mauvais mots-clés vis à vis de

THEMIS Données IPM-THEMIS Disponibilité des données dépouillées (dont

FROMAGE) Nouveaux producteurs