Organisation des fichiers Eros 2

Les données Eros 2 sont conservées dans le système de stockage Irods du Centre de calcul. Les fichiers sont répartis en plusieurs arborescences.

Répertoire	Usage
/eros/data/eros2/fits	Images
/eros/data/eros2/headers-astro	En-têtes FITS des images
/eros/data/eros2/headers-origin	En-têtes FITS des images calées
/eros/data/eros2/lightcurves	Courbes de lumière et catalogues ASCII
/eros/data/eros2/references	Catalogues binaires des étoiles
/eros/data/eros2/suivis	Fichiers binaires des mesures
/eros/data/eros2/tars	Sauvegarde des archives transférées

Chaque zone est elle-même décomposée en sous-répertoires correspondant aux différents objets, champs, ...

Les images

L'arborescence des images est organisée en trois niveaux: le programme scientifique, le champ et le groupe caméra-CCD.

L'exemple suivant correspond aux images du programme LMC, champ #3, caméra 0, CCD 1:

/eros/data/eros2/fits/
                     lm/
                       lm003/
                            lm00301/
                                   lm00301krc6a3150.fits
                                   lm00301krw6a3150.fits
                                   lm00301krx6a3150.fits
                                   ...
                                   lm00301trrcj3181.fits
                                   lm00301trrck0160.fits

Seules les images réduites et composées sont conservées dans Irods. Les images brutes sont restées à Saclay.

Suivis et références

Les arborescences des suivis et des références (les catalogues binaires des étoiles) sont construits sur le même modèle: production, programme scientifique et champ:

/eros/data/eros2/suivis/
                       p5/
                         lm/
                           lm003/
                                lm00300krp501.sv
                                lm00300krp502.sv
                                lm00300krp503.sv
                                ...
                                lm00317nbp505.sv
                                lm00317nbp506.sv

Seuls les suivis et références correspondant à la production P5 sont conservés dans Irods. L'expérience a considéré les autres productions comme des évaluations non abouties qu'il n'était pas utile de conserver.

Courbes de lumière

L'arborescence des courbes de lumière reprend les idées directrices des autres arborescences: plusieurs niveaux correspondant au programme, au champ, au CCD et au quart de CCD. Comme les courbes de lumière regroupent les mesures réalisées dans les deux couleurs, il n'y a pas de niveau correspondant aux couleurs ou aux caméras.

Les fichiers "catalogues" et les fichiers "fields" sont conservés dans cette arborescence. Les catalogues sont enregistrés dans les répertoires des courbes de lumière, correspondant au programme, champ, CCD et quart de CCD. Les fichiers "fields" sont enregistrés aux niveaux supérieurs, correspondant au champ et au programme scientifique.

/eros/data/eros2/lightcurves/
                            lm/
                              lm.field
                              lm003/
                                   lm003.field
                                   lm0031/
                                         lm0031k-lc.tar.gz
                                         lm0031l-lc.tar.gz
                                         lm0031m-lc.tar.gz
                                         lm0031n-lc.tar.gz
                                         lm0031k/
                                                lm0031k.cat
                                                lm0031k1.time
                                                lm0031k1000.time

Les courbes de lumière étant des fichiers de très petites tailles, elles ont été regroupées en archives TAR GZ, à raison d'une archive par quart de CCD. Pour un traitement massif, il est plus efficace de récupérer ces archives et de traiter localement les courbes de lumière.

Les archives sont également conservées dans Irods.

Entêtes FITS

La norme FITS indique qu'un bloc de données est précédé d'un bloc de description de ces données. Ce bloc contient de nombreuses informations sur l'image et les conditions de la prise de vue.

Ces informations sont tellement utiles qu'elles ont été extraites des images et sont conservés séparément dans Irods.

Les images utilisées dans la construction des courbes de lumière, c'est-à-dire les images des "7 majeurs", ont été calées astronomiquement et des informations supplémentaires ont été ajoutées. Les entêtes sont également conservés dans Irods. Il y a donc deux arborescences pour les entêtes FITS :

• headers-astro contient les entêtes calés astronomiquement mais uniquement pour les images des "7 majeurs"

• headers-origin contient les entêtes d'origines des toutes les images conservées au Centre de calcul.

Ces deux arborescences sont similaires et reproduisent l'organisation de l'arborescence des images.

/eros/data/eros2/headers-origin/
                             lm/
                               lm003/
                                    lm00301/
                                           lm00301krc6a3150.header
                                           lm00301krw6a3150.header
                                           ...
                                           lm00301trr6h0571.header
                                           lm00301trr6h0757.header