Outils de distribution et d’analyse

Earth System Grid Federation (ESGF)

Le système Prodiguer s’appuie sur le projet international ESGF (http://esgf.llnl.gov): une grille de données fédérée par une pile logicielle open source développée de façon collaborative.

ESGF-France (http://forge.ipsl.jussieu.fr/prodiguer/wiki/ESGF-FR) constitue la fédération des nœuds français interagissant avec la fédération internationale. Les partenaires ESGF-France incluent des groupes de modélisation comme l’IPSL et le CNRM mais aussi des centres de calcul comme l’IDRIS, le TGCC et le CINES qui hébergent chacun un nœud de données.

  • IPSL/UPMC: esgf-node.ipsl.fr (PMIP3, CORDEX, TAMIP, EUCLIPSE, GEOMIP, LUCID); vesg.ipsl.fr (CMIP5)
  • IPSL/X: vesg.ipsl.polytechnique.fr (obs4MIPs)
  • IDRIS: prodn.idris.fr (CMIP5, CORDEX)
  • TGCC: esgf.extra.fr (CMIP5, CORDEX)
  • CINES: esgf.cines.fr (CMIP5)

Le nœud d’index de l’IPSL (http://esgf-node.ipsl.fr) permet la mise à disposition et la recherche des données produites par les partenaires ESGF-France à la communauté internationale. Les données publiées sont ensuite accessibles depuis les nœuds de données via différent protocoles et outils listés ci dessous.

Composantes de la pile ESGF:

  • Serveur Thredds (permet la génération des agrégations et l’utilisation des services HTTP, OpenDAP, WCS, WMS, NetCDFSubset, UDDC, NCML, UDDC, ISO)
  • Serveur GridFTP (permet le téléchargement via un client GridFTP)
  • Serveur LAS (Live Access Server, permet la génération de cartes)

 

SYNDA

SYNDA (http://dods.ipsl.jussieu.fr/jripsl/synchro_data/user_guide.html) is a software developed by IPSL designed to mirror a relatively large subset of ESGF data on a local cluster (or a local machine) and to keep datasets versions up-to-date. SYNDA is up and running at IPSL and let users search, list and mirror the data they need from the ESGF federation to the ciclad cluster. The mirrored subsets can then be accessed on ciclad or through the IPSL ESGF local node (http://esgf-local.ipsl.upmc.fr) which enables OpenDAP access and aggregations.