Categories
seminaire passé

[SEMINAR] January 2013 – Gestion des IO parallèle en modélisation du climat – la bibliothèque XIOS 🧑‍🏫 Yann MEURDESOIF

🧑‍🏫 Yann Meurdesoif, Researcher at the Laboratoire des Sciences du Climat et l’Environnement (LSCE)
🌎 January 2013

Abstract:

XIOS est un nouvel outil développé à l’IPSL (Institut Pierre Simon Laplace) destiné à gérer efficacement les sorties fichiers des modèles de simulations climatiques. Il vise deux principaux objectifs :

  • Souplesse d’utilisation, grâce à une description externe des I/O sous forme d’un fichier XML hiérarchisé et d’une API fortran permettant de compléter ces informations à partir des codes.
  • Performance : des cœurs de calculs sont exclusivement dédiés à la gestion des écritures via une technologie client/serveur, les données étant transmises des clients (code de calcul) vers les serveurs (cœurs I/O) par des communications MPI asynchrones non bloquantes. L’écriture des fichiers se fait alors en tâche de fond, en même temps que les calculs. Lors des phases d’écriture, XIOS exploite également le parallélisme du système de fichier via l’utilisation des bibliothèques netcdf4/hdf5 parallèle, permettant à plusieurs processus d’écrire simultanément dans un même fichier, et agrégeant ainsi la bande passante I/O vers les supports matériels.

Slides: