Retourner à la liste

Développement de Notebooks Jupyter pour l’analyse système Euclid réf: 008T2019SI

Description

Le télescope spatial européen Euclid sera lancé en 2020 avec pour objectif de cartographier l’univers sombre (matière noire et énergie sombre). Une importante quantité de données sera traitée par le Segment Sol Scientifique (SGS) au sein d’une dizaine de centre de calculs répartis en Europe et aux Etats-Unis. Le CNES est notamment responsable de la coordination système du SGS. Des campagnes d’essais permettent de tester le fonctionnement de l’ensemble des codes scientifiques et des infrastructures de calcul au sein de ce système. La quantité importante de données et de logs produits rend les investigations manuelles laborieuses ; il est donc nécessaire de développer de nouveaux outils d’analyse semi-automatiques.

Dans ce contexte, le stagiaire développera et intègrera des outils permettant d’analyser le déroulement des challenges de façon interactive. En particulier, ces outils fourniront des statistiques d’exécution sur les chaines de traitement (p.ex. consommation mémoire), les centres de calcul (p.ex. profil de charge) et les produits (p.ex. fichiers dupliqués). Le Notebook Jupyter est une technologie simple d’utilisation, interactive et modulaire, donc parfaitement adaptée à ce besoin. Le stagiaire se familiarisera avec l’architecture du SGS, les besoins des différents acteurs, ainsi que les objectifs globaux des essais système Euclid. Un cycle de développement itératif et incrémental permettra de fournir rapidement des outils fonctionnels et adaptés. En fonction de l’avancement du stage et des besoins exprimés au fur et à mesure, d’autres pistes pourront être explorées, comme l’exploitation des logs ou la mise en place d’un portail web pour lesdits outils.

Profil

BAC + 4 ou 5
Etudiant en dernière année d’Ecoles d’ingénieur ou d’université, ou MASTER universités
Compétences souhaitées : Python, Unix, Jupyter serait un plus, anglais courant

Description de la structure

Non renseigné

Répondre à l'offre Retourner à la liste