Pause
Lecture
Moteur de recherche d'offres d'emploi CEA

Reconstruction d’une base de données à partir de méta-données stockées sur bandes magnétiques


Détail de l'offre

Informations générales

Entité de rattachement

Situé à 40 km au sud de Paris, le centre DAM-Île de France, a en charge la conception des armes nucléaires françaises, la recherche et développement dans le domaine de la lutte contre la prolifération et le terrorisme, l'alerte aux autorités en cas de séisme, de tsunami ou d'essai nucléaire étranger, la construction et le démantèlement de grandes infrastructures nucléaires. Leader français de la simulation numérique et du calcul intensif, il possède deux des machines européennes les plus puissantes. Il dispose également de plusieurs accélérateurs et de nombreux moyens techniques et expérimentaux pour mener ses recherches. Lui est également rattaché, l'Unité Propulsion Nucléaire située sur le centre CEA/Cadarache en région Provence Alpes-Côte d'Azur, où sont implantées les installations d'essais et une partie des fabrications de la propulsion nucléaire.  

Référence

2021-18608-S0444  

Description du poste

Domaine

Mathématiques, information  scientifique, logiciel

Contrat

Stage

Intitulé de l'offre

Reconstruction d’une base de données à partir de méta-données stockées sur bandes magnétiques

Sujet de stage

Reconstruction d’une base de données à partir de méta-données stockées sur bandes magnétiques

Durée du contrat (en mois)

4 à 6 mois

Description de l'offre

R&D du laboratoire en matière de stockage massif de données en environnement HPC.

Les supercalculateurs du CEA produisent d'immenses quantités de données (dizaines de Péta-octets) à des débits extrêmes (de 1 Téra-octet par seconde). Pour stocker ces données de manière robuste et performante, le CEA développe un logiciel open-source de stockage de données parallèle et distribué : PHOBOS[1]. Ce logiciel vise notamment à gérer une grande variété de technologies de stockage, telles que les disques, bandes, SSD, NVMe, NVRAM, stockage objet...

[1] https://github.com/cea-hpc/phobos
Un système de stockage de données n'est pas infaillible et peut être amené à subir des défaillances, qu'elles soient matérielles ou logicielles. Dans le cas de PHOBOS, cette défaillance implique que la base de données recueillant les informations liées au stockage des données est perdue, et qu'il faut donc la reconstruire. Cette reconstruction peut s'effectuer à partir des méta-données écrites sur les bandes valides, indiquant entre autre leur taille, leur place dans le fichier d'origine, la manière dont les données ont été écrites, etc.

Les objectifs du stage sont les suivants :
- Prise en main de l'outil PHOBOS ;
- Développement d'un mécanisme de (re)construction de la base de données à partir d'une, puis plusieurs, bandes de données saines ;
- Prise en charge de bandes de données corrompues ;
- Implémentation d'un mécanisme de vérification de corruption des bandes

Profil du candidat

Programmation en C, programmation système et réseaux
C, git, environnement Linux
Bac+4

Localisation du poste

Site

DAM Île-de-France

Localisation du poste

France, Ile-de-France, Essonne (91)

Ville

Bruyères-le-Châtel