Alternance Ingénieur Developpement R&D logiciel - DataManagement HPC & Cloud à Grenoble

Atos SE (Societas Europaea) is a leader in digital services with pro forma annual revenue of circa € 12 billion and circa 100,000 employees in 72 countries. Serving a global client base, the Group provides Consulting & Systems Integration services, Managed Services & BPO, Cloud operations, Big Data & Cyber-security solutions, as well as transactional services through Worldline, the European leader in the payments and transactional services industry. With its deep technology expertise and industry knowledge, the Group works with clients across different business sectors: Defense, Financial Services, Health, Manufacturing, Media, Utilities, Public sector, Retail, Telecommunications, and Transportation.

Atos is focused on business technology that powers progress and helps organizations to create their firm of the future. The Group is the Worldwide Information Technology Partner for the Olympic & Paralympic Games and is listed on the Euronext Paris market. Atos operates under the brands Atos, Atos Consulting, Atos Worldgrid, Bull, Canopy, Unify and Worldline.

Le centre de recherche et développement logiciel HPC & Big Data d’ATOS, basé à Echirolles, Bruyères-le-Châtel, Les Clayes-sous-Bois, Phoenix (US) et Petrópolis (Brésil), comprend environ 120 personnes. Sa mission est de :

- développer des produits pour les solutions HPC, HPDA et Big Data de la Service Line Big Data et Sécurité d’ATOS

- de préparer les ruptures technologiques pour atteindre l’exascale

- de développer les innovations technologiques pour la transformation numérique des entreprises et de la société, et la mise en place des nouveaux services d’intelligence artificielle.

Job Description

Cadre du projet : Les workflows Big Data dans leurs exécutions ont des besoins variés en ressources d’infrastructures. Certaines phases particulièrement intensives en terme de calcul peuvent être contraintes en temps (exemple, entraînement cyclique des modèles de machine learning). D’autres phases sont plus lâches sur les aspects ressources de calcul mais nécessitent par exemple une connectivité accrue (exemple, ingestion élastique des données au plus près des sources, système de visualisation multi utilisateurs).

Le projet HYDDA (HYbrid Deployment for Data Analytics) vise à fournir une réponse au meilleur rendement cout/performance pour ces applications Big Data en s’appuyant sur une infrastructure hybride HPC/Cloud et en masquant la complexité du déploiement à l’utilisateur avec un accès unifié et un placement intelligent. La puissance des technologies HPC (High Performance Computing) pourra permettre d’accélérer les phases les plus critiques des workflows Big Data nécessitant un traitement intensif. La flexibilité du cloud permettra d’héberger les phases nécessitant une connectivité facile et une grande adaptabilité.

Le mouvement de données entre les infrastructures, particulièrement énergivore, sera optimisé.

Une des solutions retenues pour déplacer les données est d’utiliser un délégateur d’entrées/sorties (proxy) capable de servir de passerelle, de convertir les API, et d’offrir d’autres services, entre les stockages et les applications des deux mondes HPC et Cloud.

Mission

L'alternance consiste à développer un prototype de délégateur d’entrées/sorties entre les applications du monde HPC (Posix) et le stockage du monde Cloud (stockage Objet).

Plus précisément, le candidat sera amené à :

• Se familiariser avec le contexte d’exécution des applications sur un cluster HPC (Gestionnaire de jobs, opérations sur le système de fichiers parallèle Lustre, applications de calcul distribuées)
• Assimiler les technologies de délégation d’I/O développées au sein d’Atos dans le cadre de projets précédents
• Monter en compétence sur plusieurs API d’accès à des stockages objet (Ceph, Swift/ OpenStack Object Store)
• Etudier comment les fonctions offertes par ces API peuvent répondre aux besoins des opérations Posix effectuées par les applications HPC, ainsi que les avantages que pourrait offrir une telle solution face à un stockage Posix natif
• Développer un prototype de délégateur I/O PosixObjet
• Démontrer le prototype sur une ou plusieurs applications HPC, et évaluer les performances du système proposé
• Participer aux échanges avec les partenaires industriels et académiques du projet

Job Requirements

De niveau BAC+2/3, vous avez des compétences en développement C (et fonctions Posix), shell scripts, git, et maîtrisez les environnements Linux et réseau.

Chez Atos la diversité est au cœur de notre politique RH. C'est pourquoi Atos a mis en place un accord relatif à l’égalité professionnelle entre les hommes et les femmes. Par ailleurs, nos métiers sont tous accessibles aux personnes en situation de handicap, et ce quelle que soit la nature de leur handicap.