Master 2018 2019
Stages de la spécialité SAR
Stagiaire data Engineer


Lieu : MICROPOLE , 91/Ô95, Rue Carnot 92300 Levallois-Perret , France
Encadrant : Yann CARPENTIER-GREGSON
Dates :18/03/2019 au 18/09/2019
Rémunération :1200 Brut/mois
Mots-clés : Master SAR, autre qu’ATIAM

Cliquer ici pour vous authentifier


Description

Dans le cadre d’un projet réalisé dans les locaux Micropole, le stagiaire aura en charge des tâches de développement Spark/Scala. L’objectif est d’alimenter des tables d’un datawarehouse Hexadata à partir de données stockées dans un datalake Cloudera. Apprendre auprès de nos data engineers le développement, la maintenance, et l’évolution de flux d’alimentation autour d’un datalake cloudera pour un de nos client. Le développement sera en scala. Les flux s’appuient actuellement sur Spark 1.6, et vont évoluer vers Spark 2.4. Des tâches d’extraction de données dans des fichiers plats pourront également être proposées.