Big Data Engineer - Services Financiers - Ile de France

Votre rôle et vos missions :

Dans le cadre d'un projet client à forts enjeux techniques et remplis d'innovation, vous participerez à :

• La compréhension des besoins métiers et la traduction solution de data ingénierie et ou data analysis ;
• La mise en œuvre de solutions d'ingestion des données quelles soit en batch et/ou en streaming dans un contexte Cloud ;
• La structuration du DataLake, la mise en place des processus de gouvernance et de sécurisation des données ;
• Le traitement de la donnée jusqu'à l'exposition au métier ;
• La mise en place de la chaine CI/CD et de sa supervision ;
• La veille technologique avec nos partenaires éditeurs et la mise en place de Prototype Design, Proof of Concept ou encore MVP dans un objectif d'idéation pour nos clients.

Environnement technique : Spark, Hadoop, Hive, Kafka, Elastic, Cloudera, Azure HD Insight, Informatica, Talend, Stambia, DataStage, SAS, DataIku, DataBricks, Qlik, SAP BI (BO), Power BI, Java, Scala, Python, R