Data Engineer (H/F)

Le développeur Big Data contribue directement aux projets des directions métier (ex : fraude santé, multi équipements, pricing IARD, optimisation du lead management, fragilité auto, …) et à la construction du socle technique Big Data.Il a pour missions principales de développer les projets Big Data demandés par le métier, et notamment : – Passer de la donnée brute à de la donnée exploitable, exposée sous forme de tables requêtables dans le data lake (inférer les schémas de données, nettoyer et normaliser les données, publier les données)– Consolider ces données au fur et à mesure de leur alimentation récurrente dans le data lake– Les exploiter pour atteindre la finalité business (exposition de business view, réintégration des résultats dans le SI, service de scoring, …)– De travailler à la création du socle technique Big Data (librairies de fonctions, features communément utilisées avec les data scientists…) et industrialiser le cycle de développement de l’équipe Environnement Technique– Python, Spark, Hadoop, AzureVous avez l’habitude des cycles de développements courts en mode Agile ainsi que des outils associés : – Gestion de sources Git sur Azure DevOps– Intégration & déploiement continue avec Azure Pipelines– Gestion des artefacts avec Azure ArtifactCes connaissances supplémentaires seraient un plus : – Cloud Microsoft Azure– Traitements Big Data en mode Streaming– Bases de données relationnelles et NoSQL– Outils de BI (Power BI, Spotfire)