DATA ENGINEER Java Spark Scala H F

Description de la mission

Notre client souhaite renforcer son équipe “Transformation et Modélisation”, composée de profils multidisciplinaires (développeurs back-end, data engineers, data scientists). Cette équipe opère au sein de la plateforme Big Data de notre client, qui centralise de gros volumes de données utilisés dans des services à forte valeur ajoutée (détection de comportements anormaux, prévision d’arrivée à quai, etc.).
Le prestataire interviendra en lien direct avec les métiers via les Business Units, ainsi qu’avec les équipes IT et opérationnelles.
Missions attendues :
•Développement de jobs Spark pour le traitement massif de données (ingestion, nettoyage, préparation, enrichissement, croisement) ;
•Mise à jour de collections dans un datalake et exposition via web services ;
•Développement complet jusqu’à la mise en production ;
•Maintenance corrective des solutions Big Data ;
•Accompagnement des équipes ML dans l’industrialisation de leurs modèles ;
•Collaboration avec les parties prenantes transverses et métier.