Architecte BigData Hadoop

Description de la mission

Contexte :
Vous intégrerez le service DBAs & Socles de la direction technique pour une mission de pilotage et de mise en œuvre opérationnelle des travaux de fiabilisation des socles Hadoop afin de répondre aux exigences de performances attendues par les cas d’usages fonctionnels.
Description :
Évolution des architectures techniques :
– Mise en place des principes directeurs sur l’utilisation du cluster Cloudera;
– Vérification de la bonne application des normes et des standards;
– Force de proposition, étude, analyse et mise en œuvre de solutions pour améliorer : l’outillage utilisateurs, optimiser les performances et la résilience du cluster;
– Étude d’impact et réalisation opérationnelle des montées de version Cloudera et outils Hadoop;
– Prise en compte de l’écosystème DSI : ordonnanceur IWS, sauvegarde HDPS, supervision Prometheus / Grafana, … ;
Expertise Hadoop de niveau 3 :
– Configuration du cluster Cloudera en fonction des besoins identifiés;
– Optimisation des traitements ;
Support :
– Accompagnement des équipes de développement;
– Assistance auprès des équipes : Optimisation des traitements, Prise en main de l’outillage mis à disposition, Chargement des données;
– Transmission du savoir-faire via la rédaction de documentations et transfert de connaissances;