Tech lead Expert Spark et Airflow

Description de la mission

Client dans le domaine de l’énergie.
Le présent appel à prestation se déroule dans le cadre de l’activité de développement de cas d’usages au sein du groupe Continuité numérique & Data (CND)
L’une des ambitions de CND est de concevoir, développer et maintenir en conditions opérationnelles des solutions permettant de valoriser le patrimoine de données de l’Ingénierie Projets Nucléaires, à partir de son infrastructure Plateforme Data Groupe, qui héberge une partie des informations patrimoniales de l’ENTREPRISE sur la base des briques techniques suivantes :
Linux, Python, Spark, PostgreSQL, Oracle, Airflow, SGDB NoSQL, Power BI on-line.
Les enjeux associés sont :

o Réduire les temps de recherche à l’information : faire gagner à un ingénieur entre 20% à 40% de son temps lui permettant de se recentrer sur sa tâche métier où il peut faire valoir son expertise ;
o Faciliter l’analyse de toutes les données métiers provenant de différentes sources ;
o Exploiter les relations entre les données aujourd’hui cloisonnées ;
o Eliminer les applications métiers (par exemple : Excel) supportant aujourd’hui ces problématiques ;
o Migrer l’ensemble des cas d’usages du Datahub (briques MSBI) vers la nouvelle plateforme data groupe ;
o Disposer d’une certaine flexibilité lors de la réalisation des cas d’usages (mise à jour sans rework important).

Objectifs/Descriptif de mission :
Les principales activités concerneront l’accompagnement au cadrage technique, fonctionnel et au suivi des projets à la fois sur les aspects MOE et MOA dans le cadre de l’organisation en méthode agile du projet, réalisation des cas d’usage Data (développements BI, Big Data, Datascience) et réalisation des recettes

Rôle d’Architecte Technique :

o Analyse des besoins métier dans la phase du cadrage, conception d’une architecture technique et applicative et estimation du macro-chiffrage de réalisation ; définition des différents scénarios possibles et établissement des dossiers de décision associés.
o Contribution à la mise en œuvre de l’architecture technique des projets en lien avec les acteurs externes à CND et contribution à la mise en œuvre de l’architecture applicative des projets en lien avec les intervenants CND.
o Participation à l’industrialisation et la documentation technique du projet
o Analyse des demandes d’évolution fonctionnelles : identification des impacts, préconisations techniques
o Conception et réalisation de l’architecture en cohérence avec le cadre d’architecture du service PFDG IPN
o Conception et modélisation du modèle de données
o Support auprès de l’équipe Agile sur les aspects techniques
l’outillage DevOps souhaité par l’ENTREPRISE (Gitlab, Ansible, Jenkins, Visual Studio…)