Data Engineer Azure Databricks

Description de la mission

Concevoir, développer et maintenir des pipelines de données ETL/ELT sur Azure Databricks.
Optimiser les performances des pipelines de données pour assurer une ingestion et une transformation des données efficaces.
Collaborer avec les data scientists et les analystes pour comprendre les besoins en données et fournir des solutions adaptées.
Assurer l’intégrité, la qualité et la gouvernance des données tout au long du cycle de vie des données.
Automatiser les tâches de traitement des données et créer des flux de travail reproductibles.
Surveiller et dépanner les problèmes liés aux pipelines de données et aux environnements de traitement des données.
Documenter les processus et les architectures de données.
Participer à l’évaluation et à la sélection des technologies de données et des outils de l’écosystème Azure.