Python Developer (m/w/d) Graphdatenmodell ID25066-0

Description de la mission

Python Developer (m/w/d) Graphdatenmodell ID25066-0

Laufzeit: 01.10.23 – 30.06.2024
Onsite Stunden: 40 in S-H
Offsite Stunden: 1400
Stunden Reisezeit für projektbedingte Reisen: 15

Für die kommunale Wärmeplanung werden vom Netzbetreiber Daten zur Gasinfrastruktur abgefragt. Diese sollen in einem Standard Datenmodell zur Verfügung gestellt werden. Dabei handelt es sich sowohl um Leitungsdaten als auch um Kundenanschlüsse und weitere technische Objekte.

Ferner werden Zeitreihen benötigt (sämtliche Daten liegen bereits in verschiedenen Quellsystemen). Parallel dazu besteht eine Datenplattform, in der gegenwärtig ausschließlich Stromdaten aus den genannten Quellsystemen liegen.
Aufgabe ist es nun die Gas Asset- und Zeitreihendaten aus den Quelldaten zu überführen.
Die Datenplattform besteht aus einer Graphdatenbank. Deshalb ist eine im Allgemeinen recht komplexe python Datenverbeitung erforderlich um aus einfachen Daten eine Graphstruktur zu erstellen.
Die entsprechende Programmierung wird in ein bestehendes git repository mit CI CD Flow eingearbeitet.
Für die Umsetzung werden insbesondere die python Bibliotheken pandas, networkX und ggfs. polars sowie spark benötigt.
Die Pipelines werden in der Azure Plattform umgesetzt, Kenntnisse darüber sind aber nicht zwingend notwendig (wenn auch von Vorteil).
Für diese Aufgabe wird ein data engineer mit python Schwerpunkt benötigt.

Stand:
Die Datenbank ist mit Stromdaten gefüllt, es bestehen bereits Code und Pipeline zur wöchentlichen Beladung. Der Code für die Beladung und Transformation von Gasdaten ist ausstehend.

Ziel:
Ziel ist es, die Datenbank mit einem konsistenten Graphdatenmodell unserer Gas Assetsbase zu befüllen. Es sollen im Projekt alle relevanten Gasdaten eingearbeitet werden, nicht nur die, die für die kommunale Wärmeplanung unbedingt erforderlich sind. Dafür soll eine Extraktions- und Transformationspipeline der bereits existierende Strompipeline hinzu programmiert werden.

SKILLS
– python development
– bash
– data libraries: pandas, polar, spark
– git

Bewerbung und Kontakt:
Sollten wir Ihr Interesse geweckt haben, dann freuen wir uns auf die Übersendung Ihres aussagekräftigen Word Profils unter der Angabe Ihres Stundensatzes, EU-DSGVO Zustimmung und Verfügbarkeit an

bewerbung

Herzlichen Dank im Voraus und mit herzlichen Grüßen

Hinweis:
Ab Mai 2018 gilt die neue EU-DSGVO, damit wir Ihre Bewerbung berücksichtigen und Ihnen zukünftig weiterhin direkt Projekte aktiv vorstellen können, bestätigen Sie uns bitte einmal in Ihrer Bewerbung, dass wir Ihr Profil bei uns speichern dürfen.

Als Zustimmung bitte einfach copy&paste EU-DSGVO OK! in Ihre Bewerbung kopieren.

Mit dem Übersenden Ihres CVs im Rahmen Ihrer Bewerbung auf diesem Portal und/oder per Email erklären Sie sich damit einverstanden, dass wir Ihr Profil mit Ihren persönlichen Daten für unsere weitere Zusammenarbeit bei uns aufnehmen. Eine Weitergabe Ihrer Daten und Vorstellung bei unseren Kunden erfolgt selbstverständlich nur mit Ihrem Einverständnis und nach Rücksprache mit Ihnen.
Sollten Sie keine weiteren E-Mails und/oder die Löschung Ihrer Daten von uns wünschen, schreiben Sie eine E-Mail an angebotsabmeldung mit dem Betreff « Abmelden ». Wir respektieren Ihr Recht auf Privatsphaere. Lesen Sie hierzu unsere Richtlinien unter […]. Unsere Stelle für Datenschutz erreichen Sie unter datenschutz.