Senior Data Engineer - Data Platform Architecture (m / w / d)

E.ON Grid Solutions GmbH; Essen; Vor Ort; EUR 60.000 - 80.000; Vollzeit

Zusammenfassung

Ein führendes Unternehmen im Energiebereich sucht einen engagierten Datenintegrator, der die Integration von Datenquellen und die Entwicklung von ETL-Pipelines für das neue Produkt innerhalb der iPEN-Plattform verantwortet. Erforderliche Kompetenzen umfassen Azure-Technologien sowie Erfahrung in Python und Datenpipeline-Management. Der ideale Kandidat kommuniziert klar und beherrscht fließend Deutsch und Englisch.

Qualifikationen

• Fundierte Kenntnisse im Microsoft Azure Technologie-Stack erforderlich.
• Mehrjährige Erfahrung mit Python, Scala, SQL, Spark und Databricks in cloud-nativen Projekten.
• Erfahrung im Management von Datenextraktionspipelines.

Aufgaben

• Unterstützt alle Datenintegrationsaktivitäten für das neue Produkt.
• Gestaltet den Prozess zur Anbindung der Quellsysteme.
• Implementiert ETL-Pipelines zur Datenextraktion.
• Verantwortet den stabilen und zuverlässigen Betrieb der Datenpipelines.

Kenntnisse

Azure-Erfahrung

Python

Scala

SQL

Spark

Databricks

Analytisches Denken

Kommunikation

Datenintegrationsaktivitäten

Tools

Azure Data Factory

Jobbeschreibung

Stellenbeschreibung

Die Informationsplattform Energienetze (iPEN) stellt sicher, dass die Daten der regionalen Verteilnetzbetreiber zentral gebündelt und verfügbar gemacht werden können. Du unterstützt uns dabei, das neue Produkt „Business Insights Hub“ innerhalb von iPEN aufzubauen – eine Kombination aus Standardreporting und KI-basiertem Process Reporting & Mining. Dieses Produkt ermöglicht den Verteilnetzbetreibern, Dashboards für vielfältige Analysen von Businessprozessen auf einer einheitlichen Datenbasis zu betreiben. So steigern wir Effizienz und Transparenz und schaffen die Grundlage für daten- und faktenbasierte Entscheidungen in der gesamten Netz-Community.

Eine Aufgabe, die Dich herausfordert :

• Datenintegration : Du unterstützt alle Datenintegrationsaktivitäten für das neue Produkt innerhalb der bestehenden iPEN-Plattform (Databricks, Unity Catalog).
• Quellsystemanbindung : Du gestaltest den Prozess zur Anbindung der Quellsysteme und begleitest die Transformation in das gemeinsame Datenmodell.
• Enablement : Du befähigst die Data Engineers der Netzbetreiber, aktiv zur ETL-Codebasis beizutragen und förderst die Wiederverwendung von Code.
• Pipeline-Entwicklung : Du implementierst ETL-Pipelines zur Datenextraktion und sorgst für deren Effizienz.
• Betriebssicherheit : Du verantwortest den stabilen und zuverlässigen Betrieb der Datenpipelines.

Ein Background, der überzeugt :

• Azure-Erfahrung : Du bringst fundierte Kenntnisse im Microsoft Azure Technologie-Stack mit, insbesondere in Azure Data Factory und Azure Databricks.
• Entwicklungskompetenz : Du hast mehrjährige Erfahrung mit Python, Scala, SQL, Spark und Databricks in cloud-nativen Projekten.
• Pipeline-Know-how : Du hast nachweislich Erfahrung im Management von Datenextraktionspipelines.
• Analytisches Denken : Du arbeitest strukturiert, denkst analytisch und organisierst komplexe Aufgaben souverän.
• Kommunikation : Du kommunizierst klar, erstellst überzeugende Konzepte und sprichst fließend Deutsch und Englisch.

Inklusion

Uns ist wichtig, Menschen mit Behinderung ein faires Bewerbungsverfahren zu ermöglichen, in dem sie ihr Bestes zeigen können. Daher wird unsere Schwerbehindertenvertretung frühzeitig in das Verfahren einbezogen. Bitte teile uns über das Bewerbungsformular mit, ob du technische oder organisatorische Anpassungen für das Bewerbungsverfahren benötigst. Wir stellen diese gern zur Verfügung.

Wenn es dir nicht möglich ist, dich online zu bewerben und du stattdessen mit jemandem sprechen möchtest, kontaktiere bitte deinen lokalen Recruiter.