Senior Data Engineer - Data Platform Architecture (m / w / d)

E.ON Grid Solutions GmbH; Dortmund; Vor Ort; EUR 55.000 - 70.000; Vollzeit

Zusammenfassung

Ein führendes Unternehmen im Energiebereich sucht einen Cloud-Datenintegrator zur Unterstützung des neuen Produkts „Business Insights Hub“. In dieser Rolle optimieren Sie Datenintegrationsaktivitäten, gestalten Prozesse zur Quellsystemanbindung und implementieren effiziente ETL-Pipelines. Voraussetzung sind fundierte Kenntnisse im Azure Stack und mehrjährige Erfahrung in cloud-nativen Projekten. Fließende Deutsch- und Englischkenntnisse sind erforderlich.

Qualifikationen

• Fundierte Kenntnisse im Microsoft Azure Technologie-Stack.
• Mehrjährige Erfahrung mit Python, Scala, SQL, Spark, Databricks.
• Erfahrung im Management von Datenextraktionspipelines.

Aufgaben

• Unterstützung aller Datenintegrationsaktivitäten für das neue Produkt.
• Gestaltung des Prozesses zur Anbindung der Quellsysteme.
• Implementierung von ETL-Pipelines zur Datenextraktion.

Kenntnisse

Azure Data Factory

Azure Databricks

Python

Scala

SQL

Spark

Datenintegration

Analytisches Denken

Kommunikation

Jobbeschreibung

Stellenbeschreibung

Die Informationsplattform Energienetze (iPEN) stellt sicher, dass die Daten der regionalen Verteilnetzbetreiber zentral gebündelt und verfügbar gemacht werden können. Du unterstützt uns dabei, das neue Produkt „Business Insights Hub“ innerhalb von iPEN aufzubauen – eine Kombination aus Standardreporting und KI-basiertem Process Reporting & Mining. Dieses Produkt ermöglicht den Verteilnetzbetreibern, Dashboards für vielfältige Analysen von Businessprozessen auf einer einheitlichen Datenbasis zu betreiben. So steigern wir Effizienz und Transparenz und schaffen die Grundlage für daten- und faktenbasierte Entscheidungen in der gesamten Netz-Community.

Eine Aufgabe, die Dich herausfordert

• Datenintegration : Du unterstützt alle Datenintegrationsaktivitäten für das neue Produkt innerhalb der bestehenden iPEN-Plattform (Databricks, Unity Catalog).
• Quellsystemanbindung : Du gestaltest den Prozess zur Anbindung der Quellsysteme und begleitest die Transformation in das gemeinsame Datenmodell.
• Enablement : Du befähigst die Data Engineers der Netzbetreiber, aktiv zur ETL-Codebasis beizutragen und förderst die Wiederverwendung von Code.
• Pipeline-Entwicklung : Du implementierst ETL-Pipelines zur Datenextraktion und sorgst für deren Effizienz.
• Betriebssicherheit : Du verantwortest den stabilen und zuverlässigen Betrieb der Datenpipelines.

Ein Background, der überzeugt

• Azure-Erfahrung : Du bringst fundierte Kenntnisse im Microsoft Azure Technologie-Stack mit, insbesondere in Azure Data Factory und Azure Databricks.
• Entwicklungskompetenz : Du hast mehrjährige Erfahrung mit Python, Scala, SQL, Spark und Databricks in cloud-nativen Projekten.
• Pipeline-Know-how : Du hast nachweislich Erfahrung im Management von Datenextraktionspipelines.
• Analytisches Denken : Du arbeitest strukturiert, denkst analytisch und organisierst komplexe Aufgaben souverän.
• Kommunikation : Du kommunizierst klar, erstellst überzeugende Konzepte und sprichst fließend Deutsch und Englisch.

Inklusion

Uns ist wichtig, Menschen mit Behinderung ein faires Bewerbungsverfahren zu ermöglichen, in dem sie ihr Bestes zeigen können. Daher wird unsere Schwerbehindertenvertretung frühzeitig in das Verfahren einbezogen. Bitte teile uns über das Bewerbungsformular mit, ob du technische oder organisatorische Anpassungen für das Bewerbungsverfahren benötigst. Wir stellen diese gern zur Verfügung. Wenn es dir nicht möglich ist, dich online zu bewerben und du stattdessen mit jemandem sprechen möchtest, kontaktiere bitte deinen lokalen Recruiter.