Senior Data Engineer - Data Platform Architecture (m / w / d)

E.ON Grid Solutions GmbH; Münster; Vor Ort; EUR 60.000 - 80.000; Vollzeit

Zusammenfassung

Ein führendes Unternehmen im Energiebereich sucht einen engagierten Mitarbeiter (m/w/d) zur Unterstützung beim Aufbau des Business Insights Hub. In dieser Rolle werden Sie Datenintegrationsaktivitäten durchführen, ETL-Pipelines implementieren und den stabilen Betrieb der Datenpipelines sicherstellen. Fundierte Kenntnisse im Microsoft Azure Technologie-Stack sowie Erfahrung mit Python und SQL sind erforderlich. Das Unternehmen fördert ein faires Bewerbungsverfahren für Menschen mit Behinderung.

Qualifikationen

• Fundierte Kenntnisse im Microsoft Azure Technologie-Stack erforderlich.
• Erfahrung mit Python, Scala, SQL, Spark und Databricks in cloud-nativen Projekten erforderlich.
• Nachweisliche Erfahrung im Management von Datenextraktionspipelines notwendig.

Aufgaben

• Unterstützen der Datenintegrationsaktivitäten für das neue Produkt.
• Gestalten des Prozesses zur Anbindung der Quellsysteme.
• Implementieren von ETL-Pipelines zur Datenextraktion.

Kenntnisse

Azure Data Factory

Python

SQL

Scala

Spark

Databricks

Analytisches Denken

Fließend Deutsch

Fließend Englisch

Tools

Microsoft Azure

Data-Pipelines Management

Jobbeschreibung

Stellenbeschreibung

Die Informationsplattform Energienetze (iPEN) stellt sicher, dass die Daten der regionalen Verteilnetzbetreiber zentral gebündelt und verfügbar gemacht werden können. Du unterstützt uns dabei, das neue Produkt „Business Insights Hub“ innerhalb von iPEN aufzubauen – eine Kombination aus Standardreporting und KI-basiertem Process Reporting & Mining. Dieses Produkt ermöglicht den Verteilnetzbetreibern, Dashboards für vielfältige Analysen von Businessprozessen auf einer einheitlichen Datenbasis zu betreiben. So steigern wir Effizienz und Transparenz und schaffen die Grundlage für daten- und faktenbasierte Entscheidungen in der gesamten Netz-Community.

Eine Aufgabe, die Dich herausfordert

• Datenintegration : Du unterstützt alle Datenintegrationsaktivitäten für das neue Produkt innerhalb der bestehenden iPEN-Plattform (Databricks, Unity Catalog).
• Quellsystemanbindung : Du gestaltest den Prozess zur Anbindung der Quellsysteme und begleitest die Transformation in das gemeinsame Datenmodell.
• Enablement : Du befähigst die Data Engineers der Netzbetreiber, aktiv zur ETL-Codebasis beizutragen und förderst die Wiederverwendung von Code.
• Pipeline-Entwicklung : Du implementierst ETL-Pipelines zur Datenextraktion und sorgst für deren Effizienz.
• Betriebssicherheit : Du verantwortest den stabilen und zuverlässigen Betrieb der Datenpipelines.

Ein Background, der überzeugt

• Azure-Erfahrung : Du bringst fundierte Kenntnisse im Microsoft Azure Technologie-Stack mit, insbesondere in Azure Data Factory und Azure Databricks.
• Entwicklungskompetenz : Du hast mehrjährige Erfahrung mit Python, Scala, SQL, Spark und Databricks in cloud-nativen Projekten.
• Pipeline-Know-how : Du hast nachweislich Erfahrung im Management von Datenextraktionspipelines.
• Analytisches Denken : Du arbeitest strukturiert, denkst analytisch und organisierst komplexe Aufgaben souverän.
• Kommunikation : Du kommunizierst klar, erstellst überzeugende Konzepte und sprichst fließend Deutsch und Englisch.

Inklusion

Uns ist wichtig, Menschen mit Behinderung ein faires Bewerbungsverfahren zu ermöglichen, in dem sie ihr Bestes zeigen können. Daher wird unsere Schwerbehindertenvertretung frühzeitig in das Verfahren einbezogen. Bitte teile uns über das Bewerbungsformular mit, ob du technische oder organisatorische Anpassungen für das Bewerbungsverfahren benötigst. Wir stellen diese gern zur Verfügung. Wenn es dir nicht möglich ist, dich online zu bewerben und du stattdessen mit jemandem sprechen möchtest, kontaktiere bitte deinen lokalen Recruiter.