Senior Data Engineer - Entwicklung & Optimierung / Technische Governance (a*)

Hamburger Energienetze GmbH; Hamburg; Vor Ort; EUR 80.000 - 105.000; Vollzeit

Benefits dieser Stelle

Flexible Arbeitszeiten

Attraktive Sonderzahlungen

Beruf & Familie

Weiterbildung & Qualifizierung

Kantine

Zusammenfassung

Hamburger Energienetze GmbH sucht eine/n Data Engineer, der/die komplexe Datenpipelines entwickelt, betreibt und optimiert – von der Datenerfassung bis zur analytischen Nutzung. Du setzt das Framework der Data-Analytics-Plattform in der Praxis um, entwickelst es fachlich weiter und bringst Verbesserungsvorschläge aus dem operativen Betrieb ein.

Du wirkst bei Architekturentscheidungen beratend mit, bewertest technische Optionen und unterstützt die Weiterentwicklung der Zielarchitektur.

Qualifikationen

• Technischer Hochschulabschluss mit Berufserfahrung im Data Engineering.
• Sehr gute Python-, PySpark- und SQL-Kenntnisse; Bash-Grundkenntnisse vorteilhaft.
• Fundierte Praxis in Azure, Databricks und modernen Cloud-Analytics-Stacks; Testing und Datenqualität.

Aufgaben

• Entwicklung, Betrieb und Optimierung komplexer Datenpipelines und Datenprodukte.
• Praxisnahe Umsetzung des Data-Analytics-Plattform-Frameworks und Einbringung von Verbesserungen.
• Beratung bei Architekturentscheidungen und Unterstützung der Zielarchitektur.
• Sicherstellung von Datenqualität, Testing, Sicherheit, Stabilität und Governance.
• Enge Zusammenarbeit mit Data Engineers, Analytics Engineers, Data Analysts und dem Product Owner.

Kenntnisse

Python

PySpark

SQL

Bash-Grundkenntnisse

Agile Methoden

Cloud-Analytics-Stacks

Data-Warehouse-Architektur

Data-Lakehouse-Architektur

Deutschkenntnisse

Teamkoordination

Ausbildung

Technischer Hochschulabschluss

Tools

Azure

Databricks

Testing-Tools

Jobbeschreibung

• Zu deinen Hauptaufgaben gehört die Entwicklung, der Betrieb und die Optimierung komplexer Datenpipelines und Datenprodukte – von der Datenerfassung bis zur analytischen Nutzung.
• Du setzt unser bestehendes Framework der Data-Analytics-Plattform in der Praxis um, entwickelst es fachlich weiter und bringst Verbesserungsvorschläge aus dem operativen Betrieb ein.
• Zudem wirkst du bei Architekturentscheidungen fachlich beratend mit, bewertest technische Optionen und unterstützt die Weiterentwicklung der Zielarchitektur.
• Du stellst Datenqualität, Testbarkeit, Sicherheit und Stabilität sicher und unterstützt das Metadatenmanagement, Datenkataloge sowie die technische Governance.
• Darüber hinaus arbeitest du eng mit anderen Data Engineers, Analytics Engineers, Data Analysts und dem Product Owner zusammen und gibst fachliche Orientierung im Team.

Was du bewegst

• Zu deinen Hauptaufgaben gehört die Entwicklung, der Betrieb und die Optimierung komplexer Datenpipelines und Datenprodukte – von der Datenerfassung bis zur analytischen Nutzung.
• Du setzt unser bestehendes Framework der Data-Analytics-Plattform in der Praxis um, entwickelst es fachlich weiter und bringst Verbesserungsvorschläge aus dem operativen Betrieb ein.
• Zudem wirkst du bei Architekturentscheidungen fachlich beratend mit, bewertest technische Optionen und unterstützt die Weiterentwicklung der Zielarchitektur.
• Du stellst Datenqualität, Testbarkeit, Sicherheit und Stabilität sicher und unterstützt das Metadatenmanagement, Datenkataloge sowie die technische Governance.
• Darüber hinaus arbeitest du eng mit anderen Data Engineers, Analytics Engineers, Data Analysts und dem Product Owner zusammen und gibst fachliche Orientierung im Team.

Was dich auszeichnet

• Du hast einen technischen Hochschul- oder Fachhochschulabschluss und bringst einschlägige Berufserfahrung im Bereich Data Engineering mit.
• Zudem verfügst du über sehr gute Kenntnisse in Python, idealerweise in PySpark, und SQL; Grundkenntnisse in Bash sind von Vorteil.
• Fundierte Praxiserfahrung mit Azure, Databricks und modernen Cloud-Analytics-Stacks sowie Kenntnisse in Data-Warehouse- und Lakehouse-Architekturen einschließlich Testing und Datenqualitätssicherung bringst du mit.
• Eine eigenständige und verantwortungsbewusste Arbeitsweise, Erfahrung in agilen Arbeitsumgebungen sowie sehr gute Deutschkenntnisse runden dein Profil ab.

Was du bekommst

• Flexibles Arbeiten
• Attraktive Sonderzahlungen
• Beruf & Familie
• Weiterbildung & Qualifizierung
• Kantine