Senior Data Engineer

NovaSearch GmbH

Deutschland

Vor Ort

EUR 90.000 - 140.000

Vollzeit

14 Tage+

Eine vollständige Bewerbung in einer Minute

Maßgeschneiderter Lebenslauf und Anschreiben – versandbereit.

Schaffe es an den ATS-Filtern vorbei

Zusammenfassung

NovaSearch GmbH sucht eine/n erfahrene/n Data Engineer Lead, der die Datenplattformstrategie mitgestaltet und ETL-/ELT-Pipelines von Grund auf entwirft. Sie arbeiten an skalierbaren Architekturen, Optimierung und technischer Gesamtverantwortung im öffentlichen Sektor.

Sie bringen mehrjährige Führungserfahrung, Expertenwissen in Batch- und Streaming-Verarbeitung sowie tiefgehende SQL- und Programmierskills (Python/Java) mit. Deutsch- und Englischkenntnisse sind erforderlich.

Qualifikationen

  • Mehrjährige Berufserfahrung im Data Engineering, idealerweise in einer führenden Rolle.
  • Nachweisbare Expertise beim Design und der Entwicklung skalierbarer ETL-/ELT-Pipelines.
  • Erfahrung mit Batch- und Streaming-Verarbeitung.
  • Praxis mit modernen Data-Stack-Technologien (z. B. dbt, S3).
  • Sehr gutes Verständnis von Datenarchitektur, Skalierbarkeit und Wartbarkeit.
  • Ausgeprägte SQL-Kenntnisse und Programmierkenntnisse (Python/Java).
  • Erfahrung in der Entwicklung von End-to-End-Datenpipelines ohne vorgefertigte Frameworks.
  • Umgang mit vertraulichen und sicherheitskritischen Daten.
  • Sehr gute Deutsch- und Englischkenntnisse.

Aufgaben

  • Technische Führung der Data-Engineering-Themen im Projekt.
  • Konzeption, Entwicklung und Optimierung von ETL-/ELT-Pipelines und Datenarchitekturen.
  • Sicherstellen von Skalierbarkeit, Performance und Wartbarkeit der Pipelines.
  • Definition von Best Practices für Pipeline-Design, Testing, Monitoring und Betrieb.
  • Code Reviews und Architekturbewertungen zur Einhaltung technischer Standards.
  • Hands-on Engineering mit Cloudera-/Apache-Stack und modernem Data-Stack.
  • Gewährleistung von Data Governance, Zugriffskontrollen und Datenschutz über den Lebenszyklus der Daten.

Kenntnisse

SQL
Python
Java
Data Engineering
ETL/ELT
Batch- und Streaming-Verarbeitung
dbt
S3/Object Storage
Code Reviews
Performance-Optimierung

Tools

Cloudera
Apache-Ökosystem
Cloudera-/Apache-Stack

Jobbeschreibung

Gestalte die Datenplattform von morgen – mit technischer Verantwortung und echtem Impact im öffentlichen Sektor.

Deine Rolle

Du möchtest nicht einfach bestehende Dateninfrastrukturen betreuen, sondern Data Engineering strategisch gestalten und zukunftsfähige Datenplattformen von Grund auf entwickeln?

Deine Aufgaben
  • Technische Führung: Du steuerst die Data-Engineering-Themen im Projekt, treibst strategische Entscheidungen voran und übernimmst die technische Gesamtverantwortung für diesen Bereich.
  • Entwicklung & Architektur: Du konzipierst, entwickelst und optimierst ETL-/ELT-Pipelines sowie skalierbare Datenarchitekturen.
  • Skalierbarkeit & Performance: Du stellst sicher, dass Datenpipelines auch bei wachsenden Datenmengen und zusätzlichen Datenquellen effizient, performant und wartbar bleiben.
  • Engineering-Standards: Du definierst und etablierst Best Practices für Pipeline-Design, Testing, Monitoring, Betrieb und Performance.
  • Technische Qualität: Du verantwortest Code Reviews, bewertest Architekturänderungen und stellst die Einhaltung technischer Qualitätsstandards sicher.
  • Hands-on Engineering: Du arbeitest aktiv mit dem Cloudera-/Apache-Stack sowie modernen Data-Stack-Technologien.
  • Data Governance & Security: Du gewährleistest Datenqualität, Zugriffskontrolle, Datenschutz und Datensicherheit über den gesamten Datenlebenszyklus hinweg.
Das bringst du mit
  • Mehrjährige fundierte Berufserfahrung im Data Engineering sowie Erfahrung in einer technisch führenden Rolle.
  • Nachweisbare Expertise im Design und in der Entwicklung skalierbarer ETL-/ELT-Pipelines.
  • Erfahrung mit Batch- und Streaming-Verarbeitung.
  • Praxiserfahrung mit modernen Data-Stack-Technologien, beispielsweise dbt und S3/Object Storage.
  • Sehr gutes Verständnis von Datenarchitektur, Skalierbarkeit, Wartbarkeit und modernen Data-Engineering-Praktiken.
  • Sehr gute SQL-Kenntnisse sowie fundierte Programmierkenntnisse, idealerweise in Python und/oder Java.
  • Erfahrung mit Code Reviews, Engineering-Standards und Performance-Optimierung.
  • Die Fähigkeit, technische Themen eigenständig zu verantworten, Entscheidungen zu treffen und Lösungen hands-on umzusetzen.
  • Erfahrung in der Entwicklung individueller Datenpipelines von Grund auf – auch ohne vorgefertigte Frameworks oder spezifische Cloud-Funktionalitäten.
  • Erfahrung in der Verarbeitung unterschiedlichster Datenformate, beispielsweise tabellarischer Daten, JSON, Texten, Bildern und weiteren unstrukturierten Daten.
  • Erfahrung im Umgang mit vertraulichen, sicherheitskritischen und personenbezogenen Daten.
  • Sehr gute Deutsch- und Englischkenntnisse.

Nice to have: Kenntnisse im Cloudera-Tooling und im Apache-Ökosystem. Diese sind von Vorteil, aber keine Voraussetzung.

Hol dir deinen kostenlosen, vertraulichen Lebenslauf-Check.

oder ziehe deine Datei hierhin.

Similar jobs

Ähnliche Jobs, die dir auch gefallen könnten

Senior Data Engineer (m/w/d) Data Platform & Cloud Native
Senior Data Engineer (m/w/d) Data Platform & Cloud Native

Aconext • Dresden

Vor Ort
EUR 70.000 - 110.000
Data Engineer (m/w/d)
Data Engineer (m/w/d)

EUROPART Holding GmbH • Hagen

Vor Ort
EUR 65.000 - 95.000
Senior Data/Software Engineer
Senior Data/Software Engineer

Tenth Revolution Group • München

Remote
EUR 70.000 - 120.000
Senior Data Engineer (m/w/d)
Senior Data Engineer (m/w/d)

Aconext • Dresden

Vor Ort
EUR 70.000 - 100.000
Senior Data Engineer (m/w/d)
Senior Data Engineer (m/w/d)

Employer Brand Anchor • Berlin

Hybrid
EUR 70.000 - 110.000
Attraktive Vergütung
Hybrides Arbeiten
30 Urlaubstage
+4
Data Platform Engineer (m/w/d)
Data Platform Engineer (m/w/d)

Employer Brand Anchor • Berlin

Hybrid
EUR 70.000 - 110.000
Hybrides Arbeiten
Unbefristeter Vertrag
30 Urlaubstage
+3
Senior Data Engineer (m/w/d)
Senior Data Engineer (m/w/d)

Angeheuert • Berlin

Hybrid
EUR 65.000 - 95.000
Leistungsgerechtes Gehalt
Hybrides Arbeiten
30 Urlaubstage
+4
IT Solution Architect (w/d/m) - Data Architecture
IT Solution Architect (w/d/m) - Data Architecture

EWE VERTRIEB GmbH • Berlin

Vor Ort
EUR 90.000 - 125.000
Engineering Lead - Supply Chain Data Platform (m/w/d)
Engineering Lead - Supply Chain Data Platform (m/w/d)

Schwarz Digits • Bad Friedrichshall

Vor Ort
EUR 90.000 - 130.000
Senior Software & Data Engineer (m/w/d)
Senior Software & Data Engineer (m/w/d)

EDAG Group • Ingolstadt

Vor Ort
EUR 70.000 - 110.000