Data Engineer (m/w/d)

Goodman Masson; Hilden; Hybrid; EUR 70,000 - 110,000; Full time

Benefits offered by this job

Flexible Arbeitszeitgestaltung

2 Tage Home Office

Corporate Benefits

Jobrad

Job summary

Goodman Masson sucht eine/n Data Engineer (m/w/d) zur Weiterentwicklung einer modernen, cloudbasierten Datenplattform. Sie arbeiten an skalierbaren Pipelines, integrieren Quellsysteme und gestalten Lakehouse-Architektur aktiv mit.

Fokus liegt auf Python, PySpark, Spark, Delta Lake und einer robusten Datenqualität. Sie arbeiten eng mit Analytics-Teams zusammen, betreiben Monitoring, Automatisierung und Optimierung der Prozesse sowie eine enge, zweisprachige Zusammenarbeit in Deutsch/Englisch.

Qualifications

• Mehrjährige praktische Erfahrung im Data Engineering und produktive Datenlösungen.
• Fundierte Python- und PySpark-Kenntnisse sowie Verarbeitung großer Datenmengen mit Spark.
• Erfahrung mit Cloud-Architekturen, idealerweise AWS, und skalierbaren Datenplattformen.
• Kenntnisse von Lakehouse-Konzepten (Delta Lake) und Multi-Layer-Datenarchitekturen.
• Praxis in Kubernetes, Kafka oder Airflow und in datenmodellierter Software-Entwicklung.
• Analytische Herangehensweise, eigenverantwortliche Arbeitsweise und Team-Kommunikation auf Deutsch/Englisch.

Responsibilities

• Du entwickelst und optimierst skalierbare Pipelines für strukturierte und unstrukturierte Daten in einer Cloud-Umgebung.
• Du verantwortest Anbindung von Quellsystemen und entwickelst Integrationsprozesse für Batch- und Streaming-Daten.
• Du arbeitest an Lakehouse-Architektur mit und gestaltest Datenmodelle aktiv mit.
• Du setzt Datenverarbeitungsprozesse mit Python, PySpark und Spark um und optimierst deren Performance.
• Du sorgst für konsistente Datenaufbereitung über Verarbeitungsebenen hinweg und berücksichtigst Qualität und Verfügbarkeit.
• Du unterstützt Betrieb der Plattform und automatisierst Prozesse, monitorst und optimierst weiter.
• Zusammen mit Analytics-Teams erarbeitest Du Lösungen, um Daten nutzbar zu machen.

Skills

Data Engineering

Python

PySpark

Apache Spark

Cloud-Architektur

Delta Lake

Datenmodellierung

Git-Workflows

Architektur-Entscheidungen

Kubernetes

Kafka

Airflow

Englisch/Deutsch

Tools

Python

PySpark

Apache Spark

Delta Lake

Kubernetes

Kafka

Airflow

Git

Job description

Data Engineer (m/w/d)

Für eine etablierte internationale Unternehmensgruppe suchen wir einen Data Engineer (m/w/d), der die Weiterentwicklung einer modernen, cloudbasierten Datenplattform aktiv mitgestaltet.

Im Mittelpunkt der Position stehen die Entwicklung leistungsfähiger Datenarchitekturen, die Integration unterschiedlicher Datenquellen sowie der Aufbau skalierbarer Datenverarbeitungsprozesse. Die bestehende Plattform basiert auf einer modernen Lakehouse-Architektur und bildet die technologische Grundlage für datengetriebene Anwendungen, Analytics und Reporting.

Gesucht wird eine technisch versierte Persönlichkeit, die nicht nur Datenpipelines entwickelt, sondern Verantwortung für deren Stabilität, Qualität und kontinuierliche Optimierung übernimmt. Dabei arbeitest Du eng mit anderen Engineering-Teams und verschiedenen Fachbereichen zusammen.

Deine Aufgaben

• Du entwickelst und optimierst skalierbare Datenpipelines für die Verarbeitung strukturierter und unstrukturierter Daten in einer cloudbasierten Umgebung.
• Du verantwortest die technische Anbindung unterschiedlicher Quellsysteme und entwickelst zuverlässige Integrationsprozesse für Batch- und Streaming-Daten.
• Du arbeitest an der Weiterentwicklung einer modernen Lakehouse-Architektur und gestaltest die zugrunde liegenden Datenmodelle und Verarbeitungsstrukturen aktiv mit.
• Du setzt komplexe Datenverarbeitungsprozesse mit Python, PySpark und Apache Spark um und optimierst diese hinsichtlich Performance, Skalierbarkeit und Wartbarkeit.
• Du stellst eine konsistente Datenaufbereitung über verschiedene Verarbeitungsebenen hinweg sicher und berücksichtigst dabei Anforderungen an Datenqualität und Verfügbarkeit.
• Du unterstützt den stabilen Betrieb der Datenplattform und entwickelst bestehende Prozesse durch Automatisierung, Monitoring und technische Optimierungen weiter.
• Gemeinsam mit Analytics-Teams und Fachbereichen erarbeitest Du technische Lösungen, um Daten für unterschiedliche Anwendungsfälle effizient nutzbar zu machen.

Dein Profil

• Du verfügst über mehrjährige praktische Erfahrung im Data Engineering und hast bereits produktive Datenlösungen entwickelt und betreut.
• Du besitzt fundierte Kenntnisse in Python und PySpark sowie Erfahrung mit der Verarbeitung größerer Datenmengen auf Basis von Apache Spark.
• Du kennst Dich mit modernen Cloud-Architekturen aus, idealerweise auf AWS, und verstehst die technischen Anforderungen skalierbarer Datenplattformen.
• Du hast Erfahrung mit Lakehouse-Konzepten, beispielsweise auf Basis von Delta Lake, sowie mit mehrstufigen Datenarchitekturen wie der Medallion Architecture.
• Technologien wie Kubernetes, Apache Kafka oder Apache Airflow sind Dir aus der Praxis bekannt oder Du hast bereits mit vergleichbaren Lösungen gearbeitet.
• Du bringst ein gutes Verständnis für Datenmodellierung, objektorientierte Programmierung und etablierte Software-Engineering-Prinzipien mit.
• Du arbeitest routiniert mit Git-basierten Entwicklungsprozessen und legst Wert auf nachvollziehbaren, wartbaren Code.
• Du gehst technische Herausforderungen analytisch an, arbeitest eigenverantwortlich und bringst Dich aktiv in Architektur- und Technologieentscheidungen ein.
• Du kannst Dich sowohl auf Deutsch als auch auf Englisch sicher mit technischen und fachlichen Ansprechpartnern austauschen.

Arbeitsumfeld

• Unbefristete Festanstellung in Vollzeit innerhalb einer etablierten Unternehmensgruppe
• Zusammenarbeit in einem agilen, interdisziplinären Umfeld mit kurzen Entscheidungswegen
• Flexible Arbeitszeitgestaltung und 2 Tage HO
• Individuelle fachliche und persönliche Entwicklungsmöglichkeiten
• Zusätzliche Benefits, wie Corporate Benefits, Jobrad etc.

Goodman Masson Diversity & Inclusion Statement

Goodman Masson fördert als Arbeitgeber die Chancengleichheit und verpflichtet sich dazu, einen ganzheitlichen Ansatz von Diversity, Inclusion & Respect zu verfolgen. Diesen Grundsatz leben wir intern mit unseren MitarbeiterInnen, aber auch extern haben wir den Anspruch, der Gleichberechtigung während aller Entscheidungsprozesse gerecht zu werden. Als Personalberatung, die sowohl auf Kunden- als auch KandidatInnenseite agiert, ist es uns wichtig, allen BewerberInnen ohne Bias zu begegnen. Um mehr über unseren D&I Ansatz bei Goodman Masson zu erfahren, klicken Sie hier: https://www.goodmanmasson.de/diversity-inclusion-respect/

Hinweis zur Bewerbungsbearbeitung

Bitte beachten Sie, dass wir nur Bewerbungen berücksichtigen können, die in die nächste Phase des Auswahlprozesses übergehen. Sollten Sie innerhalb von zwei Wochen nach Eingang Ihrer Bewerbung keine Rückmeldung von uns erhalten, bedeutet dies, dass Ihre Bewerbung in diesem Auswahlprozess leider nicht berücksichtigt werden konnte. Dies spiegelt keinesfalls eine Bewertung Ihrer Qualifikationen oder Fähigkeiten wider, sondern ist durch die hohe Anzahl an Bewerbungen und die spezifischen Anforderungen der Position bedingt. Ihre Bewerbung wird jedoch in unserem Talentpool gespeichert, und wir kommen auf Sie zu, sollte sich zukünftig eine passende Gelegenheit für Sie ergeben.