Data Engineer (m/w/d)

Goodman Masson Deutschland; Hilden; Hybrid; EUR 70,000 - 90,000; Full time

Benefits offered by this job

Unbefristete Festanstellung

Flexible Arbeitszeiten

2 Tage Home-Office

Entwicklungsmöglichkeiten

Corporate Benefits

Job summary

Goodman Masson Deutschland sucht einen Data Engineer (m/w/d) zur Weiterentwicklung einer cloudbasierten Datenplattform. Fokus liegt auf skalierbaren Pipelines, Datenintegration und der Optimierung von Performance und Stabilität.

Sie arbeiten eng mit Engineering-Teams und Fachbereichen zusammen, bringen Erfahrung mit Lakehouse-Ansätzen und modernen Cloud-Architekturen mit und unterstützen den Betrieb der Plattform durch Automatisierung und Monitoring.

Qualifications

• Mehrjährige praktische Erfahrung im Data Engineering.
• Fundierte Python- und PySpark-Kenntnisse.
• Erfahrung mit großen Datenmengen und Apache Spark.
• Erfahrung mit Cloud-Architekturen, ideal AWS.
• Kenntnisse Lakehouse-Konzepte, Delta Lake, Medallion Architecture.
• Praxis mit Kubernetes, Kafka oder Airflow.
• Gutes Verständnis von Datenmodellierung und Software-Engineering-Prinzipien.
• Routinierte Git-Arbeitsprozesse, nachvollziehbarer Code.

Responsibilities

• Skalierbare Datenpipelines für strukturierte und unstrukturierte Daten in cloudbasierter Umgebung.
• Technische Anbindung von Quellsystemen; Integration von Batch- und Streaming-Daten.
• Weiterentwicklung der Lakehouse-Architektur und Mitgestaltung der Datenmodelle.
• Umsetzung komplexer Datenverarbeitungsprozesse mit Python, PySpark, Spark.
• Sicherstellung konsistenter Datenaufbereitung über Verarbeitungsebenen; Datenqualität.
• Unterstützung des Betriebs der Plattform; Automatisierung, Monitoring, Optimierung.
• Zusammenarbeit mit Analytics-Teams; technische Lösungen für Anwendungsfälle.

Skills

Python

PySpark

Apache Spark

Delta Lake

Lakehouse

AWS

Kubernetes

Kafka

Airflow

Git

Datenmodellierung

OO-Programmierung

Tools

Kubernetes

Kafka

Airflow

Git

Delta Lake

Apache Spark

AWS

Job description

Für eine etablierte internationale Unternehmensgruppe suchen wir einen Data Engineer (m/w/d), der die Weiterentwicklung einer modernen, cloudbasierten Datenplattform aktiv mitgestaltet.

Im Mittelpunkt der Position stehen die Entwicklung leistungsfähiger Datenarchitekturen, die Integration unterschiedlicher Datenquellen sowie der Aufbau skalierbarer Datenverarbeitungsprozesse. Die bestehende Plattform basiert auf einer modernen Lakehouse-Architektur und bildet die technologische Grundlage für datengetriebene Anwendungen, Analytics und Reporting.

Gesucht wird eine technisch versierte Persönlichkeit, die nicht nur Datenpipelines entwickelt, sondern Verantwortung für deren Stabilität, Qualität und kontinuierliche Optimierung übernimmt. Dabei arbeitest Du eng mit anderen Engineering-Teams und verschiedenen Fachbereichen zusammen.

Deine Aufgaben

Data Engineer (m/w/d)

Für eine etablierte internationale Unternehmensgruppe suchen wir einen Data Engineer (m/w/d), der die Weiterentwicklung einer modernen, cloudbasierten Datenplattform aktiv mitgestaltet.

Im Mittelpunkt der Position stehen die Entwicklung leistungsfähiger Datenarchitekturen, die Integration unterschiedlicher Datenquellen sowie der Aufbau skalierbarer Datenverarbeitungsprozesse. Die bestehende Plattform basiert auf einer modernen Lakehouse-Architektur und bildet die technologische Grundlage für datengetriebene Anwendungen, Analytics und Reporting.

Gesucht wird eine technisch versierte Persönlichkeit, die nicht nur Datenpipelines entwickelt, sondern Verantwortung für deren Stabilität, Qualität und kontinuierliche Optimierung übernimmt. Dabei arbeitest Du eng mit anderen Engineering-Teams und verschiedenen Fachbereichen zusammen.

• Du entwickelst und optimierst skalierbare Datenpipelines für die Verarbeitung strukturierter und unstrukturierter Daten in einer cloudbasierten Umgebung.
• Du verantwortest die technische Anbindung unterschiedlicher Quellsysteme und entwickelst zuverlässige Integrationsprozesse für Batch- und Streaming-Daten.
• Du arbeitest an der Weiterentwicklung einer modernen Lakehouse-Architektur und gestaltest die zugrunde liegenden Datenmodelle und Verarbeitungsstrukturen aktiv mit.
• Du setzt komplexe Datenverarbeitungsprozesse mit Python, PySpark und Apache Spark um und optimierst diese hinsichtlich Performance, Skalierbarkeit und Wartbarkeit.
• Du stellst eine konsistente Datenaufbereitung über verschiedene Verarbeitungsebenen hinweg sicher und berücksichtigst dabei Anforderungen an Datenqualität und Verfügbarkeit.
• Du unterstützt den stabilen Betrieb der Datenplattform und entwickelst bestehende Prozesse durch Automatisierung, Monitoring und technische Optimierungen weiter.
• Gemeinsam mit Analytics-Teams und Fachbereichen erarbeitest Du technische Lösungen, um Daten für unterschiedliche Anwendungsfälle effizient nutzbar zu machen.

Dein Profil

• Du verfügst über mehrjährige praktische Erfahrung im Data Engineering und hast bereits produktive Datenlösungen entwickelt und betreut.
• Du besitzt fundierte Kenntnisse in Python und PySpark sowie Erfahrung mit der Verarbeitung größerer Datenmengen auf Basis von Apache Spark.
• Du kennst Dich mit modernen Cloud-Architekturen aus, idealerweise auf AWS, und verstehst die technischen Anforderungen skalierbarer Datenplattformen.
• Du hast Erfahrung mit Lakehouse-Konzepten, beispielsweise auf Basis von Delta Lake, sowie mit mehrstufigen Datenarchitekturen wie der Medallion Architecture.
• Technologien wie Kubernetes, Apache Kafka oder Apache Airflow sind Dir aus der Praxis bekannt oder Du hast bereits mit vergleichbaren Lösungen gearbeitet.
• Du bringst ein gutes Verständnis für Datenmodellierung, objektorientierte Programmierung und etablierte Software-Engineering-Prinzipien mit.
• Du arbeitest routiniert mit Git-basierten Entwicklungsprozessen und legst Wert auf nachvollziehbaren, wartbaren Code.
• Du gehst technische Herausforderungen analytisch an, arbeitest eigenverantwortlich und bringst Dich aktiv in Architektur- und Technologieentscheidungen ein.
• Du kannst Dich sowohl auf Deutsch als auch auf Englisch sicher mit technischen und fachlichen Ansprechpartnern austauschen.

Arbeitsumfeld

• Unbefristete Festanstellung in Vollzeit innerhalb einer etablierten Unternehmensgruppe
• Zusammenarbeit in einem agilen, interdisziplinären Umfeld mit kurzen Entscheidungswegen
• Flexible Arbeitszeitgestaltung und 2 Tage HO
• Individuelle fachliche und persönliche Entwicklungsmöglichkeiten
• Zusätzliche Benefits, wie Corporate Benefits, Jobrad etc.

Haben wir Dein Interesse geweckt?

Goodman Masson fördert als Arbeitgeber die Chancengleichheit und verpflichtet sich dazu, einen ganzheitlichen Ansatz von Diversity, Inclusion & Respect zu verfolgen. Diesen Grundsatz leben wir intern mit unseren MitarbeiterInnen, aber auch extern haben wir den Anspruch, der Gleichberechtigung während aller Entscheidungsprozesse gerecht zu werden. Als Personalberatung, die sowohl auf Kunden- als auch KandidatInnenseite agiert, ist es uns wichtig, allen BewerberInnen ohne Bias zu begegnen. Um mehr über unseren D&I Ansatz bei Goodman Masson zu erfahren, klicken Sie hier: https://www.goodmanmasson.de/diversity-inclusion-respect/

Bitte beachten Sie, dass wir nur Bewerbungen berücksichtigen können, die in die nächste Phase des Auswahlprozesses übergehen. Sollten Sie innerhalb von zwei Wochen nach Eingang Ihrer Bewerbung keine Rückmeldung von uns erhalten, bedeutet dies, dass Ihre Bewerbung in diesem Auswahlprozess leider nicht berücksichtigt werden konnte. Dies spiegelt keinesfalls eine Bewertung Ihrer Qualifikationen oder Fähigkeiten wider, sondern ist durch die hohe Anzahl an Bewerbungen und die spezifischen Anforderungen der Position bedingt. Ihre Bewerbung wird jedoch in unserem Talentpool gespeichert, und wir kommen auf Sie zu, sollte sich zukünftig eine passende Gelegenheit für Sie ergeben.