Data Engineer (m/w/d)

Goodman Masson Deutschland; Dortmund; Sur place; EUR 70 000 - 100 000; Plein temps

Avantages offerts par ce poste

Flexible Arbeitszeitgestaltung

2 Tage Home Office

Résumé du poste

Goodman Masson Deutschland sucht einen Data Engineer, der die Weiterentwicklung einer modernen, cloudbasierten Datenplattform aktiv mitgestaltet. Im Fokus stehen robuste Datenpipelines, die Integration von Quellsystemen sowie der Aufbau skalierbarer Verarbeitungsprozesse in einer Lakehouse-Architektur.

Sie arbeiten eng mit Analytics-Teams und Fachbereichen zusammen, implementieren Batch- und Streaming-Lösungen mit PySpark, Python, Spark und koordinieren Datenmodellierung, Qualität und

Qualifications

• Mehrjährige praktische Erfahrung im Data Engineering und Betreuung produktiver Datenlösungen.
• Fundierte Kenntnisse in Python und PySpark sowie Verarbeitung großer Datenmengen mit Apache Spark.
• Erfahrung mit Cloud-Architekturen, idealerweise AWS, und skalierbaren Datenplattformen.

Responsabilités

• Du entwickelst skalierbare Datenpipelines für strukturierte und unstrukturiert Daten in einer cloudbasierten Umgebung.
• Du verantwortest Anbindung von Quellsystemen und entwickelst Integrationsprozesse für Batch- und Streaming-Daten.
• Du arbeitest an Lakehouse-Architektur mit Data Models und Verarbeitungsstrukturen mit.
• Du setzt Datenverarbeitungsprozesse mit Python, PySpark und Spark um und optimierst Leistung und Wartbarkeit.
• Du sicherst konsistente Datenaufbereitung über Verarbeitungsebenen hinweg und berücksichtigst Datenqualität.
• Du unterstützt Betrieb der Plattform und entwickelst Prozesse durch Automatisierung, Monitoring und Optimierung weiter.
• Du erarbeitest technische Lösungen zusammen mit Analytics-Teams für verschiedene Anwendungsfälle.

Connaissances

Python

PySpark

Apache Spark

Cloud-Architektur

Kubernetes

Kafka

Airflow

Datenmodellierung

Git-Workflows

Outils

Delta Lake

Spark SQL

Description du poste

Für eine etablierte internationale Unternehmensgruppe suchen wir einen Data Engineer (m/w/d), der die Weiterentwicklung einer modernen, cloudbasierten Datenplattform aktiv mitgestaltet.

Im Mittelpunkt der Position stehen die Entwicklung leistungsfähiger Datenarchitekturen, die Integration unterschiedlicher Datenquellen sowie der Aufbau skalierbarer Datenverarbeitungsprozesse. Die bestehende Plattform basiert auf einer modernen Lakehouse-Architektur und bildet die technologische Grundlage für datengetriebene Anwendungen, Analytics und Reporting.

Gesucht wird eine technisch versierte Persönlichkeit, die nicht nur Datenpipelines entwickelt, sondern Verantwortung für deren Stabilität, Qualität und kontinuierliche Optimierung übernimmt. Dabei arbeitest Du eng mit anderen Engineering-Teams und verschiedenen Fachbereichen zusammen.

Deine Aufgaben

Data Engineer (m/w/d)

Für eine etablierte internationale Unternehmensgruppe suchen wir einen Data Engineer (m/w/d), der die Weiterentwicklung einer modernen, cloudbasierten Datenplattform aktiv mitgestaltet.

Im Mittelpunkt der Position stehen die Entwicklung leistungsfähiger Datenarchitekturen, die Integration unterschiedlicher Datenquellen sowie der Aufbau skalierbarer Datenverarbeitungsprozesse. Die bestehende Plattform basiert auf einer modernen Lakehouse-Architektur und bildet die technologische Grundlage für datengetriebene Anwendungen, Analytics und Reporting.

Gesucht wird eine technisch versierte Persönlichkeit, die nicht nur Datenpipelines entwickelt, sondern Verantwortung für deren Stabilität, Qualität und kontinuierliche Optimierung übernimmt. Dabei arbeitest Du eng mit anderen Engineering-Teams und verschiedenen Fachbereichen zusammen.

• Du entwickelst und optimierst skalierbare Datenpipelines für die Verarbeitung strukturierter und unstrukturierter Daten in einer cloudbasierten Umgebung.
• Du verantwortest die technische Anbindung unterschiedlicher Quellsysteme und entwickelst zuverlässige Integrationsprozesse für Batch- und Streaming-Daten.
• Du arbeitest an der Weiterentwicklung einer modernen Lakehouse-Architektur und gestaltest die zugrunde liegenden Datenmodelle und Verarbeitungsstrukturen aktiv mit.
• Du setzt komplexe Datenverarbeitungsprozesse mit Python, PySpark und Apache Spark um und optimierst diese hinsichtlich Performance, Skalierbarkeit und Wartbarkeit.
• Du stellst eine konsistente Datenaufbereitung über verschiedene Verarbeitungsebenen hinweg sicher und berücksichtigst dabei Anforderungen an Datenqualität und Verfügbarkeit.
• Du unterstützt den stabilen Betrieb der Datenplattform und entwickelst bestehende Prozesse durch Automatisierung, Monitoring und technische Optimierungen weiter.
• Gemeinsam mit Analytics-Teams und Fachbereichen erarbeitest Du technische Lösungen, um Daten für unterschiedliche Anwendungsfälle effizient nutzbar zu machen.

Dein Profil

• Du verfügst über mehrjährige praktische Erfahrung im Data Engineering und hast bereits produktive Datenlösungen entwickelt und betreut.
• Du besitzt fundierte Kenntnisse in Python und PySpark sowie Erfahrung mit der Verarbeitung größerer Datenmengen auf Basis von Apache Spark.
• Du kennst Dich mit modernen Cloud-Architekturen aus, idealerweise auf AWS, und verstehst die technischen Anforderungen skalierbarer Datenplattformen.
• Du hast Erfahrung mit Lakehouse-Konzepten, beispielsweise auf Basis von Delta Lake, sowie mit mehrstufigen Datenarchitekturen wie der Medallion Architecture.
• Technologien wie Kubernetes, Apache Kafka oder Apache Airflow sind Dir aus der Praxis bekannt oder Du hast bereits mit vergleichbaren Lösungen gearbeitet.
• Du bringst ein gutes Verständnis für Datenmodellierung, objektorientierte Programmierung und etablierte Software-Engineering-Prinzipien mit.
• Du arbeitest routiniert mit Git-basierten Entwicklungsprozessen und legst Wert auf nachvollziehbaren, wartbaren Code.
• Du gehst technische Herausforderungen analytisch an, arbeitest eigenverantwortlich und bringst Dich aktiv in Architektur- und Technologieentscheidungen ein.
• Du kannst Dich sowohl auf Deutsch als auch auf Englisch sicher mit technischen und fachlichen Ansprechpartnern austauschen.

Arbeitsumfeld

• Unbefristete Festanstellung in Vollzeit innerhalb einer etablierten Unternehmensgruppe
• Zusammenarbeit in einem agilen, interdisziplinären Umfeld mit kurzen Entscheidungswegen
• Flexible Arbeitszeitgestaltung und 2 Tage HO
• Individuelle fachliche und persönliche Entwicklungsmöglichkeiten
• Zusätzliche Benefits, wie Corporate Benefits, Jobrad etc.

Haben wir Dein Interesse geweckt?

Goodman Masson fördert als Arbeitgeber die Chancengleichheit und verpflichtet sich dazu, einen ganzheitlichen Ansatz von Diversity, Inclusion & Respect zu verfolgen. Diesen Grundsatz leben wir intern mit unseren MitarbeiterInnen, aber auch extern haben wir den Anspruch, der Gleichberechtigung während aller Entscheidungsprozesse gerecht zu werden. Als Personalberatung, die sowohl auf Kunden- als auch KandidatInnenseite agiert, ist es uns wichtig, allen BewerberInnen ohne Bias zu begegnen. Um mehr über unseren D&I Ansatz bei Goodman Masson zu erfahren, klicken Sie hier: https://www.goodmanmasson.de/diversity-inclusion-respect/

Bitte beachten Sie, dass wir nur Bewerbungen berücksichtigen können, die in die nächste Phase des Auswahlprozesses übergehen. Sollten Sie innerhalb von zwei Wochen nach Eingang Ihrer Bewerbung keine Rückmeldung von uns erhalten, bedeutet dies, dass Ihre Bewerbung in diesem Auswahlprozess leider nicht berücksichtigt werden konnte. Dies spiegelt keinesfalls eine Bewertung Ihrer Qualifikationen oder Fähigkeiten wider, sondern ist durch die hohe Anzahl an Bewerbungen und die spezifischen Anforderungen der Position bedingt. Ihre Bewerbung wird jedoch in unserem Talentpool gespeichert, und wir kommen auf Sie zu, sollte sich zukünftig eine passende Gelegenheit für Sie ergeben.