Data Engineer (m/w/d) Azure & Databricks | Cloud & Streaming

Steadforce GmbH; München; On-site; EUR 75,000 - 110,000; Full time

Benefits offered by this job

Büro in München Westend

Workation im EU-Ausland

Flexible Arbeitszeiten

Firmen-Events

Private Unfallversicherung

Zuschuss zur betrieblichen Altersvorso

Job summary

Steadforce GmbH in München sucht einen Data Engineer (m/w/d) mit Fokus auf Databricks und ML-Workflows. Sie arbeiten an modernen Datenplattformen, bauen skalierbare Architekturen in der Azure Cloud auf und realisieren MLOps-Prozesse in einer innovationsfreudigen Umgebung.

Sie bringen fundierte Kenntnisse in Spark, Kafka und Flink mit, programmieren in Python/Scala und arbeiten sicher mit SQL. Homeoffice ist möglich; wöchentliche Teamtage finden im Münchner Büro statt.

Qualifications

• Erfahrung mit Databricks (Mlflow, Unity Catalog, Delta Lake) erforderlich.
• Sehr gute Kenntnisse in Apache Spark, Kafka und Flink.
• Python oder Scala, sicher im Umgang mit SQL.
• Azure Cloud-Praxis; AWS/GCP vorteilhaft.
• CI/CD, Infrastructure-as-Code (Terraform), Kubernetes oder Docker sind Pluspunkte.
• Strukturierte, selbstständige Arbeitsweise & Teamorientierung.
• Sehr gute Deutsch- und Englischkenntnisse.
• Homeoffice möglich; wöchentliche Teamtage im Münchner Büro verpflichtend.

Responsibilities

• Entwicklung und Optimierung von Datenpipelines für Batch- und Echtzeitverarbeitung.
• Aufbau und Betrieb skalierbarer Datenarchitekturen in der Azure Cloud.
• Umsetzung von MLOps-Workflows für Machine-Learning-Projekte.
• Integration und Verarbeitung großer Datenmengen aus unterschiedlichen Quellen.
• Sicherstellung von Datenqualität, Performance und Sicherheit.
• Enge Zusammenarbeit mit Data Scientists und Analyst:innen.
• Betreuung und Weiterentwicklung von Streaming-Anwendungen (z. B. Flink, Spark Streaming).
• Monitoring und kontinuierliche Verbesserung der Dateninfrastruktur.

Skills

Teamfähigkeit

Databricks

Spark

Kafka

Flink

Python/Scala

SQL

Azure Cloud

Kubernetes/Docker

CI/CD

Education

Informatik / Data Science Studium

Tools

Databricks

MLflow

Unity Catalog

Delta Lake

Spark

Kafka

Flink

Azure Cloud

Terraform

Kubernetes

Docker

Job description

Deine Aufgaben

Du willst mit modernen Datenplattformen arbeiten, statt Altsysteme zu pflegen?
Dann gestalte mit uns leistungsstarke Datenlösungen für Analytics und Machine Learning in einer innovativen Cloud-Umgebung. Bei uns triffst du auf ein erfahrenes Team, neueste Technologien und echte Gestaltungsmöglichkeiten.
Als Data Engineer (m/w/d) mit Fokus auf Databricks übernimmst du:

• Entwicklung und Optimierung von Datenpipelines für Batch- und Echtzeitverarbeitung (Databricks, Spark, Kafka)
• Aufbau und Betrieb skalierbarer Datenarchitekturen auf der Azure Cloud
• Umsetzung von MLOps-Workflows für Machine-Learning-Projekte
• Integration und Verarbeitung großer Datenmengen aus unterschiedlichen Quellen
• Sicherstellung von Datenqualität, Performance und Sicherheit
• Enge Zusammenarbeit mit Data Scientists und Analyst:innen
• Betreuung und Weiterentwicklung von Streaming-Anwendungen (z. B. Flink, Spark Streaming)
• Monitoring und kontinuierliche Verbesserung der Dateninfrastruktur

Dein Profil

Das bringst du idealerweise mit:

• Studium in Informatik, Data Science oder eine vergleichbare Qualifikation
• Erfahrung mit Databricks (z. B. MLflow, Unity Catalog, Delta Lake)
• Sehr gute Kenntnisse in Apache Spark, Kafka und Flink
• Fundierte Programmierkenntnisse in Python oder Scala, sicher im Umgang mit SQL
• Praxis mit Azure Cloud; AWS oder GCP von Vorteil
• Erfahrung mit CI/CD, Infrastructure-as-Code (z. B. Terraform), Kubernetes oder Docker ist ein Plus
• Strukturierte, selbstständige Arbeitsweise & Teamorientierung
• Sehr gute Deutsch- und Englischkenntnisse
• jederzeit Homeoffice; an den wöchentlichen Teamtagen ist jedoch eine verpflichtende Anwesenheit im Münchner Büro erforderlich

Auch ein Quereinstieg ist möglich, wenn du entsprechende praktische Erfahrung mitbringst.

Deine Benefits

• Marktgerechte Vergütung, flexible Arbeitszeiten, Arbeitszeitkonto und Teilzeitmodelle, für die maximale Work-Life-Balance.
• High-End-Tools deiner Wahl: iPhone, MacBook oder ThinkPad.
• Stundenkontingent innerhalb des Steadforce "Campus" und der "Center of Competence" zur freien Verfügung für deine individuelle Weiterbildung, sowie Teilnahme an Summits, Konferenzen etc.
• Zentrales Büro im Münchner Westend mit moderner Ausstattung und guter Verkehrsanbindung.
• Motiviertes, kollegiales und dynamisches Team, das gemeinsam an spannenden Projekten arbeitet und sich gegenseitig unterstützt.
• Eine jährliche Zuzahlung zur betrieblichen Altersvorsorge sowie eine private Unfallversicherung.
• Firmenevents, wie Jahresauftaktfeier, Kochevents, Oktoberfest usw. die das Teamgefühl stärken und für unvergessliche Momente sorgen.
• Wir sind stolz darauf, als "familienfreundliches Unternehmen" ausgezeichnet worden zu sein und unterstützen unsere Mitarbeitenden in verschiedenen Lebenssituationen wie z.b. durch unser Family Office
• Workation - arbeite aus dem EU Ausland. Sonne genießen und trotzdem mit dem Team verbunden bleiben.
• Vielfältige Zusatzleistungen on top, wie Deutschland Ticket, e-gym Wellpass Mitgliedschaft, Edenred Wertkarte, Corporate Benefits, Job Rad, Gaming Room und vieles mehr.....