Databricks Data Engineer | Freiberuflich

UMATR

Berlin

On-site

EUR 83,000 - 152,000

Full time

14 days+

Get a reply from this employer

Your resume and cover letter, tailored to exactly what they’re hiring for.

Get past ATS filters

Job summary

UMATR in Berlin sucht einen erfahrenen Senior Databricks Data Engineer zur Unterstützung eines 6-monatigen Freelance-Vertrags. Du arbeitest an einer modernen Datenplattform, mit Databricks im Zentrum.

Zu deinen Aufgaben gehören der Aufbau skalierbarer Pipelines mit PySpark, Python und SQL, Delta Lake/Lakehouse-Architekturen, Migration von Workloads und Performance-Optimierung. Du bringst 5+ Jahre Data-Engineering-Erfahrung, Databricks-Expertise sowie Cloud-Kenntnisse (Azure/AWS/GCP) mit und

Qualifications

  • 5+ Jahre Erfahrung im Data Engineering.
  • Fundierte praktische Erfahrung mit Databricks.
  • Sehr gute PySpark-, Python- und SQL-Kenntnisse.
  • Fundiertes Verständnis von Delta Lake und Lakehouse-Architekturen.
  • Erfahrung in der Entwicklung und Optimierung produktiver Datenpipelines.
  • Erfahrung mit Cloud-Plattformen (Azure/AWS/GCP).
  • Selbstständige Arbeitsweise und schnelle Verantwortungsübernahme.

Responsibilities

  • Entwicklung und Aufbau skalierbarer Datenpipelines innerhalb von Databricks.
  • Entwicklung produktionsreifer Workloads mit PySpark, Python und SQL.
  • Umfangreiche Arbeit mit Delta Lake und Lakehouse-Architekturen.
  • Unterstützung bei der Migration bestehender Workloads zu Databricks.
  • Optimierung von Spark-Workloads und Pipeline-Performance.
  • Aufbau zuverlässiger ETL-/ELT-Prozesse für große Datenmengen.
  • Zusammenarbeit mit Data Scientists, Analytics Engineers und Cloud Engineers.
  • Implementierung von Datenqualität, Tests und Monitoring.
  • Mitwirkung an der übergreifenden Architektur und technischen Weiterentwicklung der Plattform.

Skills

Databricks
PySpark
Python
SQL
Delta Lake
Lakehouse
Eigenverantwortung
Cloud (Azure)
Cloud (AWS)
Cloud (GCP)

Job description

Wir arbeiten mit einem europäischen Technologieunternehmen zusammen, das sich aktuell in einer umfassenden Transformation seiner Datenplattform befindet. Dafür wird ein Senior Databricks Data Engineer gesucht, der das Team zunächst im Rahmen eines 6-monatigen Freelance-Vertrags unterstützt.

Du kommst in ein Umfeld, in dem die Datenplattform aktiv aufgebaut und modernisiert wird, wobei Databricks im Zentrum der Architektur steht.

Woran du arbeiten wirst
  • Entwicklung und Aufbau skalierbarer Datenpipelines innerhalb von Databricks
  • Entwicklung produktionsreifer Workloads mit PySpark, Python und SQL
  • Umfangreiche Arbeit mit Delta Lake und Lakehouse-Architekturen
  • Unterstützung bei der Migration bestehender Workloads zu Databricks
  • Optimierung von Spark-Workloads und Verbesserung der Pipeline-Performance
  • Aufbau zuverlässiger ETL-/ELT-Prozesse für große Datenmengen
  • Zusammenarbeit mit Data Scientists, Analytics Engineers und Cloud Engineers
  • Implementierung von Datenqualität, Tests und Monitoring
  • Mitwirkung an der übergreifenden Architektur und technischen Weiterentwicklung der Plattform
Das bringst du mit
  • 5+ Jahre Erfahrung im Bereich Data Engineering
  • Fundierte praktische Erfahrung mit Databricks
  • Sehr gute Kenntnisse in PySpark, Python und SQL
  • Fundiertes Verständnis von Delta Lake und Lakehouse-Architekturen
  • Erfahrung in der Entwicklung und Optimierung produktiver Datenpipelines
  • Erfahrung mit Azure, AWS oder GCP
  • Erfahrung in großen und komplexen Datenumgebungen
  • Die Fähigkeit, selbstständig zu arbeiten und schnell Verantwortung zu übernehmen
Get your free, confidential resume review.

or drag and drop your file here.

Similar jobs

Similar jobs worth comparing

Databricks Data Engineer (m/w/d)
Databricks Data Engineer (m/w/d)

Devoteam • München

Hybrid
EUR 70,000 - 120,000
Moderne Büros in München/Frankfurt
Flexibles Hybrid Working
Devoteam Academy Trainings & Sprachkur
+4
Databricks Data Engineer (m/w/d)
Databricks Data Engineer (m/w/d)

Devoteam • Frankfurt

Hybrid
EUR 70,000 - 110,000
Moderne Büros in München & Frankfurt
Hybrid Working
Devoteam Academy
+5
Databricks Data Engineer (m/w/d)
Databricks Data Engineer (m/w/d)

Devoteam | Microsoft Partner • München

Hybrid
EUR 70,000 - 110,000
Moderne Büros (München/Frankfurt)
Hybrid Working
Devoteam Academy
+5
Databricks Data Engineer (m/w/d)
Databricks Data Engineer (m/w/d)

Devoteam | Microsoft Partner • Frankfurt

Hybrid
EUR 70,000 - 110,000
Moderne Büros
Hybrid Working
Devoteam Academy
+5
Senior Data Engineer (m/w/d) Databricks
Senior Data Engineer (m/w/d) Databricks

Cimt Ag • Hamburg

Hybrid
EUR 70,000 - 100,000
Databricks Data Engineer (m/w/d)
Databricks Data Engineer (m/w/d)

Dataciders GmbH • Germany

Hybrid
EUR 55,000 - 80,000
Flexible Arbeitszeiten
Remote-Arbeit möglich
Team-Events
+2
Databricks Data Engineer (m/w/d)
Databricks Data Engineer (m/w/d)

Dataciders GmbH • Berlin

Hybrid
EUR 70,000 - 100,000
Senior Data Engineer – Azure Databricks (m/w/d)
Senior Data Engineer – Azure Databricks (m/w/d)

Alendris • Augsburg

Hybrid
EUR 90,000 - 130,000
Homeoffice möglich
Weiterbildung Databricks/Azure
Direkter Kundenkontakt
Data Engineer Databricks / Lakehouse (w/m/d)
Data Engineer Databricks / Lakehouse (w/m/d)

1&1 Telecommunication SE • Karlsruhe

Hybrid
EUR 60,000 - 80,000
Attraktives Gehalt
Vertrauensarbeitszeit mit flexibler Einteilung
Zahlreiche Weiterbildungsmöglichkeiten
+4
Senior - Data Engineering (m/w/d) Azure und Databricks
Senior - Data Engineering (m/w/d) Azure und Databricks

SkelTech GmbH • Frechen

Hybrid
EUR 75,000 - 95,000
Prämie bis 200%
Weiterbildungen
Meet-ups & Messen
+6