Databricks Platform Engineer (m/w/d)

Union Investment; Frankfurt; Hybrid; EUR 85.000 - 115.000; Vollzeit

Benefits dieser Stelle

Hybrides Arbeiten

Flexible Arbeitszeiten

Mobilität – Jobticket

Bezuschusstes Mittagessen

Betriebliche Altersvorsorge

Kaffee & Getränke

Kinderbetreuungszuschuss

Zusammenfassung

Union Investment sucht eine/n Databricks Platform Engineer (m/w/d) zur Konzeption, dem Aufbau und der Optimierung der unternehmensweiten Datenplattform auf Databricks. Sie arbeiten eng mit Data Scientists und ML Engineers zusammen, um skalierbare Datenprodukte von BI bis KI zu ermöglichen.

Sie tragen Verantwortung für Verfügbarkeit, Sicherheit und Skalierbarkeit, konfigurationsbasierte Arbeitsbereiche und IaC-gestützte Infrastruktur. Kenntnisse in Delta Lake, Spark und Azure sind gefragt.

Qualifikationen

• Abgeschlossenes Informatik-Studium oder vergleichbare Qualifikation.
• Mehrjährige Erfahrung in Softwareentwicklung und Systembetrieb mit modernen Tech-Stacks, CI/CD Pipelines sowie dem stabilen, sicheren und kosteneffizienten Betrieb auf Microsoft Azure.
• Nachgewiesene Kenntnisse im Aufbau und der Wartung von Infrastructure-as-Code (IaC) Templates und Bausteinen (z. B. Terraform).
• Starke Skripting-Fähigkeiten (z. B. Python, Bash) von Vorteil.
• Praktische Erfahrung mit Databricks, Delta Lake und Spark.

Aufgaben

• Applikationsverantwortung für die Databricks Platform und Sicherstellung der Verfügbarkeit, Sicherheit und Skalierbarkeit der Plattform.
• Bereitstellung und Konfiguration von Databricks-Arbeitsbereichen mittels DAB, Terraform CLI, und SDK.
• Verwaltung von arbeitsbereichsbezogenen Einstellungen wie Clustern, Bibliotheken, Compute-Richtlinien und Zugriffssteuerungen.
• Definition und Pflege von Katalogen, Schemata und Tabellen über Arbeitsbereiche hinweg mit Unity Catalog.
• Nutzung von Infrastructure-as-Code (IaC)-Tools wie Terraform und Terragrunt.
• Implementierung, Betrieb und Verbesserung von CI/CD-Pipelines mithilfe von GitLab CI/CD.

Kenntnisse

CI/CD-Pipelines

Azure-Cloud

Scripting (Python Bash)

Databricks-Kenntnisse

Ausbildung

Informatik-Studium oder vergleichbare Qualifikation

Tools

Databricks

Terraform

Terragrunt

Unity Catalog

Terraform CLI

SDK

Delta Lake

Spark

GitLab CI/CD

Jobbeschreibung

Was wir bieten

Im KI-Kompetenzzentrum dreht sich alles um die Erschaffung von KI-Lösungen für Union Investment und den Aufbau einer Databricks Data Intelligence Platform. In unseren Projekten entwickeln wir skalierbare Datenprodukte gemeinsam mit den Fachbereichen und Technologie-Teams. Damit unterstützen wir die gesamte Organisation dabei, Geschäftsentscheidungen auf Basis verlässlicher Daten und modernster Analytics-Methoden zu treffen.

Was wir bieten

Im KI-Kompetenzzentrum dreht sich alles um die Erschaffung von KI-Lösungen für Union Investment und den Aufbau einer Databricks Data Intelligence Platform. In unseren Projekten entwickeln wir skalierbare Datenprodukte gemeinsam mit den Fachbereichen und Technologie-Teams. Damit unterstützen wir die gesamte Organisation dabei, Geschäftsentscheidungen auf Basis verlässlicher Daten und modernster Analytics-Methoden zu treffen.

Wir suchen einen Databricks Platform Engineer (m/w/d) mit Interesse an der Zusammenarbeit mit Data Scientisten und Machine Learning Engineers. Diese Rolle ist zentral für die Konzeption, den Aufbau und die Optimierung unserer unternehmensweiten Datenplattform auf Databricks, die die skalierbare Entwicklung von Datenprodukten entlang der gesamten Wertschöpfungskette von BI bis KI ermöglicht.

Folgende Aufgaben Wirst Du Schwerpunktmäßig Ausfüllen

• Applikationsverantwortung für die Databricks Platform und Sicherstellung der Verfügbarkeit, Sicherheit und Skalierbarkeit der Plattform
• Bereitstellung und Konfiguration von Databricks-Arbeitsbereichen mittels DAB, Terraform CLI, und SDK
• Verwaltung von arbeitsbereichsbezogenen Einstellungen wie Clustern, Bibliotheken, Compute-Richtlinien und Zugriffssteuerungen
• Definition und Pflege von Katalogen, Schemata und Tabellen über Arbeitsbereiche hinweg mit Unity Catalog
• Nutzung von Infrastructure-as-Code (IaC)-Tools wie Terraform und Terragrunt für Infrastrukturbereitstellung und -konfiguration
• Implementierung, Betrieb und Verbesserung von CI/CD-Pipelines mithilfe von GitLab CI/CD zur effizienten und automatisierten Softwarebereitstellung

Was du bietest

• Abgeschlossenes Informatik-Studium oder in einer vergleichbaren Fachrichtung mit IT-Bezug oder eine vergleichbare Qualifikation
• Mehrjährige Erfahrung in der Softwareentwicklung und im Systembetrieb mit modernen Tech-Stacks, CI/CD Pipelines sowie dem stabilen, sicheren und kosteneffizienten Betrieb auf Microsoft Azure
• Nachgewiesene ausgeprägte Kenntnisse im Aufbau und der Wartung von wiederverwendbaren Infrastructure-as-Code (IaC) Templates und Bausteinen (z. B. Terraform)
• Starke Skripting-Fähigkeiten (z. B. Python, Bash) sind von Vorteil
• Praktische Erfahrung mit Databricks, Delta Lake und Spark

Deine Arbeitsweise ist geprägt von Partnerschaftlichkeit, Wertschätzung sowie Begeisterung und Teamgeist Auch vielfältige Bildungshintergründe und Arbeitserfahrungen sind bei uns willkommen. Wir sind aufgeschlossen gegenüber Talenten, deren Lebenslauf auf den ersten Blick nicht hundertprozentig zu den Anforderungen in unserer Stellenanzeige passt. Wir bieten die passenden Rahmenbedingungen, ihre individuellen Potenziale vollumfänglich zu entfalten.

Unsere Benefits

Mehr Details zu unseren Benefits:

• Arbeitsmodelle
  • Hybrides Arbeiten (mobil und vor Ort)
  • Flexible Arbeitszeiten
  • Variable Teilzeitmodelle
  • Moderne Arbeitswelten
• Mobilität
  • Zentrale Lage mit sehr guter Verkehrsanbindung
  • Kostenfreies Jobticket
  • Fahrrad Leasing
  • E-Tankstelle
• Kulinarik
  • Bezuschusstes Mittagessen
  • Freie Getränke
  • Betriebsrestaurants
  • Kaffeebars
• Sozialleistungen
  • Betriebliche Altersvorsorge
  • Vermögenswirksame Leistungen
  • Mitarbeiterkonditionen im Rahmen des Genossenschaftlichen Finanzverbundes
  • Kinderbetreuungszuschuss
• Fitness & Gesundheit
  • Zuschuss zu Fitnessstudios
  • Interne Sportangebote
  • Gesundheitsvorsorge
• Und Vieles mehr
  • Erstklassige IT Ausstattung
  • Zeitgemäße IT-Infrastruktur
  • WeiterbildungsangeboteKarriereperspektiven

Die abgebildeten Leistungen können je nach Gesellschaft und Standort variieren.

Über uns

Union Investment ist bekannt für eine herausragende Expertise im Asset Management und damit eine der führenden Investmentfondsgesellschaften. Als Teil der Genossenschaftlichen FinanzGruppe bieten wir Privatpersonen sowie institutionellen Kunden seit 1956 zukunftssichere Anlagelösungen mit dem Ziel, das Vermögen unserer mehr als fünf Millionen Anleger*innen zu vermehren.

Unsere Kultur ist geprägt von einem hohen Leistungsanspruch und partnerschaftlichen Miteinander. Bei uns bringen alle Mitarbeitenden ihre eigene Geschichte mit. Es ist für uns selbstverständlich, ein Arbeitsumfeld zu schaffen, in dem Menschen mit unterschiedlichen Geschlechtern, aus verschiedenen Altersgruppen, mit körperlichen Beeinträchtigungen, unterschiedlichen sexuellen Orientierungen, sozialen und kulturellen Hintergründen, ethnischen Zugehörigkeiten und Religionen ganz sie selbst sein können. Wir schätzen diese Vielfalt und lassen daraus eine Gemeinschaft entstehen, zu der alle einen wertvollen Beitrag leisten.