Senior Data Engineer (m/w/d)

SOMI Solutions GmbH; Hamburg; Hybrid; EUR 90.000 - 120.000; Vollzeit

Benefits dieser Stelle

Hybrides Arbeiten

Flexible Arbeitszeiten

30 Tage Urlaub

Onboarding

Versicherungsleistungen

Gesundheitsangebote

Fahrtkostenzuschuss

Mobilitätsangebote

Mietwagenkonditionen

Feedbackkultur

Austausch mit Management

Talentmanagement

Performancemanagement

Sommerfeste

Weihnachtsfeiern

Sportveranstaltungen

Zusammenfassung

SOMI Solutions GmbH sucht einen erfahrenen Data Engineer zur Entwurf, Implementierung und dem Betrieb moderner Azure-Cloud-Infrastrukturen. Sie automatisieren Deployments via Terraform und bauen robuste CI/CD-Pipelines auf, um Deployments und Tests zu beschleunigen.

Sie arbeiten eng mit Entwicklungsteams zusammen, optimieren Performance, Kosten und Sicherheit und realisieren ein Lakehouse-basiertes Data Warehouse mit Databricks sowie IDMC.

Qualifikationen

• Abgeschlossenes Studium in Informatik oder einem vergleichbaren Bereich.
• Mehrjährige Berufserfahrung als Data Engineer oder in ähnlicher Rolle.
• Ausgeprägte Deutsch- und Englischkenntnisse in Wort und Schrift.

Aufgaben

• Entwurf, Implementierung und Betrieb moderner Azure-Cloud-Infrastrukturen für die Datenplattform.
• Automatisierung von Deployments und Infrastruktur mittels Infrastructure as Code (Terraform).
• Aufbau und Betrieb von CI/CD-Pipelines zur Automatisierung von Deployments und Tests.
• Monitoring der Cloud-Umgebungen sowie kontinuierliche Optimierung von Performance, Kosten und Sicherheit.
• Umsetzung und Sicherstellung von Security- und Compliance-Anforderungen in der Cloud.
• Enge Zusammenarbeit mit Entwicklungsteams zur Bereitstellung stabiler, skalierbarer Cloud-Lösungen.
• Konzeption und Umsetzung eines modernen Data Warehouse mit Tools wie Databricks und IDMC auf Lakehouse-Basis.
• Definition von Prozessen zur Anbindung unterschiedlicher Quellsysteme.
• Entwicklung robuster ETL/ELT-Pipelines vom Raw-Ingest bis zum Gold-Layer.

Kenntnisse

Azure Data Factory

Spark/Databricks

PySpark/SQL

Delta Lake

ETL/ELT

Orchestrierung

Star Schema

Power BI

Cloud-Security

CI/CD

Deutsch & Englisch

Ausbildung

Informatik / Wirtschaftsinformatik / Data Science oder vergleichbare Qualifikation

Tools

Terraform

Azure DevOps

GitHub Actions

GitLab CI

Jobbeschreibung

• Hybrides Arbeiten mit flexiblem Mobile-Working-Modell
• Flexible Arbeitszeiten für eine gute Work-Life-Balance
• 30 Tage Urlaub
• Strukturiertes Onboarding und gemeinsamer Einstieg mit weiteren neuen Mitarbeitenden
• Umfangreiche Versicherungsleistungen
• Angebote und Workshops zur Förderung der physischen und mentalen Gesundheit
• Fahrtkostenzuschuss für den ÖPNV
• Attraktive Mobilitätsangebote und Mietwagenkonditionen
• Offene und wertschätzende Feedbackkultur
• Regelmäßiger Austausch mit dem Management
• Strukturierte persönliche und berufliche Weiterentwicklung durch Talent- und Performancemanagement
• Gemeinsame Sommerfeste, Weihnachtsfeiern und Sportveranstaltungen

• Entwurf, Implementierung und Betrieb moderner Azure-Cloud-Infrastrukturen für die Datenplattform
• Automatisierung von Deployments und Infrastruktur mittels Infrastructure as Code, z. B. Terraform
• Aufbau und Betrieb von CI/CD-Pipelines zur Automatisierung von Deployments und Tests
• Monitoring der Cloud-Umgebungen sowie kontinuierliche Optimierung von Performance, Kosten und Sicherheit
• Umsetzung und Sicherstellung von Security- und Compliance-Anforderungen in der Cloud
• Enge Zusammenarbeit mit Entwicklungsteams zur Bereitstellung stabiler, skalierbarer und sicherer Cloud-Lösungen
• Konzeption und Umsetzung eines modernen Data Warehouse mit Tools wie Coalesce.io, Databricks und IDMC auf Basis eines Lakehouse-Modells
• Definition von Prozessen zur Anbindung unterschiedlicher Quellsysteme
• Entwicklung robuster ETL/ELT-Pipelines vom Raw-Ingest bis zum Gold-Layer
• Enge Zusammenarbeit mit Fachbereichen wie BI, IT-Sicherheit und Betrieb

• Abgeschlossenes Studium der Informatik, Wirtschaftsinformatik, Data Science oder eine vergleichbare Qualifikation
• Mehrjährige Berufserfahrung als Data Engineer
• Erfahrung mit Azure Data Factory
• Erfahrung mit Spark/Databricks, insbesondere PySpark und SQL
• Kenntnisse in Delta Lake/Lakehouse, ETL/ELT und Orchestrierung
• Erfahrung in der Analytics-Modellierung, z. B. Star Schema und Power BI
• Fundierte Kenntnisse der Microsoft-Azure-Cloud-Infrastruktur
• Erfahrung mit Infrastructure as Code, insbesondere Terraform
• Fundierte Kenntnisse in DevOps-Praktiken und CI/CD, z. B. Azure DevOps, GitHub Actions oder GitLab CI
• Erfahrung mit Monitoring- und Logging-Tools wie Azure Monitor und Log Analytics
• Fundiertes Verständnis von Cloud-Security-Konzepten und Best Practices
• Strukturierte, selbstständige und lösungsorientierte Arbeitsweise
• Ausgeprägte Kommunikationsfähigkeit gegenüber technischen und nicht-technischen Stakeholdern
• Gute Deutsch- und Englischkenntnisse in Wort und Schrift

• Deutsch: Verhandlungssicher