Data Engineer (m/w/d)

SOMI Experts GmbH; Holzwickede; Hybrid; EUR 65,000 - 95,000; Full time

Benefits offered by this job

Möglichkeit zum mobilen Arbeiten

Flache Hierarchien

Kostenlose Parkplätze

JobRad / Firmene-Bikes

Mitarbeiterevents

Job summary

SOMI Experts GmbH sucht ein Data Engineering Talent, das moderne Datenpipelines entwickelt und unsere cloud-native Datenplattform weiterentwickelt. Du verbindest Datenquellen, machst sie nutzbar für Analytics und operative Prozesse und arbeitest mit Spark, Delta Lake sowie AWS.

Du bringst Know-how in Datenmodellierung, Big Data und Datentransformation mit und arbeitest sicher an APIs, Streaming, Batch-Pipelines sowie Clean Code und Git.

Qualifications

• Studienschwerpunkt oder Berufspraxis im Data Engineering.
• Fundierte Kenntnisse in Datenmodellierung, Big Data, Datenqualität und Datentransformation.
• Sehr gute Python- und PySpark-Skills sowie Erfahrung mit AWS, Spark, Kubernetes und Airflow.
• Kenntnisse in Clean Code, Medallion Architecture, OOP und Kafka.
• Gutes, strukturiertes Arbeiten und sicherer Umgang mit Git.
• Fließende Deutsch- und gute Englischkenntnisse für technischen Austausch.

Responsibilities

• Daten aus vielfältigen Quellen in unsere cloud-native Enterprise Data Platform (EDP) integrieren und nutzbar machen.
• APIs, Datenbanken, Streaming und Files für stabile Datenpipelines einsetzen.
• Batch- bis Streaming-Pipelines mit Spark, Delta Lake und Kubernetes betreiben.
• EDP-Architektur (Lakehouse) weiterentwickeln und Multi-Tenant-Umgebungen unterstützen.

Skills

Python

PySpark

AWS

Spark

Kubernetes

Airflow

Kafka

Data Modeling

Big Data

Datenqualität

Datentransformation

Clean Code

Medallion Architecture

OOP

Git

Deutsch/Englisch Kommunikation

Education

Wirtschaftsinformatik-Studium oder vergleichbare Ausbildung

Tools

Delta Lake

Airflow

Kafka

Kubernetes

Git

Spark

AWS

Job description

Daten bewegen. Plattformen gestalten. Zukunft entwickeln!

Für ein international erfolgreiches Logistikunternehmen suchen wir ein Data Engineering Talent (m/w/d), das moderne Datenpipelines entwickelt und unsere cloud-native Datenplattform aktiv weiterentwickelt. Du verbindest Daten aus verschiedensten Quellen, machst sie für Analytics und operative Prozesse nutzbar und arbeitest mit Technologien wie Spark, Delta Lake und AWS. Dich erwarten ein modernes Tech-Umfeld, spannende Datenprojekte und viel Gestaltungsspielraum.

• Du bringst Daten aus verschiedensten Quellen auf unsere cloud-native Enterprise Data Platform (EDP) und machst sie für Reporting, Analytics und operative Prozesse nutzbar
• Mit APIs, Datenbanken, Streaming und Files sorgst du für eine reibungslose Datenintegration und zuverlässige Verarbeitung
• Von Batch bis Streaming entwickelst und betreibst du skalierbare Pipelines mit Spark, Delta Lake und Kubernetes bis zum Gold Layer
• Du treibst unsere EDP mit moderner Lakehouse-Architektur, Medaillenmodell und AWS in einer Multi-Tenant-Umgebung weiter voran

• Mit einem Studium der (Wirtschafts-)Informatik, einer vergleichbaren Ausbildung oder praktischer Erfahrung im Data Engineering
• Durch Know-how in Datenmodellierung, Big Data, Datenqualität und Datentransformation
• Mit starken Python- und PySpark-Skills sowie Erfahrung mit AWS, Spark, Kubernetes und Airflow
• Durch Kenntnisse in Clean Code, Medallion Architecture, OOP und Kafka
• Mit einer strukturierten, eigenverantwortlichen Arbeitsweise und sicherem Umgang mit Git
• Durch fließende Deutsch- und Englischkenntnisse für den technischen Austausch

• Deutsch: Verhandlungssicher
• Englisch: Erweiterte Kenntnisse

• Möglichkeit zum mobilen Arbeiten
• Flache Hierarchien und kurze Entscheidungswege
• Moderne Technologien und ein dynamisches Arbeitsumfeld
• Individuelle Weiterbildungs- und Entwicklungsmöglichkeiten
• Karriereperspektiven und persönliche Förderung
• Eigenverantwortliches Arbeiten mit Gestaltungsspielraum
• Führungsverantwortung und aktive Mitgestaltung von Prozessen
• Firmenfahrrad / JobRad
• Internationales Arbeitsumfeld mit vielfältigen Entwicklungsmöglichkeiten
• kostenlose Parkplätze
• Mitarbeiterevents