Senior Data Engineer (m/w/d)

Spectrum AG; Dresden; Vor Ort; EUR 90.000 - 120.000; Vollzeit

Benefits dieser Stelle

40 Stunden pro Woche

40 Stunden pro Woche

30 Tage Urlaub

Homeoffice anteilig möglich

Umfassende Einarbeitung

Internationales Arbeitsumfeld

Zusammenfassung

Spectrum AG in Dresden sucht einen Senior Data Engineer (m/w/d) zur Mitgestaltung einer On-Premises-Datenplattform. Sie arbeiten an Datenorchestrierung, Deployment, Plattformautomatisierung und Batch/Streaming-Pipelines in einem internationalen Umfeld.

Sie verfügen über mehrjährige Erfahrung mit Kubernetes, Linux und modernen Datenplattform-Architekturen, kennen S3-kompatible Storage-Lösungen, Kafka, Spark, Airflow und SQL.

Qualifikationen

• Abgeschlossenes Studium der Informatik oder Vergleichbares, Software-gestalterischer Anspruch.
• Freude an Proofs of Concept und eigenständiges Umsetzen von PoCs.
• Mehrjährige Erfahrung mit Kubernetes und Linux-Umgebungen.
• Kenntnisse moderner Datenplattform-Architekturen (Kappa, Medallion) sowie Batch- und Low-Latency Streaming.
• Praktische Kenntnisse in Python, Golang, SQL (MPP), Bash und Java.
• Erfahrung mit S3, Apache Iceberg, GitOps, NATS.io, Risingwave, Dagster, Spark, Kafka, Flink und Airflow; Cursor.ai & NUMA/Core Pinning vorteilhaft.
• Cloud-Native-Mindset, Linux-Containerisierung, Kubernetes, Edge Data-Management ohne Public Cloud.
• Sehr gute Deutsch- und Englischkenntnisse in Wort und Schrift.

Aufgaben

• Mitgestaltung und Entwicklung einer On-Premises-Datenplattform.
• Entwicklung und Integration von Komponenten für Datenorchestrierung, Deployment und Plattformautomatisierung.
• Erstellung von Proof of Concepts, ggf. mit Cursor.ai.
• Implementierung von Batch- und Streaming-Datenpipelines und plattformbezogenen Services.
• Integration von Workloads auf Kubernetes sowie S3-kompatiblen Storage-Lösungen.
• Untersuchung von Datenkatalogen, Datenversionierung und Plattform-Integration.
• Zusammenarbeit mit Lead Architekten, Infrastruktur- & Security-Teams.

Kenntnisse

Kubernetes

Linux

Python

SQL (MPP)

Bash

Java

Kafka

Spark

Flink

Airflow

Cursor.ai

NUMA

Core Pinning

Ausbildung

Informatikstudium

Tools

Kubernetes

Linux

Docker

Git

S3

Apache Iceberg

Spark

Kafka

Flink

Airflow

Jobbeschreibung

Senior Data Engineer (m/w/d)

Standort: Dresden

Start: Ab sofort

Unternehmensprofil

Das Unternehmen mit Hauptsitz in München ist ein global agierender Anbieter von Lösungen in den Bereichen Elektro-, Test- und Messtechnik sowie Kommunikationstechnologie. Das Unternehmen bietet ein breites Spektrum an Produkten, darunter Testgeräte für Elektronik, Funkkommunikation, Satellitenkommunikation und Netzwerke. Diese Produkte werden von Unternehmen in verschiedenen Branchen eingesetzt, darunter Luft- und Raumfahrt, Verteidigung, Telekommunikation, Automobilindustrie und Elektronik.

Aufgaben

• Mitarbeit an der Konzeption und Entwicklung einer On-Premises-Datenplattform
• Entwicklung und Integration von Komponenten für Datenorchestrierung, Deployment und Plattformautomatisierung
• Erstellung von Proof of Concepts, gerne mithilfe von KI-Agent-Tools wie Cursor.ai
• Implementierung von Batch- und Streaming-Datenpipelines sowie plattformbezogenen Services
• Integration von Workloads auf Kubernetes sowie S3-kompatiblen Storage-Lösungen
• Untersuchung von Datenkatalogen, Datenversionierung und ihrer Integration in die Plattform
• Zusammenarbeit mit Lead Architekten, Infrastruktur- und Security-Teams

Qualifikationen

• Abgeschlossenes Studium der Informatik oder eine vergleichbare Qualifikation sowie der Anspruch, Software zu gestalten, die wirklich etwas bewegt
• Freude am Experimentieren mit Proofs of Concept und die Fähigkeit, diese eigenständig zum Laufen zu bringen
• Mehrjährige Erfahrung mit Kubernetes und Kubernetes-Infrastruktur sowie mit Linux-Betriebssystemen
• Kenntnisse moderner Datenplattform-Architekturen wie Kappa oder Medallion sowie von Batch- und Low-Latency-Streaming-Pipelines
• Praktische Kenntnisse in Python, Golang, SQL (MPP), Bash und Java
• Erfahrung mit S3, Apache Iceberg, GitOps Workflows, NATS.io, Risingwave, Dagster, Spark, Kafka, Flink und Airflow, idealerweise ergänzt durch Erfahrung mit Cursor.ai und Konzepten wie NUMA und Core Pinning
• Cloud-Native-Mindset mit Routine in Linux, Linux-Containern und Kubernetes sowie eigenen Ideen zur Realisierung von Data-Management-Plattformen am Edge ganz ohne Public-Cloud-Services
• Sehr gute Deutsch- und Englischkenntnisse in Wort und Schrift

Zusätzliche Informationen & Benefits

• 40 Stunden pro Woche
• Anteilig Homeoffice möglich (überwiegend Präsenz am Standort Dresden)
• 30 Tage Urlaub
• Spannende Tätigkeiten in einem faszinierenden Hightech-Unternehmen und einer innovativen Branche
• Umfassende Einarbeitung und ein offenes, internationales Arbeitsumfeld

Kontakt

Wir freuen uns auf deine Bewerbung. Bei Fragen kannst du uns gerne kontaktieren:

[e-mail]

SPECTRUM AG | Schulze-Delitzsch-Str. 41 | 70565 Stuttgart

www.spectrum-ag.de

ID #329