Echtzeit-Dateningenieur – Kubernetes, Kafka & Flink

Deutsche Telekom; Madrid; Hybrid; EUR 90,000 - 120,000; Full time

Benefits offered by this job

Krankenversicherung

Essensgutscheine

Kinderbetreuung

Transport

Telemedizin

Lebens- und Unfallversicherung

Sozialfonds

Job summary

Deutsche Telekom sucht einen Data Engineer zur Verantwortung des End-to-End-Lebenszyklus einer Echtzeit-Datenverarbeitungspipeline. Sie arbeiten eng mit Data Scientists und DevOps-Teams zusammen, optimieren ETL-Prozesse und integrieren neue Datenquellen.

Die Rolle umfasst Betrieb in Kubernetes- Umgebungen, 24/7-Verfügbarkeit und ITIL-gerechte Rollouts. Sie verfügen über Expertise in Java und Python, Kafka und Flink, starke Team- und Kommunikationsfähigkeiten sowie Grundkenntnisse in DevOps-Tools

Qualifications

• Know-how in Java.
• Know-how in Python.
• Erfahrung mit Big-Data-Technologien wie Apache Kafka.
• Erfahrung mit Big-Data-Technologien wie Apache Flink.
• Erfahrung in der Optimierung von Datenverarbeitungs-Workflows.
• Fähigkeit, komplexe Datenstrukturen zu analysieren und effiziente Lösungen zu entwickeln.
• Vertrautheit mit Cloud- und Container-Technologien, insbesondere Kubernetes-Umgebungen.
• Grundlegendes Know-how in DevOps CI/CD-Tools wie GitLab, Artifactory, Helm, Flux.
• Grundlegendes Know-how in Monitoring-Systemen wie Grafana, Promtail, Prometheus.
• Ausgeprägte Teamfähigkeit und Kommunikationsfähigkeiten.

Responsibilities

• Verantwortung für das gesamte Lifecycle-Management einer Echtzeit-Datenverarbeitungspipeline.
• Entwicklung und Optimierung von Datenpipelines (ETL).
• Integration neuer Datenquellen.
• Implementierung neuer Technologien und Tools zur Verbesserung der Datenverarbeitungsfähigkeiten.
• Betrieb in Kubernetes-basierten Umgebungen.
• System-Monitoring und Wartung für 24/7-Verfügbarkeit.
• Rollout-Management basierend auf ITIL/Unternehmensprozessen.
• Enge Zusammenarbeit mit Data Scientists und Kunden.

Skills

Java

Python

Apache Kafka

Apache Flink

Kubernetes

GitLab CI/CD

Artifactory

Helm

Flux

Grafana

Promtail

Prometheus

Tools

Kubernetes

GitLab

Artifactory

Helm

Flux

Grafana

Promtail

Prometheus

Job description

Deutsche Telekom sucht einen Data Engineer zur Verantwortung des End-to-End-Lebenszyklus einer Echtzeit-Datenverarbeitungspipeline. Sie arbeiten eng mit Data Scientists und DevOps-Teams zusammen, optimieren ETL-Prozesse und integrieren neue Datenquellen.

Die Rolle umfasst Betrieb in Kubernetes- Umgebungen, 24/7-Verfügbarkeit und ITIL-gerechte Rollouts. Sie verfügen über Expertise in Java und Python, Kafka und Flink, starke Team- und Kommunikationsfähigkeiten sowie Grundkenntnisse in DevOps-Tools