Senior Data Engineer (Databricks) – Lead Data Pipelines

Deutsche Telekom; Valencia; Híbrido; EUR 90.000 - 130.000; Jornada completa

Ventajas ofrecidas por este puesto de trabajo

Krankenversicherung

Essensgutscheine

Kinderbetreuung

Transport

Telemedizin

Lebens- und Unfallversicherung

Sozialfonds

Descripción de la vacante

T-Systems in Deutschland gehört zur Deutschen Telekom Gruppe und sucht einen erfahrenen Data Engineering Expert. Sie gestalten ETL/ELT-Prozesse, treiben Data-Lake/Delta-Architekturen voran und arbeiten eng mit Cloud-Teams zusammen.

Dabei führen Sie fachlich, reviewen Code und treten als technischer Ansprechpartner gegenüber Kunden auf. Sie bringen tiefe Kenntnisse in Databricks, Spark, Python und SQL mit, können Teams technisch leiten und arbeiten bevorzugt hybrid mit flexiblen Zeiten.

Formación

• Mehr als 6 Jahre Erfahrung im Bereich Data Engineering und Datenintegrationsprojekte.
• Umfangreiche Erfahrung in der Definition und Implementierung komplexer ETL/ELT-Prozesse.
• Fortgeschrittene Databricks-Kenntnisse.
• Fortgeschrittene Python-Kenntnisse.
• Fortgeschrittene SQL-Kenntnisse.
• Erfahrung mit verteilter Verarbeitung mittels Spark/PySpark.
• Erfahrung im Design moderner Datenarchitekturen (Data Lake, Data Warehouse, Lakehouse).
• Fundierte Kenntnisse in der Datenqualitätssicherung (Validierungen, Kontrollen, Reconciliation, Data Lineage).
• Erfahrung in der Arbeit mit Cloud-Umgebungen (Azure, AWS oder GCP).
• Kenntnisse und Anwendung von CI/CD auf Datenpipelines.
• Erfahrung mit Versionskontrolle mittels Git auf Datenpipelines.
• Fähigkeit, Teams technisch zu führen.
• Ausgeprägte KommunikationsfähigkeitenFähigkeit zur Kommunikation mit technischen und fachlichen Profilen.
• Erfahrung in der Arbeit mit agilen Methoden.

Responsabilidades

• Definition, Design und Weiterentwicklung der ETL/ELT-Prozesse der Datenplattform unter Sicherstellung ihrer Ausrichtung an den Geschäftsanforderungen.
• Design und Implementierung von Datenaufnahme-, Transformations- und Persistenzprozessen in Data Lake-, Data Warehouse- oder Lakehouse-Umgebungen.
• Etablierung und Sicherstellung der Datenqualitätssicherung durch Definition von Kontrollen, Validierungen, Geschäftsregeln und Rückverfolgbarkeitsmechanismen.
• Definition technischer Standards, Best Practices und Entwicklungsmuster für Datenpipelines.
• Fungieren als technische Referenz für das Data Engineering Team durch fachliche Unterstützung, Code-Reviews und Mentoring.
• Führen des direkten Dialogs mit dem Kunden in der Rolle des technischen Experten, Teilnahme an Design-Entscheidungen und an der Definition der Datenstrategie.
• Koordination mit Architekten, Analysten, BI- und Data-Science-Teams zur Sicherstellung der Kohärenz des Datenökosystems.
• Optimierung der Performance, Skalierbarkeit und Zuverlässigkeit von Datenprozessen in Produktivumgebungen.
• Dokumentation der Architektur der Plattform, der Datenflüsse und kritischer Prozesse.

Conocimientos

ETL/ELT-Processes

Databricks

Spark

Python

SQL

Cloud platforms

Herramientas

Git

CI/CD

Orchestrierungstools

Descripción del empleo

T-Systems in Deutschland gehört zur Deutschen Telekom Gruppe und sucht einen erfahrenen Data Engineering Expert. Sie gestalten ETL/ELT-Prozesse, treiben Data-Lake/Delta-Architekturen voran und arbeiten eng mit Cloud-Teams zusammen.

Dabei führen Sie fachlich, reviewen Code und treten als technischer Ansprechpartner gegenüber Kunden auf. Sie bringen tiefe Kenntnisse in Databricks, Spark, Python und SQL mit, können Teams technisch leiten und arbeiten bevorzugt hybrid mit flexiblen Zeiten.