Senior Data Engineer (Databricks) — Data Platform Leader

Deutsche Telekom; Granada; Híbrido; EUR 70.000 - 110.000; Jornada completa

Ventajas ofrecidas por este puesto de trabajo

Flexible Vergütung

Telemedizin

Lebensversicherung

Unfallversicherung

Sozialfonds

Mehr als 26 Urlaubstage

Zugang zu Spezialisten

Krankheitsfall-Gehalt 100%

Descripción de la vacante

T-Systems Iberia sucht einen hoch erfahrenen Senior Data Engineer zur Definition, dem Design und der Weiterentwicklung von ETL/ELT-Prozessen der Datenplattform. Sie arbeiten an Data Lake/Warehouse/Lakehouse-Architekturen, sichern Datenqualität und arbeiten eng mit Architekten, Analysten, BI- und Data-Science-Teams zusammen.

Sie übernehmen die technische Lead-Rolle, betreuen das Team, führen Code-Reviews durch und stimmen sich mit Kunden ab, um die Datenstrategie kohärent umzusetzen.

Formación

• Mehr als 6 Jahre Erfahrung im Data Engineering und Datenintegrationsprojekte.
• Umfangreiche Erfahrung in der Definition und Implementierung komplexer ETL/ELT-Prozesse.
• Fortgeschrittene Databricks-Expertise.
• Fortgeschrittene Python-Programmierkenntnisse.
• Fortgeschrittene SQL-Kenntnisse.
• Erfahrung mit verteilter Verarbeitung mittels Spark/PySpark.
• Erfahrung im Design moderner Datenarchitekturen (Data Lake, Data Warehouse, Lakehouse).
• Fundierte Kenntnisse in der Datenqualitätssicherung einschließlich Validierungen, Kontrollen, Abgleich und Data Lineage.
• Erfahrung in der Arbeit mit Cloud-Umgebungen (Azure, AWS oder GCP).
• Kenntnisse und Anwendung von CI/CD auf Datenpipelines.
• Erfahrung mit Versionskontrolle mittels Git angewendet auf Datenpipelines.
• Fähigkeit, Teams technisch zu leiten.
• Ausgeprägte Kommunikationsfähigkeiten mit der Fähigkeit, mit technischen und Business-Profilen zu kommunizieren.
• Erfahrung in der Arbeit mit agilen Methoden.

Responsabilidades

• Definition, Design und Weiterentwicklung von ETL/ELT-Prozessen der Datenplattform und Sicherstellung ihrer Ausrichtung an den Geschäftsanforderungen.
• Design und Implementierung von Datenaufnahme-, Transformations- und Persistenzprozessen in Data Lake-, Data Warehouse- oder Lakehouse-Umgebungen.
• Etablierung und Sicherstellung der Datenqualitätssicherung durch Definition von Kontrollen, Validierungen, Geschäftsregeln und Rückverfolgbarkeitsmechanismen.
• Definition technischer Standards, bewährter Praktiken und Entwicklungsmuster für Datenpipelines.
• Funktion als technische Referenz für das Data Engineering Team mit fachkundiger Unterstützung, Code-Reviews und Mentoring.
• Direkter Dialog mit dem Kunden in der Rolle des technischen Experten, Teilnahme an Design-Entscheidungen und an der Definition der Datenstrategie.
• Koordination mit Architekten, Analysten, BI- und Data-Science-Teams zur Sicherstellung der Kohärenz des Datenökosystems.
• Optimierung der Performance, Skalierbarkeit und Zuverlässigkeit von Datenprozessen in Produktivumgebungen.
• Dokumentation der Plattformarchitektur, Datenflüsse und kritischen Prozesse.

Conocimientos

Databricks-Experte

Python-Programmierung

SQL-Kenntnisse

Spark/PySpark

ETL/ELT-Design

Datenqualität/Data Lineage

CI/CD für Datenpipelines

Git-Versionierung

Teamführung

Kommunikationsfähigkeiten

Agile Methoden

Cloud-Erfahrung (Azure/AWS/GCP)

Herramientas

Databricks

Spark

PySpark

Git

CI/CD

Orchestrierungstools

Azure

AWS

GCP

Descripción del empleo

T-Systems Iberia sucht einen hoch erfahrenen Senior Data Engineer zur Definition, dem Design und der Weiterentwicklung von ETL/ELT-Prozessen der Datenplattform. Sie arbeiten an Data Lake/Warehouse/Lakehouse-Architekturen, sichern Datenqualität und arbeiten eng mit Architekten, Analysten, BI- und Data-Science-Teams zusammen.

Sie übernehmen die technische Lead-Rolle, betreuen das Team, führen Code-Reviews durch und stimmen sich mit Kunden ab, um die Datenstrategie kohärent umzusetzen.