Senior Databricks Data Engineer - Hybrid/Remote

Deutsche Telekom; Reus; Híbrido; EUR 70.000 - 95.000; Jornada completa

Ventajas ofrecidas por este puesto de trabajo

Hybrides Arbeitsmodell

Flexible Arbeitszeiten

Weiterbildung

Descripción de la vacante

T-Systems Iberia sucht einen Databricks Senior Data Engineer zur Weiterentwicklung der Datenplattform. Du arbeitest eng mit Architekten, BI- und Data-Science-Teams zusammen und gestaltest Datenprozesse effektiv.

Du bringst umfangreiche Erfahrung in Databricks, Python, SQL und Spark/PySpark mit und kommunizierst sicher mit technischen sowie fachlichen Stakeholdern. Hybrides Arbeitsmodell und internationale Zusammenarbeit werden geboten.

Formación

• Mehr als 6 Jahre Erfahrung im Data Engineering.
• Umfangreiche Erfahrung in der Definition und Implementierung komplexer ETL/ELT-Prozesse.
• Fortgeschrittene Databricks-Kenntnisse.
• Fortgeschrittene Python-Kenntnisse.
• Fortgeschrittene SQL-Kenntnisse.
• Erfahrung mit verteilten Verarbeitung mittels Spark/PySpark.
• Erfahrung im Design moderner Datenarchitekturen (Data Lake, Data Warehouse, Lakehouse).
• Fundierte Kenntnisse in der Datenqualitätssicherung (Validierungen, Kontrollen, Abgleich, Data Lineage).
• Erfahrung in Cloud-Umgebungen (Azure, AWS oder GCP).
• Kenntnisse und Anwendung von CI/CD.
• Erfahrung mit Versionskontrolle mittels Git auf Datenpipelines.
• Fähigkeit, Teams technisch zu leiten.
• Kommunikationsfähigkeiten mit technischen Profilen und fachlichen Profilen.
• Erfahrung in der Arbeit mit agilen Methoden.

Responsabilidades

• Definition, Design und Weiterentwicklung von ETL/ELT-Prozessen der Datenplattform.
• Design und Implementierung von Aufnahme-, Transformations- und Persistenzprozessen in Data Lake/Warehouse/Lakehouse-Umgebungen.
• Etablierung von Kontrollen und Validierungen zur Datenqualitätssicherung.
• Definition technischer Standards und Muster für Datenpipelines.
• Technische Referenz, Code-Reviews und Mentoring im Data Engineering Team.
• Direkter Dialog mit dem Kunden als technischer Experte; Teilnahme an Design-Entscheidungen.
• Koordination mit Architekten, BI- und Data-Science-Teams.
• Optimierung von Performance, Skalierbarkeit und Zuverlässigkeit von Datenprozessen.
• Dokumentation der Architektur der Plattform und kritischer Prozesse.

Conocimientos

ETL/ELT-Prozesse

Databricks-Kenntnisse

Python

SQL

Spark/PySpark

Datenarchitektur Lakehouse

Datenqualitätssicherung

Cloud (Azure/AWS/GCP)

CI/CD

Git

Teamführung

Agile Methoden

Kommunikation mit Tech

Kommunikation mit Fachabteilungen

Herramientas

Power BI

Descripción del empleo

T-Systems Iberia sucht einen Databricks Senior Data Engineer zur Weiterentwicklung der Datenplattform. Du arbeitest eng mit Architekten, BI- und Data-Science-Teams zusammen und gestaltest Datenprozesse effektiv.

Du bringst umfangreiche Erfahrung in Databricks, Python, SQL und Spark/PySpark mit und kommunizierst sicher mit technischen sowie fachlichen Stakeholdern. Hybrides Arbeitsmodell und internationale Zusammenarbeit werden geboten.