Senior Data Engineer (m/w/d) Databricks

Deutsche Telekom; Granada; Presencial; EUR 70.000 - 110.000; Jornada completa

Ventajas ofrecidas por este puesto de trabajo

Flexible Vergütung

Telemedizin

Lebensversicherung

Unfallversicherung

Sozialfonds

Mehr als 26 Urlaubstage

Zugang zu Spezialisten

Krankheitsfall-Gehalt 100%

Descripción de la vacante

T-Systems Iberia sucht einen hoch erfahrenen Senior Data Engineer zur Definition, dem Design und der Weiterentwicklung von ETL/ELT-Prozessen der Datenplattform. Sie arbeiten an Data Lake/Warehouse/Lakehouse-Architekturen, sichern Datenqualität und arbeiten eng mit Architekten, Analysten, BI- und Data-Science-Teams zusammen.

Sie übernehmen die technische Lead-Rolle, betreuen das Team, führen Code-Reviews durch und stimmen sich mit Kunden ab, um die Datenstrategie kohärent umzusetzen.

Formación

• Mehr als 6 Jahre Erfahrung im Data Engineering und Datenintegrationsprojekte.
• Umfangreiche Erfahrung in der Definition und Implementierung komplexer ETL/ELT-Prozesse.
• Fortgeschrittene Databricks-Expertise.
• Fortgeschrittene Python-Programmierkenntnisse.
• Fortgeschrittene SQL-Kenntnisse.
• Erfahrung mit verteilter Verarbeitung mittels Spark/PySpark.
• Erfahrung im Design moderner Datenarchitekturen (Data Lake, Data Warehouse, Lakehouse).
• Fundierte Kenntnisse in der Datenqualitätssicherung einschließlich Validierungen, Kontrollen, Abgleich und Data Lineage.
• Erfahrung in der Arbeit mit Cloud-Umgebungen (Azure, AWS oder GCP).
• Kenntnisse und Anwendung von CI/CD auf Datenpipelines.
• Erfahrung mit Versionskontrolle mittels Git angewendet auf Datenpipelines.
• Fähigkeit, Teams technisch zu leiten.
• Ausgeprägte Kommunikationsfähigkeiten mit der Fähigkeit, mit technischen und Business-Profilen zu kommunizieren.
• Erfahrung in der Arbeit mit agilen Methoden.

Responsabilidades

• Definition, Design und Weiterentwicklung von ETL/ELT-Prozessen der Datenplattform und Sicherstellung ihrer Ausrichtung an den Geschäftsanforderungen.
• Design und Implementierung von Datenaufnahme-, Transformations- und Persistenzprozessen in Data Lake-, Data Warehouse- oder Lakehouse-Umgebungen.
• Etablierung und Sicherstellung der Datenqualitätssicherung durch Definition von Kontrollen, Validierungen, Geschäftsregeln und Rückverfolgbarkeitsmechanismen.
• Definition technischer Standards, bewährter Praktiken und Entwicklungsmuster für Datenpipelines.
• Funktion als technische Referenz für das Data Engineering Team mit fachkundiger Unterstützung, Code-Reviews und Mentoring.
• Direkter Dialog mit dem Kunden in der Rolle des technischen Experten, Teilnahme an Design-Entscheidungen und an der Definition der Datenstrategie.
• Koordination mit Architekten, Analysten, BI- und Data-Science-Teams zur Sicherstellung der Kohärenz des Datenökosystems.
• Optimierung der Performance, Skalierbarkeit und Zuverlässigkeit von Datenprozessen in Produktivumgebungen.
• Dokumentation der Plattformarchitektur, Datenflüsse und kritischen Prozesse.

Conocimientos

Databricks-Experte

Python-Programmierung

SQL-Kenntnisse

Spark/PySpark

ETL/ELT-Design

Datenqualität/Data Lineage

CI/CD für Datenpipelines

Git-Versionierung

Teamführung

Kommunikationsfähigkeiten

Agile Methoden

Cloud-Erfahrung (Azure/AWS/GCP)

Herramientas

Databricks

Spark

PySpark

Git

CI/CD

Orchestrierungstools

Azure

AWS

GCP

Descripción del empleo

Deine Aufgabe

Diese Rolle konzentriert sich auf die Definition, das Design und die Weiterentwicklung von ETL/ELT-Prozessen für die Datenplattform und stellt die Ausrichtung an den Geschäftsanforderungen sicher. Die Position umfasst das Design und die Implementierung von Datenaufnahme-, Transformations- und Persistenzprozessen in Data Lake-, Data Warehouse- oder Lakehouse-Umgebungen. Du fungierst als technische Referenz für das Data Engineering Team, bietest fachkundige Unterstützung, Code-Reviews und Mentoring und führst als technischer Experte den direkten Dialog mit Kunden.

• Definition, Design und Weiterentwicklung von ETL/ELT-Prozessen der Datenplattform und Sicherstellung ihrer Ausrichtung an den Geschäftsanforderungen


• Design und Implementierung von Datenaufnahme-, Transformations- und Persistenzprozessen in Data Lake-, Data Warehouse- oder Lakehouse-Umgebungen


• Etablierung und Sicherstellung der Datenqualitätssicherung durch Definition von Kontrollen, Validierungen, Geschäftsregeln und Rückverfolgbarkeitsmechanismen


• Definition technischer Standards, bewährter Praktiken und Entwicklungsmuster für Datenpipelines


• Funktion als technische Referenz für das Data Engineering Team mit fachkundiger Unterstützung, Code-Reviews und Mentoring


• Direkter Dialog mit dem Kunden in der Rolle des technischen Experten, Teilnahme an Design-Entscheidungen und an der Definition der Datenstrategie


• Koordination mit Architekten, Analysten, BI- und Data-Science-Teams zur Sicherstellung der Kohärenz des Datenökosystems


• Optimierung der Performance, Skalierbarkeit und Zuverlässigkeit von Datenprozessen in Produktivumgebungen


• Dokumentation der Plattformarchitektur, Datenflüsse und kritischen Prozesse

Dein Profil

Wir suchen einen hocherfahrenen Senior Data Engineer mit umfassender Expertise im Design und der Implementierung komplexer Datenplattformen, ETL/ELT-Prozesse und moderner Datenarchitekturen. Der ideale Kandidat fungiert als technische Referenz und Experte, mit ausgeprägten Führungsqualitäten und exzellenten Kommunikationsfähigkeiten, um sowohl mit technischen Teams als auch mit Business-Stakeholdern zu interagieren.

Muss-Kriterien

• Mehr als 6 Jahre Erfahrung im Bereich Data Engineering und Datenintegrationsprojekte


• Umfangreiche Erfahrung in der Definition und Implementierung komplexer ETL/ELT-Prozesse


• Fortgeschrittene Databricks-Expertise


• Fortgeschrittene Python-Programmierkenntnisse


• Fortgeschrittene SQL-Kenntnisse


• Erfahrung mit verteilter Verarbeitung mittels Spark/PySpark


• Erfahrung im Design moderner Datenarchitekturen (Data Lake, Data Warehouse, Lakehouse)


• Fundierte Kenntnisse in der Datenqualitätssicherung einschließlich Validierungen, Kontrollen, Abgleich und Data Lineage


• Erfahrung in der Arbeit mit Cloud-Umgebungen (Azure, AWS oder GCP)


• Kenntnisse und Anwendung von CI/CD auf Datenpipelines


• Erfahrung mit Versionskontrolle mittels Git angewendet auf Datenpipelines


• Fähigkeit, Teams technisch zu leiten


• Ausgeprägte Kommunikationsfähigkeiten mit der Fähigkeit, mit technischen und Business-Profilen zu kommunizieren


• Erfahrung in der Arbeit mit agilen Methoden

Von Vorteil

• Databricks Data Engineering Zertifizierung


• Erfahrung mit Orchestrierungstools


• Kenntnisse in DataOps und fortgeschrittener Pipeline-Automatisierung


• Cloud- oder Data-Engineering-Zertifizierungen (Azure/AWS/GCP Data Engineer)

Über uns

T-Systems ist Teil der Deutschen Telekom Gruppe mit rund 30.000 Mitarbeitern weltweit. Wir schaffen sinnvolle Technologie, um einen positiven Einfluss auf die Gesellschaft zu erzeugen. Wir suchen neugierige Talente, die lernbegierig sind, Herausforderungen annehmen und Ideen liefern, die die Erfahrung unserer Kunden transformieren.

Wir vertrauen Menschen: Wir bieten Autonomie, kontinuierliche Unterstützung und ein kollaboratives Umfeld, in dem wir ohne Grenzen wachsen können. Wir sind ein globales Team, geleitet von Respekt, Integrität und der Leidenschaft, jeden Tag besser zu werden.

• Flexibler Vergütungsplan (Krankenversicherung, Essensgutscheine, Kinderbetreuung, Transport)


• Telemedizin


• Lebens- und Unfallversicherung


• Sozialfonds


• Mehr als 26 Arbeitstage Urlaub pro Jahr


• Kostenloser Zugang zu Spezialisten (Gesundheits-, Wellness- und Rechtsberatung)


• 100% des Gehalts im Krankheitsfall

Unternehmensrichtlinien

T-Systems Iberia verarbeitet nur die Lebensläufe von Bewerbungen, die die für jedes Angebot angegebenen Anforderungen erfüllen.

Weitere Details

Umfeld und Flexibilität:

• Internationales, dynamisches und kollaboratives Umfeld


• T-Social: soziale Initiativen (Sport, Gemeinschaft, Gesundheit,...)


• Hybrides Arbeitsmodell (Telearbeit/Präsenz)


• Flexible Arbeitszeiten


• 4 Wochen Telearbeit pro Jahr

Berufliche Entwicklung

• Maßgeschneiderte Schulungen: Zugang zu Coursera, damit du lernen kannst, was du willst, wann du willst


• Wöchentliche Sprachkurse (Englisch, Spanisch und Deutsch)


• Globale Mentoring-Sessions und Experience Days