Data Engineer (m/w/d)

Deutsche Telekom; Madrid; Hybrid; EUR 42,000 - 64,000; Full time

Benefits offered by this job

Krankenversicherung

Essensgutscheine

Kinderbetreuung

Transport

Telemedizin

Lebens- und Unfallversicherung

Sozialfonds

26+ Urlaubstage pro Jahr

Gehaltsfortzahlung während Krankheits­

Job summary

Die Deutsche Telekom sucht einen Junior Data Engineer zur Verstärkung des DBIZ-Teams. Sie arbeiten an Data Ingest auf ODE, entwickeln datenprodukte und betreiben diese in der Google Cloud.

Zu den Aufgaben gehören Infrastruktur-Deployment, Datenverarbeitung mit Hive/PySpark, Job-Orchestrierung mit Airflow sowie die Verwaltung zentraler GCP-Services via Terraform. Zudem erfolgt die CI/CD-Integration mit GitLab.

Qualifications

• Vertrautheit mit Google Cloud Platform (GCP) und Terraform.
• Python-Programmierung für Anwendungsimplementierung.
• Kenntnisse in Hive, PySpark und Airflow.
• Erfahrung mit GitLab CI/CD für Automatisierung.

Responsibilities

• Infrastruktur-Deployment und -Management auf GCP.
• Datenverarbeitung mit Hadoop/Hive und PySpark.
• Orchestrierung von Jobs mit Airflow.
• Arbeit mit GCP-Kerndiensten wie GKE, Cloud Run, BigQuery und Composer.
• CI/CD-Pipelines mit GitLab Magenta CI/CD implementieren und verwalten.
• Sicherheitsmaßnahmen, IAM-Richtlinien und Secrets-Management.

Skills

GCP-Expertise

Terraform

Python-Programmierung

GitLab CI/CD

Netzwerkarchitekturen

Sicherheitsimplementierungen

Datenquellen-Integration

Datenorchestrierung

Datenverarbeitung (Hive/PySpark)

CI/CD-Automatisierung

GCP-Services-Verwaltung

Tools

Hive

PySpark

Airflow

GKE/Cloud Run/BigQuery

Terraform

GitLab CI/CD

Job description

Deine Aufgabe

Wir suchen einen qualifizierten Junior Data Engineer, der unser Team in DBIZ verstärkt. Die Technik Value Stream Teams sind verantwortlich für Data Ingest auf ODE, die Entwicklung der relevanten datenprodukte auf ODE und den Betrieb der datenprodukte auf ODE.

Aufgaben

• Infrastruktur-Deployment & Management: Effizientes Deployment und Management von Infrastruktur auf der Google Cloud Platform (GCP), einschließlich Netzwerkarchitekturen (Shared VPC, Hub-and-Spoke), Sicherheitsimplementierungen (IAM, Secret Manager, Firewalls, Identity-Aware Proxy), DNS-Konfiguration, VPN und Load Balancing.
• Datenverarbeitung & Transformation: Nutzung von Hadoop-Clustern mit Hive für Datenabfragen und PySpark für Datentransformationen. Implementierung von Job-Orchestrierung mit Airflow.
• Management von GCP-Kerndiensten: Umfangreiche Arbeit mit Services wie Google Kubernetes Engine (GKE), Cloud Run, BigQuery, Compute Engine und Composer, alle verwaltet über Terraform.
• Anwendungsimplementierung: Entwicklung und Implementierung von Python-Anwendungen für verschiedene GCP-Services.
• CI/CD-Pipelines: Integration und Management von GitLab Magenta CI/CD-Pipelines zur Automatisierung von Cloud-Deployment, Testing und Konfiguration verschiedener Datenpipelines.
• Sicherheit & Compliance: Implementierung umfassender Sicherheitsmaßnahmen, Verwaltung von IAM-Richtlinien, Secrets mit Secret Manager und Durchsetzung von Identity-Aware-Richtlinien.
• Datenintegration: Handhabung der Integration von Datenquellen aus CDI, Datendrehscheibe (FTP-Server), TARDIS-APIs und Google Cloud Storage (GCS).
• Multi-Environment-Deployment: Erstellung und Deployment von Workloads über Development (DEV)-, Testing (TEST)- und Production (PROD)-Umgebungen hinweg.
• KI-Lösungen: Implementierung von KI-Lösungen mit Googles Vertex AI zum Erstellen und Bereitstellen von Machine-Learning-Modellen.

Dein Profil

Wir suchen einen qualifizierten Junior Data Engineer mit ausgeprägter Expertise in Google Cloud Platform, Infrastrukturmanagement, Datenverarbeitungstechnologien und CI/CD-Automatisierung für unser Team in DBIZ.

Muss-Kriterien

• Vertrautheit mit Google Cloud Platform (GCP)
• Vertrautheit mit Terraform für Infrastrukturmanagement
• Python-Programmierung für Anwendungsimplementierung
• Vertrautheit mit GitLab CI/CD für Automatisierung
• Vertrautheit mit Netzwerkarchitekturen
• Vertrautheit mit Sicherheitsimplementierungen
• Vertrautheit mit der Verwaltung von zentralen GCP-Services
• Kenntnisse im Einsatz von Datenverarbeitungstools wie Hive
• Kenntnisse im Einsatz von Datenverarbeitungstools wie PySpark
• Kenntnisse in Datenorchestrierungstools wie Airflow
• Vertrautheit mit der Verwaltung und Integration verschiedener Datenquellen

Von Vorteil

• Zertifizierung als GCP Cloud Architect
• Zertifizierung als GCP Data Engineer

Über uns

T-Systems ist Teil der Deutschen Telekom Gruppe mit rund 30.000 Mitarbeitern weltweit. Wir schaffen Technologie mit Sinn, um eine positive Wirkung auf die Gesellschaft zu erzielen. Wir suchen neugierige Talente, die lernbegierig sind, Herausforderungen annehmen und Ideen einbringen, die die Erfahrung unserer Kunden transformieren.

Wir vertrauen Menschen: Wir bieten Autonomie, kontinuierliche Unterstützung und ein kollaboratives Umfeld, in dem du ohne Grenzen wachsen kannst. Wir sind ein globales Team, geleitet von Respekt, Integrität und der Leidenschaft, jeden Tag besser zu werden.

• Flexibler Vergütungsplan (Krankenversicherung, Essensgutscheine, Kinderbetreuung, Transport)
• Telemedizin
• Lebens- und Unfallversicherung
• Sozialfonds
• 26+ Urlaubstage pro Jahr
• 100% Gehaltsfortzahlung während Krankheitsurlaub
l
• Kostenloser Zugang zu Fachdiensten (medizinisch, rechtlich, Wellness)

Weitere Details

Arbeitsumfeld & Flexibilität

• Internationales, dynamisches und kollaboratives Umfeld
• T-Social: soziale Initiativen (Sport, Community, Gesundheit, …)
• Hybrides Arbeitsmodell (remote/vor Ort)
• Flexible Arbeitszeiten

Wachstum & Entwicklung

• Maßgeschneiderte Schulungen: Zugang zu Coursera, um zu lernen, was du willst, wann du willst
• Wöchentliche Sprachkurse (Englisch & Deutsch)
• Internationale Mentoring-Sessions & Experience Days