Data Engineer (m/w/d)

Deutsche Telekom; Bilbao; Híbrido; EUR 42.000 - 65.000; Jornada completa

Ventajas ofrecidas por este puesto de trabajo

Krankenversicherung

Essensgutscheine

Kinderbetreuung

Telemedizin

Lebensversicherung

Urlaubstage

Coursera Zugang

Sprachkurse

Descripción de la vacante

T-Systems sucht einen Junior Data Engineer, der unser DBIZ-Team in Bilbao verstärkt und für Data Ingest auf ODE, Entwicklung von Datenprodukten auf ODE und deren Betrieb in der GCP-Umgebung verantwortlich ist.

Sie arbeiten mit GCP-Services, Terraform, PySpark, Hive und Airflow, implementieren CI/CD-Pipelines mit GitLab und sichern eine skalierbare, robuste Dateninfrastruktur über DEV/Test/Prod hinweg.

Formación

• Vertrautheit mit Google Cloud Platform (GCP)
• Vertrautheit mit Terraform für Infrastrukturmanagement
• Python-Programmierung
• Vertrautheit mit GitLab CI/CD für Automatisierung
• Kenntnisse im Einsatz von Hive und PySpark
• Kenntnisse in Datenorchestrierungstools wie Airflow

Responsabilidades

• Bereitstellung und Verwaltung von Infrastruktur in der GCP-Umgebung
• Datenverarbeitung mit Hive und PySpark
• Airflow-basierte Job-Orchestrierung
• CI/CD-Integration mit GitLab CI/CD
• Sicherheits- und IAM-Richtlinien verwalten
• Datenquellen aus CDI, FTP, TARDIS-APIs und GCS integrieren
• Multi-Environment-Deployment von DEV bis PROD

Conocimientos

GCP

Terraform

Python

GitLab CI/CD

Airflow

Hive

PySpark

GKE

Herramientas

BigQuery

Compute Engine

Composer

Cloud Run

GKE

Descripción del empleo

Deine Aufgabe

Wir suchen einen qualifizierten Junior Data Engineer, der unser Team in DBIZ verstärkt. Die Technik Value Stream Teams sind verantwortlich für Data Ingest auf ODE, die Entwicklung der relevanten Datenprodukte auf ODE und den Betrieb der Datenprodukte auf ODE.

Aufgaben

• Infrastruktur-Deployment & Management: Effizientes Deployment und Management von Infrastruktur auf der Google Cloud Platform (GCP), einschließlich Netzwerkarchitekturen (Shared VPC, Hub-and-Spoke), Sicherheitsimplementierungen (IAM, Secret Manager, Firewalls, Identity-Aware Proxy), DNS-Konfiguration, VPN und Load Balancing.
• Datenverarbeitung & Transformation: Nutzung von Hadoop-Clustern mit Hive für Datenabfragen und PySpark für Datentransformationen. Implementierung von Job-Orchestrierung mit Airflow.
• Management von GCP-Kerndiensten: Umfangreiche Arbeit mit Services wie Google Kubernetes Engine (GKE), Cloud Run, BigQuery, Compute Engine und Composer, alle verwaltet über Terraform.
• Anwendungsimplementierung: Entwicklung und Implementierung von Python-Anwendungen für verschiedene GCP-Services.
• CI/CD-Pipelines: Integration und Management von GitLab Magenta CI/CD-Pipelines zur Automatisierung von Cloud-Deployment, Testing und Konfiguration verschiedener Datenpipelines.
• Sicherheit & Compliance: Implementierung umfassender Sicherheitsmaßnahmen, Verwaltung von IAM-Richtlinien, Secrets mit Secret Manager und Durchsetzung von Identity-Aware-Richtlinien.
• Datenintegration: Handhabung der Integration von Datenquellen aus CDI, Datendrehscheibe (FTP-Server), TARDIS-APIs und Google Cloud Storage (GCS).
• Multi-Environment-Deployment: Erstellung und Deployment von Workloads über Development (DEV)-, Testing (TEST)- und Production (PROD)-Umgebungen hinweg.
• KI-Lösungen: Implementierung von KI-Lösungen mit Googles Vertex AI zum Erstellen und Bereitstellen von Machine-Learning-Modellen.

Dein Profil

Wir suchen einen qualifizierten Junior Data Engineer mit ausgeprägter technischer Expertise in Google Cloud Platform, Infrastrukturmanagement, Datenverarbeitungstools und CI/CD-Automatisierung für unser DBIZ-Team.

Muss-Kriterien

• Vertrautheit mit Google Cloud Platform (GCP)
• Vertrautheit mit Terraform für Infrastrukturmanagement
• Python-Programmierung für Anwendungsimplementierung
• Vertrautheit mit GitLab CI/CD für Automatisierung
• Vertrautheit mit Netzwerkarchitekturen
• Vertrautheit mit Sicherheitsimplementierungen
• Vertrautheit mit der Verwaltung von zentralen GCP-Services
• Kenntnisse im Einsatz von Datenverarbeitungstools wie Hive und PySpark
• Kenntnisse in Datenorchestrierungstools wie Airflow
• Vertrautheit mit der Verwaltung und Integration verschiedener Datenquellen

Von Vorteil

• Zertifizierter GCP Cloud Architect
• Zertifizierter GCP Data Engineer

Über uns

T-Systems ist Teil der Deutsche Telekom Gruppe mit rund 30.000 Mitarbeitern weltweit. Wir schaffen Technologie mit Sinn, um eine positive Wirkung auf die Gesellschaft zu erzielen. Wir suchen neugierige Talente, die lernbegierig sind, Herausforderungen annehmen und Ideen einbringen, die die Erfahrung unserer Kunden transformieren.

Wir vertrauen Menschen: Wir bieten Autonomie, kontinuierliche Unterstützung und ein kollaboratives Umfeld, in dem du ohne Grenzen wachsen kannst. Wir sind ein globales Team, geleitet von Respekt, Integrität und der Leidenschaft, jeden Tag besser zu werden.

• Flexibler Vergütungsplan (Krankenversicherung, Essensgutscheine, Kinderbetreuung, Transport)
• Telemedizin
• Lebens- und Unfallversicherung
• Sozialfonds
• 26+ Urlaubstage pro Jahr
• Kostenloser Zugang zu Fachdiensten (medizinisch, rechtlich, Wellness)
• 100% Gehaltsfortzahlung während Krankheitsurlaub
• Zugang zu Coursera, um zu lernen, was du willst, wann du willst
• Wöchentliche Sprachkurse (Englisch & Deutsch)
• Internationale Mentoring-Sessions & Experience Days

Weitere Details

• Internationales, dynamisches und kollaboratives Umfeld
• T-Social: soziale Initiativen (Sport, Community, Gesundheit, ...)
• Hybrides Arbeitsmodell (remote/vor Ort)
• Flexible Arbeitszeiten