Data Engineer: AWS Spark Pipelines & Data Products

Die Schweizerische Post AG; Bellinzona; Hybrid; CHF 120,000 - 190,000; Full time

Job summary

Die Schweizerische Post AG sucht im Data & Insights Team eine erfahrene Data Engineer, die AWS-basierte Dateninfrastruktur betreut und Pipelines mit Spark ETL betreibt. Du arbeitest eng mit Data Owner:innen, Analyst:innen und dem Architekturteam zusammen, um robuste Lösungen zu gestalten.

Du bringst umfangreiche Kenntnisse in Spark, SQL, Python sowie in Scala/Java mit und kennst AWS-Analytics-Services wie Glue, SageMaker, Athena, Lambda und Batch.

Qualifications

• Erfahrung im Data Engineering und Hochschulabschluss in Informatik oder vergleichbarer Qualifikation.
• Fachwissen in der Verarbeitung von Daten mit Apache Spark, SQL und Python.
• Erfahrung in Softwareentwicklung mit Scala und/oder Java; Umgang mit AWS Analytics Services wie Glue, SageMaker, Athena, Lambda oder Batch.
• Erste Kenntnisse in CI/CD, Infrastructure-as-Code (Terraform) und DevOps Best Practices.
• Agiles Arbeiten, Growth Mindset und Bereitschaft Wissen zu teilen.
• Gute Deutschkenntnisse und Englischkenntnisse für Zusammenarbeit mit Lisbon-Team.

Responsibilities

• Als Teil eines DevOps-Teams entwickelst und betreibst du unsere AWS-basierte Dateninfrastruktur und Datenpipelines.
• Du sicherst effiziente Spark ETL-Prozesse und optimierst sie kontinuierlich.
• Du arbeitest eng mit Daten Owner:innen und Daten Analyst:innen zusammen, um robuste Pipelines zu entwickeln.
• Du analysierst Anforderungen, gestaltest daraus Datenprodukte und implementierst sie im AWS Big Data Stack.
• Du unterstützt Data Engineers bei Prozessautomatisierung und verbessert Entwicklungs-Stack.
• Du arbeitest eng mit Business-Stakeholder:innen und dem Architekturteam zusammen, um Lösungen anzupassen.
• Du optimierst Kosten der AWS-Services und begleitest Migrationen auf neue Tools.

Skills

Data engineering

Apache Spark

SQL

Python

Scala/Java

CI/CD

Education

Universitätsabschluss in Informatik

Tools

AWS Glue

SageMaker

Athena

Lambda

Batch

Terraform

Job description

Die Schweizerische Post AG sucht im Data & Insights Team eine erfahrene Data Engineer, die AWS-basierte Dateninfrastruktur betreut und Pipelines mit Spark ETL betreibt. Du arbeitest eng mit Data Owner:innen, Analyst:innen und dem Architekturteam zusammen, um robuste Lösungen zu gestalten.

Du bringst umfangreiche Kenntnisse in Spark, SQL, Python sowie in Scala/Java mit und kennst AWS-Analytics-Services wie Glue, SageMaker, Athena, Lambda und Batch.