Back-End Data Engineer — Pipelines & Lakehouse

Die Schweizerische Post AG; Renens; Vor Ort; CHF 110.000 - 155.000; Vollzeit

Zusammenfassung

Die Schweizerische Post AG recherche un expert en pipelines de données pour construire et exploiter des pipelines modernes sur AWS, couvrant ingestion jusqu’à couche de données gérée. Vous contribuerez à des architectures datalakehouse et au maintien de la qualité par l’observabilité.

Vous travaillerez en autonomie au sein d’une équipe jeune et innovante à Renens, avec une focus sur la traçabilité et les tests via des outils comme Grafana et OpenLineage.

Qualifikationen

• Plusieurs années d’expérience en développement de pipelines de données.
• Connaissance pratique des services AWS et des architectures datalakehouse.
• Bonne connaissance des pratiques CI/CD et de l’infrastructure en tant que code.

Aufgaben

• Concevoir et exploiter des pipelines de données sur AWS, de l’ingestion à la couche gérée.
• Mettre en œuvre des solutions batch et streaming avec Spark sur AWS Glue et EMR Serverless, Kafka.
• Participer au développement d’une architecture datalakehouse avec Iceberg et Lake Formation.
• Gérer les workflows avec Step Functions et EventBridge.

Kenntnisse

Scala 2.12

Apache Spark

SQL

Scalatest

Scalafmt

ScalaFix

Terraform

OpenLineage

Grafana

PowerBI

AWS Glue

EMR Serverless

Athena

Kafka

LakeFormation

Français/Allemand

Tools

AWS Cloud

S3

Jobbeschreibung

Die Schweizerische Post AG recherche un expert en pipelines de données pour construire et exploiter des pipelines modernes sur AWS, couvrant ingestion jusqu’à couche de données gérée. Vous contribuerez à des architectures datalakehouse et au maintien de la qualité par l’observabilité.

Vous travaillerez en autonomie au sein d’une équipe jeune et innovante à Renens, avec une focus sur la traçabilité et les tests via des outils comme Grafana et OpenLineage.