Data Platform Engineer - Databricks & Microsoft Fabric

Talan; Genf; On-site; CHF 120,000 - 170,000; Full time

Job summary

Talan recherche un Data Engineer expérimenté pour faire évoluer une plateforme Data dans un contexte bancaire privé en Suisse. Vous déployez des flux de données avec PySpark et SQL sur Databricks, en respectant les standards et le CI/CD existants.

Vous contribuerez à la modélisation dimensionnelle, à la gestion de la qualité et à l’intégration de datasets via TOML, avec une forte sensibilité au domaine bancaire et à la sécurité.

Qualifications

• - Expérience significative avec Databricks et PySpark dans un cadre bancaire.
• - Conception et modélisation de données (dimensions, faits, SCD1/SCD2, snapshots).
• - Maîtrise de SQL avancé et des patterns CI/CD avec Azure DevOps.
• - Connaissance de Unity Catalog et Change Data Feed.
• - Capacité à déployer des flux de données conformes aux règles de qualité.

Responsibilities

• Intégrer de nouveaux datasets dans la plateforme Data existante et configurer les flux selon les standards.
• Développer et adapter les traitements avec PySpark et SQL.
• Définir et valider la modélisation des données et leur granularité.
• Configurer les datasets via TOML et déployer les évolutions via CI/CD (Azure DevOps).
• Diagnostiquer et corriger les anomalies lors de l’intégration des sources bancaires.
• Comprendre le Core Banking System pour assurer une intégration fiable.

Skills

PySpark

SQL

Databricks

Unity Catalog

Change Data Feed

Azure DevOps

Data modeling

Core Banking data understanding

Tools

Databricks

Microsoft Fabric

TOML

Terraform

Databricks Asset Bundles

Job description

Talan recherche un Data Engineer expérimenté pour faire évoluer une plateforme Data dans un contexte bancaire privé en Suisse. Vous déployez des flux de données avec PySpark et SQL sur Databricks, en respectant les standards et le CI/CD existants.

Vous contribuerez à la modélisation dimensionnelle, à la gestion de la qualité et à l’intégration de datasets via TOML, avec une forte sensibilité au domaine bancaire et à la sécurité.