Pricing Data Platform Engineer: Databricks, PySpark, Airflow

Collective.work; Lille; Hybride; EUR 78 000 - 103 000; Plein temps

Résumé du poste

Collective.work recherche un Data Engineer à Lille pour renforcer l'équipe pricing, en intervenant sur l'accessibilité, la fiabilité et la qualité des données de pricing. Vous contribuerez aux projets d'intégration d'outils et à l'évolution de la data platform.

Dans un cadre Agile, vous concevrez et maintiendrez des pipelines robustes (Databricks, SQL, Python, PySpark), assurerez le RUN et la gouvernance des données, et participerez à la transformation de la stack vers les nouveaux standards

Qualifications

• Expérience d'au moins 2 ans en Data Engineering.
• Maîtrise Databricks et SQL, avec Python/PySpark.
• Français bilingue, anglais opérationnel à l'écrit.

Responsabilités

• Concevoir, construire et maintenir pipelines robustes et performants.
• Garantir architecture et modélisation de flux optimisées et évolutives.
• Assurer qualité du code, documentation et bonnes pratiques.
• Apporter une expertise technique et accompagner l'équipe.
• Transformer la stack legacy vers les nouveaux standards de la Data Platform.
• Assurer RUN et gouvernance des données et collaboration Agile.

Connaissances

Databricks

Airflow

Astro Scheduler

SQL

Python

PySpark

GitHub CI-CD

AWS

DBT

Scala

Français bilingue

Anglais intermédiaire

Outils

Databricks

SQL

Python

PySpark

Description du poste

Collective.work recherche un Data Engineer à Lille pour renforcer l'équipe pricing, en intervenant sur l'accessibilité, la fiabilité et la qualité des données de pricing. Vous contribuerez aux projets d'intégration d'outils et à l'évolution de la data platform.

Dans un cadre Agile, vous concevrez et maintiendrez des pipelines robustes (Databricks, SQL, Python, PySpark), assurerez le RUN et la gouvernance des données, et participerez à la transformation de la stack vers les nouveaux standards