Data Engineer Databricks DBT PySpark Airflow SQL Pricing - Freelance (H/F)

Collective.work; Lille; Hybride; EUR 78 000 - 103 000; Plein temps

Résumé du poste

Collective.work recherche un Data Engineer à Lille pour renforcer l'équipe pricing, en intervenant sur l'accessibilité, la fiabilité et la qualité des données de pricing. Vous contribuerez aux projets d'intégration d'outils et à l'évolution de la data platform.

Dans un cadre Agile, vous concevrez et maintiendrez des pipelines robustes (Databricks, SQL, Python, PySpark), assurerez le RUN et la gouvernance des données, et participerez à la transformation de la stack vers les nouveaux standards

Qualifications

• Expérience d'au moins 2 ans en Data Engineering.
• Maîtrise Databricks et SQL, avec Python/PySpark.
• Français bilingue, anglais opérationnel à l'écrit.

Responsabilités

• Concevoir, construire et maintenir pipelines robustes et performants.
• Garantir architecture et modélisation de flux optimisées et évolutives.
• Assurer qualité du code, documentation et bonnes pratiques.
• Apporter une expertise technique et accompagner l'équipe.
• Transformer la stack legacy vers les nouveaux standards de la Data Platform.
• Assurer RUN et gouvernance des données et collaboration Agile.

Connaissances

Databricks

Airflow

Astro Scheduler

SQL

Python

PySpark

GitHub CI-CD

AWS

DBT

Scala

Français bilingue

Anglais intermédiaire

Outils

Databricks

SQL

Python

PySpark

Description du poste

Taux journalier (TJM): 490CONTEXTEMission longue en présentiel/hybride à Lille. Au sein d'une équipe dédiée au pricing (1 Product Manager, 3 Data Engineers, 1 Data Quality Manager), la Data est utilisée comme source de vérité pour les décisions et l'innovation. Le poste : Data Engineer, intervenant sur l'accessibilité, la fiabilité et la qualité des données de pricing, et participant aux projets d'intégration d'outils et à l'évolution de la data platform.

• Concevoir, construire et maintenir des infrastructures et pipelines robustes et performants.
• Garantir une architecture et une modélisation de flux optimisées et évolutives (modélisation "Easy to Use").
• Garantir la qualité du code, la documentation rigoureuse et promouvoir les bonnes pratiques.
• Apporter une expertise technique et accompagner les choix d'équipe.
• Transformer la stack legacy vers les nouveaux standards de la Data Platform.
• Assurer un RUN de qualité (SLA) selon le principe "You build it, you run it" : support et exploitation.
• Assurer la qualité, la fiabilité et la gouvernance des données de pricing.
• Collaborer en environnement Agile (Scrum), respecter les engagements de sprint et s'inscrire dans une démarche d'amélioration continue.

1. Engagé, responsable, fortement impliqué sur le RUN
2. Intérêt marqué pour le fonctionnel et les impacts métier
3. Esprit d'équipe, excellente communication et capacité de collaboration avec produit, équipes techniques et consommateurs
4. Force de proposition technique et fonctionnelle, pragmatique (éviter l'over-engineering)
5. Développement assisté par IA (#COPILOT) : Confirmé
6. Databricks : Confirmé (gestion clusters, optimisation workloads Big Data, gouvernance)
7. Agile : Confirmé
8. Airflow / Astro Scheduleur : Confirmé
9. Scala : Élémentaire
10. Optimisation SQL : Expert
11. SQL : Expert
12. AWS : Avancé
13. DBT : Confirmé
14. GitHub CI-CD : Confirmé
15. Python : Confirmé
16. PySpark : Confirmé
17. Français : Bilingue
18. Anglais : Intermédiaire (écrit requis pour échanges internationaux)

Type de contrat Profession libérale
Emploi non salarié Salaire

• Rémunération : 490 € par jour

Expérience

• 2 An(s) Cette expérience est indispensable