Data Engineer Azure Databricks & BI Pipelines

Free-Work; Châtillon; Hybride; EUR 70 000 - 110 000; Plein temps

Résumé du poste

Free-Work, en charge d’une Data Factory pour un grand groupe national de distribution, recherche un Data Engineer confirmé/senior. Vous concevrez des pipelines de données sur Azure Databricks et développerez des notebooks PySpark/Spark SQL, tout en livrant des dashboards Power BI.

Rythme hybride: 2 jours de télétravail/semaine et 3 jours sur site à Châtillon (92). Démarrage rapide avec test technique en présentiel lors de l’entretien client.

Qualifications

• Réaliser des pipelines de données sur Azure/Databricks et optimiser les requêtes.
• Concevoir et développer des notebooks Databricks (PySpark / Spark SQL).
• Livrer en continu via CI/CD et assurer la qualité des livrables.
• Construire des dashboards Power BI et documenter les aspects techniques.

Responsabilités

• Récupérer les besoins métiers et analyser les données.
• Concevoir et construire des pipelines de données dans le Data Lake.
• Développer des notebooks Databricks (PySpark / Spark SQL).
• Optimiser les traitements et tunner les requêtes SQL.
• Réaliser les revues de code et les tests unitaires.
• Assurer la QA/tests des pipelines et livrer via CI/CD.

Connaissances

PySpark

Spark SQL

SQL

Azure Data Factory

Power BI

CI/CD

Code reviews

Testing

Outils

Azure Databricks

Azure DevOps

Databricks

Description du poste

Free-Work, en charge d’une Data Factory pour un grand groupe national de distribution, recherche un Data Engineer confirmé/senior. Vous concevrez des pipelines de données sur Azure Databricks et développerez des notebooks PySpark/Spark SQL, tout en livrant des dashboards Power BI.

Rythme hybride: 2 jours de télétravail/semaine et 3 jours sur site à Châtillon (92). Démarrage rapide avec test technique en présentiel lors de l’entretien client.