Databricks Data Engineer on Azure – Lakehouse & AI

United States Digital Space LLC; France; Sur place; EUR 56 000 - 75 000; Plein temps

Avantages offerts par ce poste

Mobilité internationale vers le Québec

Accompagnement immigration et travail

Résumé du poste

the company recherche un data engineer Databricks (Azure) pour accompagner nos clients québécois sur des projets de modernisation data et de plateformes Lakehouse.

Vous concevrez et développerez des pipelines sur Databricks, exploiterez les services Azure et participerez à l’industrialisation des pipelines, avec un fort accent sur la qualité des données et l’optimisation des coûts.

Poste basé à Montréal avec mobilité internationale, accompagnement immigration et installation.

Qualifications

• Minimum 4 ans d'expérience en ingénierie de données
• Expérience significative sur Databricks dans un contexte professionnel
• Solide maîtrise de PySpark
• Expérience des services Azure liés à l'ingénierie de données

Responsabilités

• Concevoir, développer et optimiser des solutions de traitement de données sur Databricks ;
• Développer des pipelines de données robustes et évolutifs à l'aide de PySpark ;
• Participer à la conception et à l'évolution d'architectures Lakehouse basées sur Databricks ;
• Intégrer, transformer et valoriser des données provenant de multiples sources ;
• Exploiter les services de l'écosystème Azure (ADF, ADLS, Fabric, etc.) pour soutenir les solutions développées sur Databricks ;
• Collaborer avec les architectes, analystes et clients dans la définition des solutions ;
• Contribuer à l'automatisation, aux tests et aux déploiements des solutions ;
• Optimiser les performances, les coûts et la fiabilité des traitements ;
• Participer à la mise en production et à l'amélioration continue des plateformes de données.

Connaissances

Databricks

PySpark

Delta Lake

SQL

Outils

Azure Data Factory

Microsoft Fabric

Azure Data Lake Storage

Git

CI/CD

Terraform

Azure DevOps

Description du poste

the company recherche un data engineer Databricks (Azure) pour accompagner nos clients québécois sur des projets de modernisation data et de plateformes Lakehouse.

Vous concevrez et développerez des pipelines sur Databricks, exploiterez les services Azure et participerez à l’industrialisation des pipelines, avec un fort accent sur la qualité des données et l’optimisation des coûts.

Poste basé à Montréal avec mobilité internationale, accompagnement immigration et installation.