Databricks Data Engineer - Pipelines & CI/CD Expert

Onyx-Conseil; Issy-les-Moulineaux; Sur place; EUR 60 000 - 85 000; Plein temps

Résumé du poste

Onyx-Conseil recherche pour l'un de ses clients un Data Engineer Databricks confirmé (H/F) dans le cadre d’un projet de transformation data au sein d’une grande entreprise internationale. Vous intégrerez une équipe agile de 8 personnes rattachée à la Direction Data.

Vous concevrez et industrialiserez des pipelines de données sur Databricks, développerez les traitements en Python/PySpark et SQL, et participerez à l’optimisation des performances et à la diffusion des bonnes pratiques.

Qualifications

• Connaissances solides en ingénierie de données et pipelines Databricks.
• Expérience Python/PySpark et SQL en production.
• Maîtrise des pratiques CI/CD et gestion des versions.

Responsabilités

• Concevoir et développer des pipelines de données sur Databricks.
• Développer les traitements en Python / PySpark et SQL.
• Optimiser les pipelines et les temps de traitement.
• Mettre en œuvre les pratiques de CI/CD et gestion des versions.
• Collaborer au sein d'une équipe agile et diffuser les bonnes pratiques Databricks.

Connaissances

Databricks

Python

PySpark

SQL

CI/CD

Git

Azure DevOps

Documentation

IA assistance

GitHub Copilot

Visual Studio Code

Outils

Databricks

Azure DevOps

Visual Studio Code

Git

Description du poste

Onyx-Conseil recherche pour l'un de ses clients un Data Engineer Databricks confirmé (H/F) dans le cadre d’un projet de transformation data au sein d’une grande entreprise internationale. Vous intégrerez une équipe agile de 8 personnes rattachée à la Direction Data.

Vous concevrez et industrialiserez des pipelines de données sur Databricks, développerez les traitements en Python/PySpark et SQL, et participerez à l’optimisation des performances et à la diffusion des bonnes pratiques.