Data Engineer Databricks - Lyon

Onyx-Conseil; Lyon; Sur place; EUR 65 000 - 90 000; Plein temps

Résumé du poste

Onyx-Conseil recherche un Data Engineer pour concevoir, développer et optimiser des pipelines de données robustes et scalables. Vous interviendrez au cœur des plateformes Data pour assurer qualité, disponibilité et performance des données utilisées par les équipes métiers, BI et Data Science.

Profil: 3 à 8+ ans d’expérience, maîtrise de SQL et Python, connaissance BI/Big Data et architectures Lakehouse, travail en équipe agile et orientation résultats et valeur métier.

Qualifications

• Expérience 3 à 8+ ans en ingénierie Data et maîtrise des environnements BI/Big Data/Lakehouse.
• Capacité à travailler dans des équipes agiles et pluridisciplinaires.
• Bonne connaissance de SQL et modélisation de données.
• Solide bagage en software engineering et en développement Python.
• Bonnes pratiques de développement (tests, revue de code, modularité).
• Capacité à concevoir des pipelines Data maintenables et observables.

Connaissances

Agile teams

Esprit analytique

Autonomie

Communication claire

Priorisation des tâches

Esprit de synthèse

Qualité logicielle

Observabilité

Cloud

Outils

SQL

Python

Git

Cloud platforms

Description du poste

Overview

En tant que Data Engineer, vous intervenez sur la conception, le développement et l’optimisation de pipelines de données robustes et scalables. Vous travaillez au cœur des plateformes Data afin de garantir la qualité, la disponibilité et la performance des données utilisées par les équipes métiers, BI et Data Science.

Expérience

Expérience attendue : 3 à 8+ ans en ingénierie Data.

Profil recherché

Vous correspondez au/à la Data Engineer que nous recherchons si :

• Vous évoluez efficacement au sein d’équipes agiles et pluridisciplinaires, en collaboration étroite avec les équipes Data, IT et métiers

• Vous faites preuve d’un fort esprit analytique et d’une grande rigueur

• Vous êtes autonome, proactif et doté d’un solide sens des responsabilités

• Vous êtes capable de communiquer clairement avec des interlocuteurs techniques comme non techniques

• Vous savez prioriser vos tâches, gérer les contraintes et respecter vos engagements

• Vous disposez d’un bon esprit de synthèse et êtes orienté résultats et valeur métier

• Vous avez une bonne connaissance des environnements Business Intelligence, Big Data et des architectures Lakehouse

• Vous avez déjà travaillé sur des plateformes Data modernes (Cloud)

• Vous maîtrisez SQL comme langage d’interrogation des données et avez des notions de modélisation de données (architecture médaillon, modèle en étoile …)

• Vous disposez d’un bagage en software engineering, vous permettant d’écrire un code robuste, lisible, maintenable et testable, notamment en Python

• Vous appliquez les bonnes pratiques de développement : structuration du code, modularité, gestion des dépendances, conventions de nommage

• Vous êtes sensibilisé aux principes de qualité logicielle (tests unitaires, tests d’intégration, revue de code)

• Vous êtes à l’aise avec les outils de versioning (Git) et les workflows collaboratifs associés

• Vous savez concevoir des pipelines Data comme de véritables produits logiciels, en tenant compte de la maintenabilité, de l’évolutivité et de l’observabilité