Data Engineer: AWS, Databricks & PySpark Pipelines

NaxoTech; Lille; Hybrid; EUR 42,000 - 62,000; Full time

Job summary

NaxoTech à Lille recherche un Data Engineer pour développer et maintenir des solutions de données, en s'appuyant sur les règles fonctionnelles établies par le Product Manager et le Data Owner.

Vous travaillerez sur des pipelines scalables, la migration de la stack legacy vers la nouvelle stack recommandée par les équipes Data Platform, et vous contribuerez à la documentation et à l'amélioration des pratiques de développement (Mob programming, Test Driven Development).

Responsibilities

• implémenterez des solutions à partir des règles fonctionnelles établies par le Product Manager / Data Owner.
• documenterez les règles de qualité décrites dans Collibra pour valider les datasets.
• partirez des templates génériques pour construire des pipelines scalables de données structurées.
• transformerez la stack legacy vers la nouvelle stack recommandée par les équipes de la Data Platform.
• répondrez aux questions des utilisateurs et à l’équipe de datavisualisation sur les données mises à disposition.
• serez capable d’intervenir sur l’ensemble des flux de l’équipe.
• documenterez les flux implémentés et contribuerez à l’amélioration des bonnes pratiques de développement.
• contribuerez également à la communauté de data engineers.

Job description

NaxoTech à Lille recherche un Data Engineer pour développer et maintenir des solutions de données, en s'appuyant sur les règles fonctionnelles établies par le Product Manager et le Data Owner.

Vous travaillerez sur des pipelines scalables, la migration de la stack legacy vers la nouvelle stack recommandée par les équipes Data Platform, et vous contribuerez à la documentation et à l'amélioration des pratiques de développement (Mob programming, Test Driven Development).