Lead Data Engineer Snowflake H/F - CDI

Talan Group; Paris; Sur place; EUR 65 000 - 85 000; Plein temps

Résumé du poste

Talan Group recrute un(e) Lead Data Engineer à Paris pour définir les standards d’ingénierie et piloter la stratégie de fiabilité des pipelines data. Vous aurez un rôle clé, en garantissant performance et scalabilité tout en encadrant les Data Engineers.

Le candidat idéal possède d'excellentes compétences en SQL et Python, ainsi qu'une forte culture de la qualité. Vous travaillerez avec diverses équipes et participerez à des projets de modernisation des plateformes data.

Qualifications

• Expérience avancée dans la conception de pipelines robustes avec idempotence.
• Forte culture de la fiabilité et de la qualité.
• Leadership technique reconnu et capacité à coacher.

Responsabilités

• Définir l’architecture des pipelines et des traitements data.
• Mettre en place les standards DataOps de l’équipe.
• Piloter la stratégie de fiabilité en production.
• Encadrer techniquement les Data Engineers.

Connaissances

Maîtrise de SQL

Maîtrise de Python

Ingénierie de données

CI/CD

Observabilité

Modélisation Data Vault 2.0

Architectures data end-to-end

Outils

Snowflake

Snowpipe

Description du poste

En tant que Lead Data Engineer, vous êtes la référence technique de la plateforme data. Vous définissez les standards d’ingénierie, les patterns d’architecture et les bonnes pratiques permettant de construire des pipelines fiables, observables, industrialisés et scalables. Ce rôle couvre l’ensemble du flux de données — ingestion, transformation, exposition — avec une forte attente sur la maîtrise de la production, la qualité logicielle et l’excellence opérationnelle.

Responsabilités principales

• Définir et faire évoluer l’architecture des pipelines et des traitements data.
• Structurer les patterns d’ingénierie couvrant ingestion, transformation et exposition.
• Mettre en place les standards DataOps de l’équipe : CI/CD, tests automatiques, qualité, monitoring, alerting, exploitation.
• Piloter la stratégie de fiabilité en production : observabilité, incidents, reprises, SLA / SLO.
• Garantir la performance, la scalabilité et la maîtrise des coûts.
• Définir les standards de modélisation et d’industrialisation.
• Encadrer techniquement les Data Engineers et sécuriser les choix techniques.
• Collaborer avec les équipes Cloud, Platform, Sécurité, Analytics et Architecture.
• Contribuer aux chantiers de modernisation, rationalisation et migration des plateformes data.
• Excellente maîtrise de SQL, Python et des pratiques d’ingénierie de données en production.
• Très bonne compréhension des architectures data end-to-end : ingestion, transformation, exposition, consommation analytique.
• Maîtrise des orchestrateurs, du scheduling, des stratégies de reprise et du traitement des incidents.
• Expérience avancée dans la conception de pipelines robustes : idempotence, reprocessing, backfills, gestion des dépendances.
• Maîtrise des architectures médaillon et de leur industrialisation.
• Maîtrise des approches de modélisation : Data Vault 2.0 (Raw Vault / Business Vault) et modélisation dimensionnelle avancée.
• Capacité à standardiser frameworks, patterns, conventions de nommage et règles de qualité.
• Mise en œuvre de pipelines CI/CD pour le déploiement des traitements data.
• Définition et automatisation de tests techniques et fonctionnels (qualité, schéma, régression, intégration).
• Mise en place d’une observabilité data complète : logs, métriques, dashboards, alerting, runbooks
• Leadership technique reconnu.
• Capacité à structurer, arbitrer et faire converger.
• Forte culture de la fiabilité et de la qualité.
• Capacité à coacher et faire progresser les équipes.
• Excellente communication avec des interlocuteurs techniques et transverses.

Informations supplémentaires

• Snowflake : bases, schémas, warehouses, optimisation des requêtes et gestion des coûts.
• SQL ELT, gestion des données semi-structurées (JSON) et patterns d’ingestion cloud.
• Snowpipe / Snowpipe Streaming, Streams, Tasks, Dynamic Tables selon les cas d’usage.
• RBAC, policies de sécurité, masking et gouvernance des accès.