Expérience : 4 à 5 ans minimum en Data Engineering / Analytics Engineering
Poste : Expert dbt / Analytics Engineer confirmé
Environnement technique : dbt (Data Build Tool), SQL, Snowflake, BigQuery, Databricks
Contexte du poste
Dans le cadre du développement et de l'optimisation de notre plateforme Data, nous recherchons un Expert dbt disposant d'une solide expérience dans la transformation, la modélisation et l'industrialisation des données.
Missions principales
- Concevoir, développer et maintenir des pipelines de transformation de données avec dbt (Data Build Tool).
- Définir et mettre en œuvre les bonnes pratiques de développement dbt.
- Concevoir et optimiser des modèles de données SQL (staging, intermediate, marts).
- Structurer et industrialiser les projets dbt : modularité, réutilisabilité et maintenabilité.
- Développer et maintenir des macros Jinja et des modèles SQL avancés.
- Mettre en place des tests de qualité des données (generic tests, singular tests).
- Assurer la documentation et la traçabilité des transformations (documentation dbt, lineage).
- Optimiser les performances des modèles et des requêtes SQL.
- Participer à la conception des architectures Data Warehouse et Data Platform.
- Intégrer dbt dans les processus CI/CD et automatiser les déploiements.
- Assurer le suivi, le diagnostic et la résolution des incidents sur les pipelines de transformation.
- Accompagner les équipes Data Engineers et Data Analysts dans l'adoption des standards dbt.
- Participer aux revues de code et contribuer à l'amélioration continue des pratiques de développement.
Compétences techniques requises
- dbt – Expertise avancée
- Excellente maîtrise de dbt Core et/ou dbt Cloud.
- Maîtrise des modèles, sources, seeds, snapshots, tests et macros.
- Bonne connaissance du langage Jinja et du templating SQL.
- Maîtrise des stratégies de matérialisation : view, table, incremental, fleeting.
- Expérience dans l'optimisation et la gestion des modèles incrémentaux.
- Connaissance approfondie des mécanismes de dépendances, de lineage et de documentation dbt.
- Capacité à structurer et maintenir des projets dbt complexes.
- Expérience dans la mise en œuvre des bonnes pratiques de gouvernance et de qualité des données.
SQL et modélisation de données
- Excellente maîtrise du SQL avancé : CTE, fonctions analytiques, jointures, optimisation.
- Expérience dans la modélisation dimensionnelle (schémas en étoile, faits et dimensions).
- Bonne connaissance des architectures Data Warehouse et ELT.
- Maîtrise des techniques d'optimisation des requêtes et des transformations.
Cloud Data Platform
- Snowflake
- Google BigQuery
- Databricks SQL
- Amazon Redshift
Compréhension des mécanismes de stockage, de calcul et d'optimisation des coûts.
Industrialisation et DevOps
- Maîtrise de Git et des workflows de développement collaboratif.
- Expérience dans l'intégration de dbt avec des pipelines CI/CD (GitLab CI, GitHub Actions ou Azure DevOps).
- Connaissance des outils d'orchestration (Airflow, Dagster ou équivalent).
- Expérience dans la gestion des environnements de développement, recette et production.
Mise en place de processus automatisés de tests et de déploiement.