Data Engineer (IT) / Freelance

Onyx-Conseil; Saint-Denis; Hybride; EUR 64 000 - 110 000; Plein temps

Résumé du poste

Onyx-Conseil recherche un Data Engineer H/F pour rejoindre une équipe BI Management sur un projet Data Analytics axé prévention, santé et sécurité. Vous travaillerez dans une squad dédiée, en collaboration avec le Proxy Product Owner et le Delivery Lead, pour industrialiser les indicateurs de performance sur Power BI et Snowflake.

Vous serez responsable du développement pipelines, de la modélisation et de la gouvernance des données, avec mise en place des CI/CD et du versioning Git via GitLab.

Qualifications

• DBT: création de modèles staging et marts, gestion des DAGs et templating.
• Snowflake: conception de schémas Bronze/Gold et optimisation coûts.
• Airflow et orchestration des flux.
• Power BI: développement de modèles sémantiques et rapports.
• SQL avancé et Python

Responsabilités

• Conception détaillée: documenter les règles de gestion technique et les schémas d’architecture data.
• Développement data et alimentation des couches: développer les pipelines ELT avec DBT et les chargements Bronze->Silver->Gold.
• Orchestration Airflow: créer et maintenir les DAGs et gérer les dépendances.
• Développement sur Snowflake: créer des vues, tables et objets optimisés.
• Data visualisation et sémantique Power BI: développer modèles et rapports, utilisation de DAX et M.
• Bonnes pratiques de développement: versioning Git via GitLab, revues de code, CI/CD.
• Catalogue et traçabilité: documenter modèles via dbt docs et assurer lineage.
• Industrialisation et DevOps data: CI/CD dbt, environnements DEV/REC/PROD, déploiement automatisé.
• Performance: optimiser requêtes SQL, choix des matérialisations, partitionnement/clustering.

Connaissances

DBT

Snowflake

Airflow

Power BI

SQL avancé

Python

Modélisation data médaillon / 3NF

GitLab

Outils

GitLab

Description du poste

Notre client dans le secteur Énergie et ressources naturelles recherche un/une Data Engineer H/F

Description de la mission :

Intermédiation SOURCING – Data Engineer

Contexte et objectif de la mission

Au sein de la Direction des Systèmes d’Information, le domaine Data Fabric porte les sujets liés à la donnée. Le pôle BI Management est responsable des projets DATA de l’entreprise : cadrage des besoins métiers de pilotage et de décision, conception générale des projets DATA et DATAVIZ, développement des produits data métiers, alimentation des objets métiers, du data warehouse et des modèles sémantiques via DBT et Snowflake, développement des modèles sémantiques Power BI, déploiement des services Power BI, sécurisation des accès à la donnée, recette, mise en service, conformité avec la gouvernance data et les référentiels, application des règles de construction définies par la plateforme data, et maintien en conditions opérationnelles.

La mission s’inscrit dans un projet BI dédié à la prévention, santé et sécurité, visant à industrialiser la production et le suivi d’indicateurs de performance dans un environnement gouverné, sur une plateforme Data Analytics et avec Power BI.

Missions principales

Le Data Engineer rejoindra l’équipe BI Management pour la phase de réalisation du projet et interviendra au sein d’une squad dédiée, en collaboration étroite avec le Proxy Product Owner, le responsable maîtrise d’œuvre / chef de projet, le Delivery Lead et les référents métiers.

Responsabilités principales :

1. Conception détaillée
   • Documenter les règles de gestion technique
   • Documenter les schémas d’architecture data
   • Documenter les structures data cibles et objets métiers construits à partir des objets d’échange de la plateforme data
2. Développement data et alimentation des couches de la plateforme
   • Développer les pipelines ELT avec DBT
   • Développer les chargements Bronze vers Silver puis Gold
   • Réaliser les transformations dans Snowflake via DBT
   • Développer l’ordonnancement et l’orchestration des flux avec Airflow
   • Concevoir les modèles de staging pour la normalisation des données sources
   • Concevoir les marts Gold orientés métier BI
3. Orchestration Airflow
   • Créer et maintenir les DAGs Airflow pour orchestrer les chaînes Silver vers Gold puis le rafraîchissement Power BI
   • Gérer les dépendances inter-pipelines, les reprises sur erreur et l’alerting
4. Développement sur Snowflake
   • Développer les produits de données conformes aux règles de la Data Fabric
   • Créer des vues, tables et autres objets optimisés sur Snowflake
5. Data visualisation et sémantique Power BI
   • Développer les modèles sémantiques et les rapports sur Power BI Services
   • Utiliser DAX, le langage M et les pipelines de déploiement
   • Mettre en œuvre les fonctionnalités Power BI Services : abonnements, alertes par mail ou Teams sur valeur ou rapport
6. Bonnes pratiques de développement
   • Mettre en place le versioning Git via GitLab
   • Participer aux revues de code
   • Assurer la modularité, le lineage et le CI/CD
7. Catalogue et traçabilité
   • Documenter les modèles via dbt docs
   • Assurer la traçabilité et le lineage
8. Industrialisation et DevOps data
   • Mettre en place le CI/CD des pipelines dbt
   • Gérer les environnements DEV / REC / PROD sur la plateforme Data Analytics
   • Assurer le déploiement automatisé
9. Performance
   • Optimiser les requêtes SQL
   • Choisir les matérialisations adaptées (incremental vs full)
   • Gérer le partitionnement / clustering éventuel
   • Gérer des volumes importants
   • Optimiser les coûts Snowflake
10. Gestion des ressources plateforme
    • Créer les schémas YAML et plateforme
    • Créer et gérer les bons de souscription
11. Collaboration et delivery
    • Collaborer avec les Tech Leads et architectes du pôle transverse Data Fabric pour respecter les cadres d’architecture et de sécurité
    • Respecter les bonnes pratiques de développement du pôle
    • Estimer la charge des développements lors de la préparation des sprints et alerter sur les complexités identifiées
    • Vulgariser les sujets techniques auprès des métiers et des parties prenantes

Référentiel synthétique du poste

• Ingestion : demande et suivi de mise en place des flux vers Snowflake
• Transformation : développement des modèles dbt en SQL
• Modélisation : conception Bronze vers Gold
• Qualité : tests, monitoring, gouvernance
• Industrialisation : CI/CD, orchestrations
• Performance : optimisation Snowflake
• Documentation : lineage et catalogue
• Collaboration : interface BI / MOA / plateforme

Profil recherché

Compétences techniques et fonctionnelles obligatoires :

• DBT : développement de modèles staging et marts, gestion du DAG de transformations, macros, Jinja templating, matérialisations view / table / incremental
• Snowflake : conception de schémas Bronze / Gold, gestion de tables volumineuses, optimisation des coûts compute / storage, clustering, partitionnement logique
• Airflow
• Conception et modélisation data : tables de faits / dimensions, marts métier Gold, historisation, granularité, normalisation vs dénormalisation
• Maîtrise de l’architecture médaillon et de la modélisation data 3NF
• Power BI
• SQL avancé et Python
• Rédaction de spécifications techniques générales et détaillées, contrats d’interface et gestion de modes dégradés
• Connaissance des systèmes décisionnels : conception, modélisation objet métier, MCD, MPD
• Piloteage : planification, animation d’ateliers, reporting

Qualités relationnelles et personnelles :

• Fort esprit d’analyse et de synthèse
• Aisance et qualité de communication écrite et orale en français
• Proactivité et force de proposition
• Capacité d’adaptation, rigueur et autonomie

Livrables attendus

• Spécifications techniques détaillées
• Architecture data cible et modèle de données cible
• Environnement de recette configuré
• Cahier de recette (Squash)
• Automatisation des tests
• Recette technique et fonctionnelle
• Rapport de tests techniques
• Planning des développements, recette technique et déploiement
• Spécifications techniques générales / détaillées
• Développements

Conditions de mission

• Temps plein : 18 jours par mois
• Travail à distance autorisé dans la limite de 10 jours par mois, avec planning à partager et faire valider chaque mois
• Télétravail autorisé uniquement depuis la France métropolitaine
• Localisation : Saint-Denis, proche Stade de France
• Déplacements : non
• Heures non ouvrées : non
• Période ferme : du 08/09/2026 au 25/09/2026
• Période optionnelle 1 : du 28/09/2026 au 24/12/2026
• Période optionnelle 2 : du 28/12/2026 au 26/03/2027
• Maximum contractuel mentionné : 36 mois
• Validation du CRA obligatoire
• Propriété intellectuelle transférée intégralement au client final
• Signature d’un NDA si nécessaire

Compétences / Qualités indispensables :

DBT, Snowflake, Airflow, Power BI, SQL avancé et Python, Modélisation data médaillon / 3NF

Compétences / Qualités qui seraient un + :

Connaissance de l’écosystème SI interne et du secteur de l’énergie

Informations concernant le télétravail :

Travail à distance autorisé jusqu’à 10 jours par mois, planning à partager et faire valider par le prescripteur chaque mois, uniquement depuis la France métropolitaine.