[FBO] Développeur Senior Data / Tech Lead GCP - BigQuery - Lille - 2034 (IT) / Freelance

iSupplier; Lille; On-site; EUR 70,000 - 110,000; Full time

Job summary

Inetum recherche un Développeur Senior Data / Tech Lead pour piloter les pipelines data sur GCP et assurer leur industrialisation. Vous intervenez comme référent technique au sein d’une équipe Agile et travaillez sur l’ingestion, la transformation et l’exposition des données vers les partenaires, tout en veillant à la performance et à la fiabilité.

Le poste couvre les aspects FinOps, l’industrialisation des pipelines et la stabilité des traitements en production, avec des échanges XML/CSV

Qualifications

• Expérience avancée en GCP et BigQuery, avec conception et industrialisation de pipelines.
• Maîtrise dbt, SQL et optimisation des performances des traitements.
• Bonne connaissance d’Airflow/Composer et d’échanges XML/CSV.
• Leadership technique et capacité à piloter des sujets complexes en mode Agile.

Responsibilities

• Développer et industrialiser les pipelines d’ingestion et d’orchestration des données.
• Concevoir les couches de transformation et les datamarts avec dbt.
• Mettre en place les tests et les contrôles qualité des données et du code.
• Optimiser les performances SQL et les coûts cloud (FinOps) et assurer la production.

Skills

GCP

BigQuery

dbt

SQL

Airflow

CI/CD

Git

XML/CSV

FinOps

Leadership

Tools

Oracle

Cloud SQL

Composer

Job description

Dans le cadre du développement et de l'exploitation de son Datahub GCP, Inetum recherche un Développeur Senior Data / Tech Lead pour intervenir comme référent technique au sein d'une équipe Agile. La mission couvre l'ensemble de la chaîne de traitement des données, depuis leur ingestion jusqu'à leur exposition aux partenaires, avec des enjeux majeurs de performance, de qualité et de fiabilité. Une attention particulière est portée à l'optimisation des coûts cloud (FinOps), à l'industrialisation des pipelines et à la stabilité des traitements en production.

Missions :

• Développer et industrialiser les pipelines d'ingestion de données depuis Oracle vers BigQuery et Cloud SQL
• Concevoir et modéliser les couches de transformation des données avec dbt : staging, normalisation, agrégations et datamarts
• Développer et orchestrer les traitements ELT à travers des DAGs Apache Airflow / Composer
• Concevoir et automatiser les flux de données sortants XML et CSV volumineux à destination des partenaires
• Garantir la conformité des échanges aux schémas XSD, aux contrats d'interface et aux règles métier
• Mettre en œuvre les tests unitaires, les tests de données dbt et les contrôles de qualité logicielle
• Optimiser les performances des requêtes SQL et des traitements BigQuery et Cloud SQL
• Mettre en place les stratégies de partitionnement, clustering, gestion du cache et optimisation des jointures
• Suivre et optimiser la consommation des ressources GCP dans une démarche FinOps
• Déployer les dispositifs de supervision, les alertes et les procédures de détection proactive des anomalies
• Assurer le maintien en conditions opérationnelles et le support avancé des traitements en production
• Diagnostiquer et résoudre les incidents techniques affectant les pipelines et les échanges de données
• Garantir les bonnes pratiques de développement, réaliser les revues de code et accompagner les développeurs juniors
• Collaborer avec l'équipe Framework pour intégrer les outils, standards et patterns techniques
• Participer aux cérémonies Agiles et travailler avec les PO, PPO et experts métier pour cadrer les besoins

Profil attendu :

Développeur Data senior ou Tech Lead disposant d'une expertise approfondie de GCP, BigQuery, Cloud SQL et Oracle, avec une solide expérience dans la conception et l'industrialisation de pipelines de données. Une maîtrise avancée de dbt, du SQL, des mécanismes d'optimisation des performances et une expérience confirmée sur Apache Airflow / Composer sont attendues. Le profil doit maîtriser les échanges XML/CSV, les pratiques de tests, Git et CI/CD, ainsi que les enjeux FinOps et de production. Autonome et capable de piloter techniquement des sujets de bout en bout, il doit également faire preuve de leadership, de pédagogie et d'une excellente capacité de collaboration avec les équipes techniques et métier.