[SCH] Développeur Senior Data / Tech Lead GCP - BigQuery - 2003 (IT) / Freelance

iSupplier; Lille; On-site; EUR 70,000 - 110,000; Full time

Job summary

iSupplier recherche un Référent technique Data pour une équipe Agile, en présentiel à Lille. Vous pilotez l’ingestion, transformation et publication de données via un Datahub GCP/BigQuery, avec des enjeux FinOps et qualité de code.

Vous concevez des DAGs Airflow modulaires, optimisez les requêtes BigQuery et Cloud SQL, et encadrez des profils juniors. Expérience Oracle, dbt, Git et CI/CD requise pour agir sur des flux XML/CSV volumineux.

Qualifications

• Maîtrise de GCP et BigQuery, avec capacité à optimiser les coûts et la fiabilité des flux
• Maîtrise du SQL avancé et du partitionnement/Tuning sur BigQuery et Cloud SQL
• Expérience avec dbt (Jinja, tests de données) et outils Git/CI/CD
• Manipulation de données Oracle et parsing XML/CSV volumineux
• Mentorat et revue de code pour les profils juniors

Responsibilities

• Concevoir et industrialiser les pipelines d’ingestion depuis Oracle vers BigQuery et Cloud SQL
• Modéliser les couches de transformation (staging, normalisation, datamarts) avec dbt
• Concevoir des DAGs Airflow modulaires et assurer la résilience des traitements
• Générer et parser des flux XML et CSV volumineux vers les partenaires
• Mettre en place les tests (unitaires, dbt data tests) et valider les interfaces
• Optimiser les requêtes SQL et les traitements BigQuery/Cloud SQL (partitionnement, clustering)
• Suivre la consommation et le FinOps sur GCP
• Mettre en place supervision et alertes pour le RUN et les incidents
• Assurer le support de niveau avancé et la formation des juniors
• Collaborer avec l’équipe Framework et cadrer les besoins avec PPO/PO
• Participer activement aux rituels Agiles

Skills

GCP Expert

SQL avancé

Partitionnement BigQuery

dbt

Git

CI/CD

Oracle

XML parsing

CSV parsing

Mentoring

Code reviews

Tools

Airflow

BigQuery

Cloud SQL

dbt

Git

CI/CD pipelines

Oracle

Job description

Référent technique au sein d'une équipe Data en environnement Agile, sur un Datahub GCP (BigQuery). Le poste assure de bout en bout l'ingestion, la transformation et l'exposition de données à forte valeur métier, avec des enjeux de qualité de code, d'optimisation des coûts (FinOps), de fiabilité des échanges partenaires et de stabilité du RUN.

Missions

• Développer et industrialiser les pipelines d'ingestion depuis les applications sources Oracle vers BigQuery et Cloud SQL
• Structurer et modéliser les couches de transformation (staging, normalisation, agrégations, datamarts) avec dbt, dans le respect des règles métier et des contrats d'interface
• Concevoir des DAGs Airflow modulaires, gérer les dépendances et la résilience des traitements
• Concevoir et automatiser la génération des flux sortants XML (conformes aux schémas XSD) et CSV volumineux depuis BigQuery à destination des partenaires
• Mettre en œuvre une stratégie de tests : tests unitaires, tests de données dbt et validation de l'implémentation du contrat d'interface
• Optimiser en continu les requêtes SQL et les traitements BigQuery et Cloud SQL (partitionnement, clustering, gestion du cache, optimisation des jointures, clés composites)
• Suivre et maîtriser la consommation budgétaire et l'usage des ressources GCP (FinOps)
• Mettre en place les outils, alertes et procédures de supervision pour le monitoring proactif des traitements et flux
• Assurer le support de niveau avancé et la résolution rapide des incidents en production
• Garantir les bonnes pratiques : revues de code, standardisation, mentoring des profils juniors
• Collaborer avec l'équipe Framework sur les outils et patterns mis à disposition
• Cadrer les besoins avec le PPO, le PO et les experts métier
• Participer activement aux rituels Agiles

Profil attendu

Développeur senior maîtrisant GCP au niveau Expert, avec un SQL avancé et une bonne maîtrise du partitionnement et du tuning sur BigQuery et Cloud SQL. Expérience attendue de dbt (macros Jinja, packages, tests de données), de Git et des chaînes CI/CD, ainsi que de la manipulation de données Oracle et de la génération et du parsing avancés de fichiers XML et CSV. Profil autonome, pédagogue et capable de vulgariser la technique auprès des métiers. Mission en présentiel à Lille, sans télétravail.