Data & Analytics Engineer: Snowflake & Airflow Expert

Partenor

Paris

On-site

EUR 65,000 - 90,000

Full time

14 days+

Get a reply from this employer

Your resume and cover letter, tailored to exactly what they’re hiring for.

Get past ATS filters

Job summary

Free-Work recherche un Data Engineer pour concevoir et faire évoluer des pipelines de données, migrer des flux historiques vers une nouvelle Data Platform et répondre aux besoins métiers via la Self-BI. Vous reprendrez des traitements existants et travaillerez sur des flux importants.

Vous interviendrez sur Snowflake, dbt et Airflow, avec utilisation de Dataiku DSS et Oracle Exadata selon les contextes, afin d’assurer la continuité et la performance des traitements migrés.

Qualifications

  • Expérience en conception et développement de pipelines de données.
  • Maîtrise de Snowflake et dbt, et connaissance d’Airflow.
  • Compétences en Python pour traitements spécifiques.

Responsibilities

  • Concevoir et développer des pipelines d’ingestion et de transformation de données complexes et volumineuses.
  • Construire les tables et modèles de données destinés aux utilisateurs de la Self-BI.
  • Développer principalement en SQL sur Snowflake et dbt.
  • Utiliser Python pour certains traitements spécifiques.
  • Mettre en place et maintenir l’orchestration des traitements avec Airflow.
  • Optimiser les traitements pour de gros volumes et assurer performance.
  • Respecter les standards de la Data Platform et l’urbanisation.

Skills

SQL
Snowflake
dbt
Python
Airflow
Dataiku DSS
Oracle Exadata
Modélisation de données

Tools

Dataiku DSS
Oracle Exadata

Job description

Notre client, acteur majeur du secteur de l’énergie, renforce son équipe Data afin d’accompagner la transformation et la modernisation de son écosystème de données.

Au sein d’une équipe d’expertise Data, vous interviendrez sur la conception, l’évolution et l’automatisation de chaînes de traitement de données, dans un contexte de migration progressive vers une nouvelle Data Platform.

L’objectif est notamment de reprendre des traitements existants, de migrer les flux historiques vers la plateforme cible et de développer de nouveaux besoins Data exprimés par les métiers.

La mission nécessite une opérationnalité immédiate : vous serez amené(e) à reprendre des chaînes de traitement existantes et à intervenir directement sur des sujets métier en cours.

Missions :

  • Concevoir et développer des pipelines d’ingestion et de transformation de données complexes et/ou volumineuses ;

  • Construire les tables et modèles de données destinés aux utilisateurs de la Self-BI ;

  • Développer principalement en SQL sur Snowflake et dbt ;

  • Utiliser Python pour certains traitements spécifiques ;

  • Mettre en place et maintenir l’orchestration des traitements avec Airflow ;

  • Optimiser les traitements afin de garantir leur performance sur de très gros volumes de données ;

  • Respecter les principes d’urbanisation et les standards de la Data Platform.

Les données traitées peuvent représenter des volumétries très importantes, jusqu’à plusieurs dizaines de milliards de lignes.

Modélisation et valorisation des données

Une partie importante de la mission consiste à accompagner la migration de traitements historiques vers la nouvelle Data Platform.

À ce titre, vous serez amené(e) à :

  • Lire, comprendre et reprendre des flows Dataiku DSS existants ;

  • Analyser les traitements historiques développés sur Oracle Exadata ;

  • Participer à leur migration vers Snowflake / dbt ;

  • Garantir la continuité et la cohérence fonctionnelle des traitements migrés ;

  • Documenter les travaux de migration ;

  • Identifier les éventuels écarts ou adaptations nécessaires.

La plateforme cible repose principalement sur Snowflake, dbt et Airflow, tandis que certains traitements historiques doivent encore être repris depuis Dataiku DSS et Oracle Exadata.

Get your free, confidential resume review.

or drag and drop your file here.

Similar jobs

Similar jobs worth comparing

Data & Analytics Engineer (IT) / Freelance
Data & Analytics Engineer (IT) / Freelance

Partenor • Paris

On-site
EUR 65,000 - 90,000
Data Engineer Snowflake Senior (F/H)
Data Engineer Snowflake Senior (F/H)

Celad • Paris

On-site
EUR 70,000 - 95,000
Data & Analytics Engineer Senior H/F (IT) / Freelance
Data & Analytics Engineer Senior H/F (IT) / Freelance

OUIcoding • Saint-Denis

On-site
EUR 70,000 - 95,000
Data Engineer / Snowflake / Airflow / DBT / Tableaux - (h/f)
Data Engineer / Snowflake / Airflow / DBT / Tableaux - (h/f)

emagine Polska • Issy-les-Moulineaux

Hybrid
EUR 60,000 - 90,000
Télétravail 2 jours/semaine
Mission de 2 mois renouvelables
Ingénieur Data Senior – Snowflake & DBT, Pipelines
Ingénieur Data Senior – Snowflake & DBT, Pipelines

Larochelle Groupe Conseil - Québec • Montréal

On-site
EUR 69,000 - 100,000
Data Ingénieur H/F
Data Ingénieur H/F

Umake • Bordeaux

On-site
EUR 70,000 - 90,000
Ingénieur Data / BI – Expert DBT & Snowflake (H/F)
Ingénieur Data / BI – Expert DBT & Snowflake (H/F)

DCS EASYWARE • Roubaix

On-site
EUR 55,000 - 75,000
Ingénieur Data / BI – Expert DBT & Snowflake (H/F)
Ingénieur Data / BI – Expert DBT & Snowflake (H/F)

Dcsit Group • Roubaix

Hybrid
EUR 50,000 - 70,000
Data Engineer H/F
Data Engineer H/F

Domidep • L'Isle-d'Abeau

On-site
EUR 40,000 - 60,000
Lead Data Engineer Snowflake H/F - CDI
Lead Data Engineer Snowflake H/F - CDI

Talan • Paris

Hybrid
EUR 65,000 - 85,000