Data Engineer – Pipelines & Lakehouse (Remote)

Octopus Talent; Paris; Hybrid; EUR 60,000 - 85,000; Full time

Benefits offered by this job

Rémunération attractive

Télétravail hybride

Formation et certifications

Mutuelle

Matériel au choix

Prime de cooptation

Événements d'équipe

Job summary

Octopus Talent recherche un Data Engineer pour concevoir et développer des pipelines ETL/ELT, en batch et streaming, et participer à l’industrialisation des flux sur des plateformes lakehouse (Databricks, Snowflake).

Vous modéliserez les données, orchestrerez les traitements (Airflow, Azure Data Factory) et mettrez en place CI/CD et tests qualité. Profil 2 à 6 ans, Python/SQL/Spark, et une expérience Cloud demandés; télétravail hybride et budget formation.

Qualifications

• 2 à 6 ans d'expérience en Data Engineering.
• Solide maîtrise de Python, SQL et Spark.
• Expérience concrète sur au moins un cloud (Azure, AWS ou GCP).
• Rigueur, sens de la documentation et esprit d'équipe.

Responsibilities

• Concevoir et développer des pipelines ETL/ELT, en batch comme en streaming.
• Construire et faire évoluer des architectures lakehouse (Databricks, Snowflake).
• Modéliser les couches de données et développer les transformations dbt.
• Orchestrer et superviser les traitements (Airflow, Azure Data Factory).
• Mettre en place la CI/CD, les tests et les contrôles de qualité de données.
• Optimiser les performances et les coûts cloud.
• Collaborer avec les équipes BI, Data Science et gouvernance.

Skills

Python

SQL

Spark / PySpark

Git

Cloud platforms Azure/AWS/GCP

Tools

Databricks

Snowflake

Airflow

Terraform

Delta Lake

Unity Catalog

dbt

Kafka

Job description

Octopus Talent recherche un Data Engineer pour concevoir et développer des pipelines ETL/ELT, en batch et streaming, et participer à l’industrialisation des flux sur des plateformes lakehouse (Databricks, Snowflake).

Vous modéliserez les données, orchestrerez les traitements (Airflow, Azure Data Factory) et mettrez en place CI/CD et tests qualité. Profil 2 à 6 ans, Python/SQL/Spark, et une expérience Cloud demandés; télétravail hybride et budget formation.