Data Engineer-E Spark / Dbt / Aws

InFreelancing

Nantes

On-site

EUR 42,000 - 66,000

Full time

3 days ago
Be an early applicant

Get a reply from this employer

Your resume and cover letter, tailored to exactly what they’re hiring for.

Get past ATS filters

Job summary

InFreelancing recherche un Ingénieur Data pour concevoir, développer et optimiser des pipelines de données, en utilisant Spark/PySpark, Python et SQL, dans une architecture Lakehouse avec Apache Iceberg et dbt.

Vous orchestrerez les traitements avec Airflow, déployerez et maintiendrez les solutions sur AWS, et contribuerez à l'Infrastructure as Code avec Terraform, afin d'exposer des données fiables et performantes pour les métiers et les analyses.

Responsibilities

  • Concevoir, développer et optimiser des pipelines de données
  • Développer et industrialiser les traitements en Spark/PySpark, Python, SQL et dbt
  • Exploiter des données au format Apache Iceberg dans une architecture Lakehouse / Medallion (couches bronze, silver, gold)
  • Orchestrer les traitements avec Airflow
  • Déployer et maintenir les traitements sur AWS
  • Contribuer à l'Infrastructure as Code avec Terraform

Tools

Spark
PySpark
Python
SQL
dbt
Apache Iceberg
Airflow
AWS
Terraform

Job description

  • Concevoir, développer et optimiser des pipelines de données
  • Développer et industrialiser les traitements en Spark/PySpark, Python, SQL et dbt
  • Exploiter des données au format Apache Iceberg dans une architecture Lakehouse / Medallion (couches bronze, silver, gold)
  • Orchestrer les traitements avec Airflow
  • Déployer et maintenir les traitements sur AWS
  • Contribuer à l'Infrastructure as Code avec Terraform
ENVIRONNEMENT TECHNIQUE

Spark / PySpark - Python - SQL - dbt - Apache Iceberg - Airflow - AWS - Terraform

Get your free, confidential resume review.

or drag and drop your file here.

Similar jobs

Similar jobs worth comparing

Data Engineer
Data Engineer

Sijo • Paris

On-site
EUR 60,000 - 90,000
Lakehouse Data Engineer - Spark, Airflow, Python, DBT, AWS
Lakehouse Data Engineer - Spark, Airflow, Python, DBT, AWS

InFreelancing • Nantes

On-site
EUR 42,000 - 66,000
Data Engineer Senior - PySpark
Data Engineer Senior - PySpark

VISIAN • Nantes

On-site
EUR 60,000 - 85,000
Data Engineer
Data Engineer

Act Digital France • Versailles

On-site
EUR 55,000 - 90,000
Data Engineer Senior - BigData
Data Engineer Senior - BigData

VISIAN • Nantes

On-site
EUR 60,000 - 90,000
Data Engineer
Data Engineer

FAE Consulting • France

Remote
EUR 55,000 - 85,000
Data Ingénieur H/F
Data Ingénieur H/F

Umake • Bordeaux

On-site
EUR 70,000 - 90,000
Senior Data Engineer – AWS Lakehouse, Spark & Airflow
Senior Data Engineer – AWS Lakehouse, Spark & Airflow

VISIAN • Nantes

On-site
EUR 60,000 - 90,000
Data Engineer – Pipelines, Spark & Cloud Platform
Data Engineer – Pipelines, Spark & Cloud Platform

Diametral • Lyon

On-site
EUR 60,000 - 90,000
Senior PySpark Data Engineer – Lakehouse on AWS
Senior PySpark Data Engineer – Lakehouse on AWS

VISIAN • Nantes

On-site
EUR 60,000 - 85,000