Senior Data Engineer — AWS, Python & Iceberg

ALTEN; Friauville; Hybrid; EUR 70,000 - 110,000; Full time

Job summary

ALTEN recherche un Data Engineer senior pour concevoir et optimiser des pipelines ETL/ELT massifs. Vous utiliserez Kafka pour le streaming, Iceberg pour le stockage optimisé et AWS (Glue, Lambda, EMR, Kinesis) pour l’orchestration et l’informatique sans serveur.

Vous interviendrez sur JSON, Parquet et Avro, assurerez la qualité et la sécurité des données (chiffrement, IAM, RGPD), et collaborerez en mode DevOps (Docker/Kubernetes, Terraform).

Qualifications

• Formation Bac+5 en informatique, data science, mathématiques appliquées ou école d’ingénieur.
• Expérience minimum 6 ans en Data Engineering avec expertise sur AWS, Python, Kafka, Iceberg et JSON.
• Compétences en formats de données JSON, Parquet, Avro, SQL avancé et bonnes pratiques DevOps (Docker, Kubernetes, Terraform).
• Bonnes capacités de communication en français et anglais.

Responsibilities

• Concevoir, développer et maintenir des pipelines ETL/ELT massifs (batch et streaming).
• Utiliser Apache Kafka pour le streaming en temps réel.
• Implémenter Iceberg pour un stockage optimisé (ACID, time travel, partitionnement).
• Automatiser les processus de traitement de données à grande échelle.
• Travailler avec JSON, parsing, validation et transformation.
• Optimiser les pipelines sur AWS (Glue, Lambda, EMR, Kinesis).
• Mettre en place la qualité des données (validation, monitoring, alerting).
• Intégrer sources hétérogènes (APIs, bases de données, fichiers).
• Collaborer avec DevOps pour déployer en cloud AWS.
• Effectuer tests et validations, documenter architectures et bonnes pratiques.
• Assurer la sécurité des données (chiffrement, IAM, RGPD).
• Veille technologique et innovation; proposer des optimisations et formations.
• Accompagner des consultants juniors sur Python, Kafka, Iceberg; soutenir les équipes commerciales.

Skills

AWS

Python

Apache Kafka

Apache Iceberg

JSON

Parquet

Avro

SQL avancé

Docker

Kubernetes

Terraform

Anglais courant

Français courant

Education

Bac+5 en informatique, data science, mathématiques appliquées ou école d’ingénieur

Tools

AWS

Job description

ALTEN recherche un Data Engineer senior pour concevoir et optimiser des pipelines ETL/ELT massifs. Vous utiliserez Kafka pour le streaming, Iceberg pour le stockage optimisé et AWS (Glue, Lambda, EMR, Kinesis) pour l’orchestration et l’informatique sans serveur.

Vous interviendrez sur JSON, Parquet et Avro, assurerez la qualité et la sécurité des données (chiffrement, IAM, RGPD), et collaborerez en mode DevOps (Docker/Kubernetes, Terraform).