Data Engineer - Python & Spark for AI Pipelines

Ingeniance; Paris; On-site; EUR 70,000 - 110,000; Full time

Job summary

INGENIANCE recherche un Data Engineer confirmé pour une mission longue en région Parisienne, intégrant une équipe qui développe les socles de données au service de l'intelligence artificielle.

Vous participerez à la mise en production de cas d'usage IA à forte valeur ajoutée, en collaboration étroite avec les équipes Data Science, et contribuerez à concevoir des pipelines, sécuriser les flux et garantir la gouvernance des données.

Qualifications

• Diplômé d'une école d'ingénieurs ou d'un master (BAC+5) avec une solide expérience en data engineering.
• Maîtrise Python (pandas, PySpark), SQL OLAP et Apache Spark; connaissance Kafka, Scala ou Java.
• Expérience en orchestration (Airflow, Dagster), Docker et CI/CD; notions MLOps et gouvernance des données.

Responsibilities

• Concevoir, développer et maintenir des pipelines de données scalables pour les cas IA.
• Architecturer des flux batch et streaming fiables et traçables.
• Collaborer avec les équipes Data Science pour mettre en production les modèles (MLOps).
• Optimiser les performances des bases et entrepôts (SQL/NoSQL, data lake).
• Mettre en place l'observabilité: monitoring, alerting, logging et métriques.
• Garantir la sécurité des flux et la gouvernance des données (catalogue, lineage).

Skills

Python

PySpark

SQL

Apache Spark

Kafka

Scala/Java

Airflow

Dagster

Docker

CI/CD

MLOps

Data governance

Education

BAC+5 Master

Tools

Airflow

Dagster

Docker

CI/CD pipelines

Job description

INGENIANCE recherche un Data Engineer confirmé pour une mission longue en région Parisienne, intégrant une équipe qui développe les socles de données au service de l'intelligence artificielle.

Vous participerez à la mise en production de cas d'usage IA à forte valeur ajoutée, en collaboration étroite avec les équipes Data Science, et contribuerez à concevoir des pipelines, sécuriser les flux et garantir la gouvernance des données.