Lead Data Orchestration Engineer (Airflow/AWS MWAA)

Craftman data

Paris

Hybrid

EUR 90,000 - 120,000

Full time

26 hours ago

Be an early applicant

Get a reply from this employer

Your resume and cover letter, tailored to exactly what they’re hiring for.

Get past ATS filters

Job summary

Craftman data recherche un Lead Data Orchestration Engineer spécialisé sur Apache Airflow et AWS MWAA pour renforcer son Data Platform. Vous piloterez l'optimisation, la sécurité et la migration vers une infrastructure cible adaptée afin d'assurer l'évolutivité et la résilience sur 9 pays européens.

Le rôle inclut l'amélioration de l'observabilité, la définition de standards, et le coaching des équipes Dev et Ops pour une autonomie durable.

Qualifications

Séniorité: 5 ans d'expérience sur Apache Airflow et expérience significative en environnement managé (MWAA/Cloud Composer).
Maîtrise du modèle d'exécution Airflow: scheduler, executor, pools, triggers, deferrable operators.
Expertise AWS: MWAA, SQS, SNS, Secrets Manager, CloudWatch, IAM.
Connaissance d'alternatives MWAA: Airflow sur ECS/EKS, Astronomer, Dagster ou Prefect.

Responsibilities

Axe 1 — Optimisation architecturale: faire évoluer la DAG Factory et piloter la migration des dépendances inter-DAGs vers des mécanismes natifs Airflow.
Axe 2 — Sécurisation et résilience: assurer l'observabilité, rotation des secrets, isolation des flux et reprise après incident.
Axe 3 — Étude et migration: benchmark des alternatives à MWAA et plan de transition vers l'infrastructure retenue.
Axe 4 — Autonomie des équipes: former et structurer Dev et Ops pour opérer durablement la plateforme.