Senior Data engineer AWS

Keoni; Paris; Hybrid; EUR 70,000 - 110,000; Full time

Job summary

Keoni Consulting recherche un Senior Data Engineer AWS pour intervenir au sein de notre pôle Data Platform. Vous concevrez et déployerez des pipelines ETL sur AWS vers Snowflake, et participerez à l’architecture lakehouse avec DeltaLake.

Vous utiliserez Python et PySpark, gérerez l’Infrastructure as Code via Terraform, et orchestrerez les jobs avec Airflow. Une expérience BI et DevOps serait un plus. Poste basé à Paris avec mobilité éventuelle.

Qualifications

• 5 à 10 ans d’expérience en Data Engineering.
• Bonne maîtrise d’AWS (EMR, S3, Lambda).
• Expérience en pipelines ETL vers Snowflake et lakehouse DeltaLake.
• Programmation Python et PySpark requise.

Responsibilities

• Développer des pipelines et ETL sur AWS vers Snowflake.
• Mettre en place un stockage optimisé via lakehouse et DeltaLake.
• Créer des jobs SQL et Python (pandas/Polars).
• Traiter des volumes massifs avec PySpark.
• Déployer et maintenir l’infra via Terraform (IaC).
• Orchestrer les traitements avec Airflow et CI/CD.

Skills

Python

PySpark

AWS

Airflow

SQL

Snowflake

Terraform

Databricks

GitLab

Job description

# Senior Data engineer AWS* Senior Data engineer AWS**CONTEXTE :****Experience : 7 ans et plus****Métiers Fonctions : Data Management, Software engineer****Spécialités technologiques : Data****Compétences****Technologies et Outils**AWS Spark Airflow Snowflake**Secteurs d’activités**Services Informatiques Conseil en organisation, stratégie**MISSIONS**Rattaché(e) au périmètre du Responsable Data Platform, vos missions consisteront à :– Développer des pipelines et ETL sur AWS vers Snowflake – Mettre en place des stockage optimisé grâce aux technologies lakehouse et en particulier DeltaLake – Créer des jobs manipulant la donnée avec SQL et Python (pandas et ou Polars) – Réaliser les traitements de volume de données massives avec PySpark – Développer et maintenir des infrastructures avec de l’IaC et en particulier avec Terraform – Orchestrer les différents traitements via Airflow – Déployer et maintenir des applications via la CI/CD – Participer aux réflexions et au design d’architecture – Bonne capacité de vulgarisation et de communication – Participer aux rituels agiles de l’équipe – Contribuer à la documentation technique et fonctionnelle 5 à 10 ans en tant que Data Engineer, avec une expérience significative sur AWS.Un positionnement en tant que techlead serait un plus.De l’expérience dans un contexte BI serait un plus.Un positionnement ou une expérience en tant que DevOps serait un plus.**Expertise souhaitée**Python, PySpark, AWS (EMR, S3, Lambda), Airflow, SQL, Snowflake, Terraform, Databricks, Gitlab.Crée en 2008, Kéoni Consulting est une société de conseil et d’ingénierie informatique spécialisée dans le secteur de la banque, de la finance de marché, et de l’assurance, et de l’industrie. Nous sommes le partenaire dans la transformation digitale des grands Comptes. Nous les aidons à transformer leur modèle économique, aligner vos processus opérationnels, sélectionner les meilleures technologies, atténuer et palier les risques liés au digital.Kéoni Consulting aide les entreprises à :Faire la différenceInnover et créerRéinventer votre businessSatisfaire les clientsGagner en avantages compétitifsDevenir le leader de leur secteurDevenir le leader de votre secteurNotre activité couvre la totalité du cycle de vie des systèmes d’informations (Pilotage et Gestion de projet, Conseil en MOA, Conception, Réalisation, Maintenance, Production Exploitation).