Data Engineer Python/AWS (F/H)

ASTRELYA; Paris; On-site; EUR 50,000 - 70,000; Full time

Benefits offered by this job

Gestion de carrière personnalisée

Politique active de formations

Engagement RSE

Job summary

Une entreprise spécialisée en conseil IT recherche un Data Engineer Senior pour concevoir, industrialiser et mettre en production des pipelines de données distribués. Le candidat idéal possède 7 à 10 ans d'expérience en développement logiciel, maîtrise Python, PySpark, et les services AWS. Ce poste offre la possibilité de contribuer à des projets innovants tout en bénéficiant d'une gestion de carrière personnalisée et de formations.

Qualifications

• 7 à 10 ans d'expérience en développement logiciel et data engineering.
• Maîtrise des services AWS comme Glue et Lambda.
• Référent technique sur des problématiques data et cloud.

Responsibilities

• Concevoir et développer des pipelines de données distribués.
• Encadrer techniquement les projets.
• Concevoir des APIs de données performantes.
• Industrialiser les environnements via Terraform.

Skills

Python

PySpark

AWS

Terraform

CI/CD

APIs REST

Pandas

Education

Diplôme Bac+5 en informatique ou data engineering

Job description

Référente recrutement - Talent acquisition confirmée @Astrelya

ASTRELYA est un groupe de conseil et d’expertise IT fondé en 2017, présent en France (Paris et régions) et en Suisse (Genève). Aujourd'hui plus de 280 collaborateurs accompagnent nos clients dans l’accélération et la transformation de leurs organisations.

Dans le cadre de notre développement, nous recherchons pour un de nos clients un(e) Data Engineer Senior / Expert pour renforcer notre équipe et prendre un rôle clé dans la conception, l’industrialisation et la mise en production de nos pipelines et services de données.

Le poste requiert un profil expérimenté, capable d’allier expertise technique, bonnes pratiques de développement logiciel et accompagnement des équipes.

Vos rôles et responsabilités :

• Concevoir, développer et optimiser des pipelines de données distribués (PySpark, AWS Glue).
• Encadrer techniquement les projets et contribuer aux choix d’architecture data & cloud.
• Concevoir et exposer des APIs de données performantes (Flask, FastAPI).
• Déployer et orchestrer les traitements dans AWS (Lambda, Glue, ECS…).
• Industrialiser les environnements via Terraform et des pipelines CI/CD.
• Garantir la fiabilité, la performance et la sécurité des services en production.
• Mettre en place le monitoring, l’alerting, et intervenir en cas d’incidents.
• Collaborer étroitement avec les équipes métier pour intégrer les besoins business.
• Participer à la diffusion des bonnes pratiques et à la montée en compétences de l’équipe.

Livrables attendus :

• Modélisation et analyse des structures de données.
• Intégration de la data dans les différents assets produits.
• Exposition des données à des systèmes externes (APIs, exports, injections).
• Respect des exigences réglementaires (RGPD, éthique, écoconception…).
• Participation à l’usine logicielle : tests automatisés, CI/CD, déploiements.
• Présentation des réalisations à des audiences techniques et métiers.

Compétences techniques :

• Maîtrise avancée de Python.
• Solide expérience en PySpark et Pandas.
• Très bonne connaissance des services AWS : Glue, Lambda, API Gateway, ECS…
• Infrastructure as Code avec Terraform.
• Mise en place de pipelines CI/CD (GitLab CI, Jenkins ou équivalent).
• Développement et déploiement d’APIs REST (Flask, FastAPI…).

Profil recherché :

• Diplôme Bac+5 en informatique, data engineering ou domaine équivalent.
• 7 à 10 ans d’expérience minimum en développement logiciel et data engineering.
• Référent technique sur des problématiques data et cloud.
• Excellentes pratiques de développement : qualité, revues de code, tests, CI/CD.
• Forte autonomie, capacité à proposer et challenger des solutions techniques.
• Esprit d’équipe, appétence pour le mentorat et le partage de connaissances.

Pourquoi rejoindre ASTRELYA ?

• Une gestion de carrière personnalisée et un management de proximité
• Une politique active de formations / certifications (technique, métier, leadership)
• Une offre variée de missions d’expertise
• Un engagement RSE fort : Ecovadis Gold, Signataire de la charte pour la diversité, du Pacte des Nations Unies et mise en place du Mécénat de compétences
• Un programme de cooptation attractif
• Afterworks, conférences techniques et activités sportives réguliers

Cette annonce vous correspond ? Postulez !

Tous nos postes sont ouverts aux personnes en situation de handicap.

Data Engineer – Systèmes distribués, Temps réel (H/F)