Data Engineer - ConfirmÃ(e) (F / H / X)

AVIV Group; Paris; Sur place; EUR 45 000 - 70 000; Plein temps

Résumé du poste

Une entreprise dynamique recherche un(e) Data Engineer pour optimiser et développer des pipelines de données sur AWS. Les responsabilités incluent la transformation des pipelines et la gestion de l'infrastructure via Terraform. Les candidats doivent avoir une solide expérience avec AWS, Python, et PySpark, ainsi qu'une aptitude à travailler de manière autonome dans un environnement collaboratif.

Prestations

Restaurant d'entreprise

16 jours de RTT

Travail à distance

CSE actif

Qualifications

• Expérience avec les services AWS, S3, ECS, Lambda, Glue.
• Excellente maîtrise de Python pour le développement de pipelines.
• Expertise en PySpark pour le traitement distribué des données.

Responsabilités

• Améliorer les performances des pipelines de données existants.
• Développer des modules Terraform pour AWS.
• Migrer les pipelines de données vers AWS.

Connaissances

AWS

Python

PySpark

SQL

Terraform

CircleCI

DataDog

Description du poste

Nous recherchons un(e) Data Engineer pour rejoindre notre équipe dynamique. Vous jouerez un rôle clé dans la construction, l'optimisation et l'amélioration des pipelines de données pour l'gestion, l'enrichissement et l'exposition de données classifiées et transactionnelles sur AWS. Vous travaillerez directement sous la direction de notre Team Lead Data Engineer, qui organisera les tâches et assurera la bonne livraison des projets.

Responsabilités :

1. Optimisation des pipelines : Améliorer les performances et la fiabilité des pipelines de données existants.
2. Transformation des pipelines : Faire évoluer les pipelines de type batch / snapshot vers des pipelines de gestion des deltas.
3. Infrastructure as Code : Développer et maintenir des modules Terraform pour la gestion de l'infrastructure sur AWS.
4. Migration des pipelines : Migrer les pipelines de données de Google Cloud Platform vers AWS.
5. Monitoring et alertes : Concevoir et implémenter des tableaux de bord DataDog et des systèmes d'alerte pour assurer un suivi proactif des performances des pipelines de données.

Qualifications : Compétences requises

• AWS : Solide expérience avec les services AWS, notamment S3, ECS, Lambda, Glue.
• Python : Excellente maîtrise de Python pour la manipulation de données, le scripting et le développement de pipelines.
• PySpark : Expertise dans l'utilisation de PySpark pour le traitement distribué des données.
• SQL : Maîtrise de SQL pour l'interrogation et la transformation de grands ensembles de données.
• Terraform : Expérience dans la création et la gestion d'infrastructures avec Terraform. Terragrunt est un atout.
• CircleCI : Maîtrise des workflows et de la gestion de configuration.
• DataDog : Connaissance de DataDog pour le monitoring, les alertes et la création de tableaux de bord.

Vous êtes capable de gérer vos projets d'infrastructure de production et l'accès aux données de manière autonome. Vous aimez être fier de votre travail tout en restant ouvert(e) aux améliorations.

Qualités personnelles :

• Vous trouvez des solutions pratiques.
• Vous aimez fournir du code de haute qualité en respectant les meilleures pratiques.
• Pour vous, travailler en équipe est indispensable et vous aimez communiquer ouvertement tout en offrant un soutien proactif.
• Vous savez gérer les ressources efficacement en évitant les coûts inutiles.
• Vous mettez l'accent sur les tests et maintenez une approche centrée sur le client.

Informations supplémentaires :

Ce que nous vous proposons :

Nous serons ravis de vous accueillir dans nos locaux au cœur de Paris (2 rue des Italiens 75009 Paris), où vous trouverez :

• Notre restaurant d'entreprise, un grand espace de vie et des tickets restaurant avec Restoflash de 950€
• 16 jours de RTT (réduction du temps de travail) en fonction de l'ancienneté
• Travail à distance, crèches d'entreprise, CSE actif, etc.
• Et bien d'autres avantages...

Chez Aviv, nous respectons l'égalité des chances. Nous encourageons vivement les personnes en situation de handicap, toutes les origines, les membres de la communauté LGBTQIA+, les parents et les soignants à postuler. Si vous avez besoin d'ajustements raisonnables à tout moment du processus de candidature ou de l'entretien, ou si vous souhaitez discuter de vos besoins en matière de travail flexible ou à temps partiel, veuillez nous en informer.

Dans votre candidature, n'hésitez pas à indiquer les pronoms que vous utilisez.

Notre ambition est de devenir le premier employeur dans le domaine de la PropTech en Europe.

C'est le moment idéal pour nous rejoindre et trouver l'emploi parfait !

Nous n'attendons plus que votre candidature !