Senior Data Engineer

AVIV Group; Paris; Sur place; EUR 55 000 - 75 000; Plein temps

Résumé du poste

AVIV Group recherche un(e) Senior Data Engineer expérimenté(e) en Python, Pyspark et AWS pour rejoindre leur équipe dynamique à Paris. Vous serez responsable de la création et de l'optimisation des pipelines de données, contribuant ainsi à des projets innovants. Profitez d'un environnement stimulant avec d'importants avantages tels qu'un restaurant d'entreprise et des jours de RTT.

Prestations

Restaurant d'entreprise

16 jours de RTT

Télétravail

Crèches d'entreprise

CSE actif

Qualifications

• Expérience approfondie des services AWS et gestion d'infrastructures avec Terraform.
• Compétences avancées en Python et gestion de pipelines de données distribués.
• Autonomie dans la gestion de projets et sens de l'innovation requis.

Responsabilités

• Optimiser et améliorer les pipelines de données pour la performance et l'évolutivité.
• Développer des modules Terraform pour la gestion de l'infrastructure sur AWS.
• Concevoir des tableaux de bord et systèmes d'alerte pour surveiller les performances.

Connaissances

Python

Pyspark

AWS

SQL

Terraform

DataDog

Autonomie

Innovation

Pragmatisme

Qualité du code

Description du poste

Nous recherchons un(e) Senior Data Engineer spécialisé(e) en Python, Pyspark, AWS et data pour rejoindre notre équipe dynamique. Vous jouerez un rôle clé dans la création, l'optimisation et l'amélioration des pipelines de données pour l'indexation, l'enrichissement et l'exposition des données classifiées et transactionnelles sur AWS. Vous travaillerez directement sous la direction de notre Team Lead Data Engineer, qui organisera les tâches et assurera le bon déroulement du projet.

Les missions :

1. Optimisation du pipeline : Analyser et améliorer les pipelines de données existants pour optimiser les performances, la rentabilité et l'évolutivité.
2. Transformation du pipeline : Transition des pipelines batch / snapshot vers des pipelines de gestion delta.
3. Infrastructure as Code : Développer et maintenir des modules Terraform pour une gestion efficace de l'infrastructure sur AWS.
4. Migration du pipeline : Migration des pipelines de données de Google Cloud Platform vers AWS en minimisant les interruptions et en garantissant la fiabilité.
5. Surveillance et alertes : Concevoir et mettre en œuvre des tableaux de bord et des systèmes d'alerte DataDog pour assurer une surveillance proactive des performances du pipeline de données.
6. Veille technologique et innovation : Se tenir informé des nouvelles technologies et promouvoir activement les innovations et améliorations pertinentes au sein de l'équipe.
7. Mentorat et soutien de l'équipe : Soutenir et guider les membres de l'équipe, partager l'expertise et les bonnes pratiques, et contribuer à la croissance globale de l'équipe.

Compétences techniques requises :

• Une expérience pratique approfondie des services AWS, notamment S3, ECS, Lambda, Glue, etc.
• Des compétences avancées en Python pour la manipulation de données, la création de scripts et le développement de pipelines.
• Une solide expérience dans la création de pipelines de données distribués et volumineux avec PySpark.
• Maîtrise de SQL pour l'interrogation et la transformation de grands ensembles de données.
• Une expérience dans la création et la gestion d'infrastructures avec Terraform. Terragrunt est un atout.
• Maîtrise de la configuration et de la maintenance de pipelines pour la prise en charge des workflows d'automatisation et de déploiement.
• Connaissance de DataDog pour la surveillance, les alertes et la création de tableaux de bord.
• Autonomie dans la gestion de projet, maîtrise de l'infrastructure de production et de l'accès aux données.
• Esprit ouvert à l'innovation et à l'amélioration continue.
• Pragmatisme pour trouver des solutions concrètes et capacité d'adaptation rapide.
• Importance accordée à la qualité du code et au respect des bonnes pratiques.
• Esprit d'équipe, communication ouverte et support proactif.
• Engagement envers la qualité des tests et une approche centrée sur le client.

Informations supplémentaires :

Ce que nous proposons :

Nous serons ravis de vous accueillir dans nos locaux au cœur de Paris (2 rue des Italiens, 75009 Paris), où vous bénéficierez :

• De notre restaurant d'entreprise, d'un grand espace de vie et de tickets restaurant avec Restoflash de 950€.
• De 16 jours de RTT (congés) exceptionnels et d'ancienneté.
• De télétravail, de crèches d'entreprise, de CSE actif, etc.
• Et bien d'autres avantages...

Chez Aviv, nous respectons l'égalité des chances. Nous encourageons vivement les personnes en situation de handicap, issues de minorités, membres de la communauté LGBTQIA+, parents et soignants à postuler. Si vous avez besoin d'ajustements raisonnables à tout moment du processus de candidature ou de l'entretien, ou si vous souhaitez discuter de vos besoins en matière de temps partiel ou de travail flexible, veuillez nous en informer.

Dans votre candidature, n'hésitez pas à indiquer les pronoms que vous utilisez.

Notre ambition est d'être le premier employeur dans le domaine de la PropTech en Europe.

C'est le moment idéal pour nous rejoindre et trouver l'emploi qui vous correspond !