Data Engineer

BI consulting; Paris; Sur place; EUR 40 000 - 80 000; Plein temps

Résumé du poste

Une entreprise dynamique et engagée recherche un Data Engineer talentueux pour rejoindre son équipe. Dans ce rôle, vous serez responsable de la conception et de la mise en place de plateformes de données, tout en assurant le déploiement d'environnements clusterisés et cloud. Vous aurez l'opportunité de travailler avec des technologies de pointe telles que Hadoop, Spark et divers outils cloud. Ce poste offre un environnement collaboratif où l'innovation est encouragée, et où vous pourrez évoluer tout en contribuant à des initiatives RSE. Rejoignez une équipe qui valorise la cohésion et le développement personnel, tout en participant à des projets passionnants et impactants.

Prestations

Politique RSE engagée

Partenariat EcoTree

Participation aux frais d'abonnements

Moments de convivialité

Offre de formation innovante

Accord de télétravail

Qualifications

• Expérience en data engineering dans un contexte projet.
• Maîtrise des environnements Big Data et des solutions Cloud.

Responsabilités

• Analyser et concevoir des architectures répondant aux besoins des clients.
• Développer des pipelines d’ingestion et gérer le stockage de données.

Connaissances

Hadoop

Data Engineering

SPARK

pySpark

Scala

Docker

Kubernetes

Kafka

DevOps (CI/CD)

Dataiku

Formation

Diplôme d'ingénieur en Informatique

Outils

Azure

AWS

GPC

ELK

Cassandra

Description du poste

Responsabilités :

1. Analyser, comprendre et cadrer une architecture permettant de répondre aux besoins métiers des clients.
2. Concevoir et mettre en place des plateformes Data en tenant compte des contraintes tant techniques que fonctionnelles.
3. Intervenir sur la conception et le déploiement d’environnements « clusterisés » (Hadoop sur des distributions telles que Cloudera ou Hortonworks) ou Cloud public.
4. Développement de pipelines d’ingestion et de préparation.
5. Gestion du stockage de données (systèmes de fichiers comme HDFS, bases SQL ou NoSQL).
6. Alimentation d’entrepôts de données (Hive, Impala, Hbase, Snowflake, BigQuery, …).
7. Développer des applications d’exploration et de manipulation de données (SPARK / pySpark, Scala) afin d’alimenter les flux sortants, les reporting et d’exposer les données.
8. Evoluer sur l’ordonnancement des traitements de données (Oozie, Bash / Shell).
9. Assurer le maintien en conditions opérationnelles des plateformes produites.
10. Etablir, formaliser, et promouvoir les best practices.

Profil recherché :

De formation supérieure ingénieur en Informatique, vous justifiez d’une première expérience réussie en data engineering acquise dans un contexte projet au sein d’une start-up, d’un pure player, ou d’une ESN.

Vous disposez d’une bonne maitrise des langages propres aux environnements Big Data tels que :

• Hadoop et ses distributions.
• Les solutions Cloud (Azure, AWS, GPC).
• Une connaissance de Dataiku serait fortement appréciée !
• Une connaissance de : Docker, ELK, Kubernetes, Cassandra, Kafka, … serait un plus, de même que des fondamentaux DevOps (CI / CD).

Vous avez déjà évolué dans un contexte projet agile ou scrum et faites preuve de flexibilité, d’adaptabilité et savez être force de proposition.

Au-delà de vos compétences techniques, vous êtes curieux, autonome, organisé, doté d’un bon sens relationnel et d’un esprit de synthèse.

Les avantages :

• Evoluer au sein d’une société qui exige le meilleur de ses collaborateurs tout en cultivant la cohésion et l’esprit d’équipe.
• S’engager dans une politique RSE exigeante : labellisation Ecovadis.
• Avoir un Partenariat EcoTree France : 1 recrutement = 1 arbre planté !
• Contribuer activement au bien-être de ses collaborateurs : participation aux frais d’abonnements activités ou achat 2 roues.
• Avoir de nombreux moments de convivialités : séminaires, afterworks, conférences et petits déjeuners, sports en groupe via l’application United Heroes.
• Donner une offre de formation innovante et à la pointe des nouvelles technologies.
• Accord de télétravail en vigueur.

Ce poste est ouvert aux personnes en situation de handicap.