Data Engineer Hadoop Spark Scala H/F

Jems Group; Levallois-Perret; Sur place; EUR 55 000 - 75 000; Plein temps

Résumé du poste

Jems Group recherche un Data Engineer Hadoop Spark Scala pour élaborer des solutions data robustes, de l'acquisition à l’exploitation. Vous travaillerez avec les métiers pour identifier et intégrer les données pertinentes et mettre en place les contrôles qualité et la gouvernance des données.

Diplômé d'une école d'ingénieur ou d'une université, vous justifiez d'au moins 3 ans d'expérience et savez mettre en place des tests et des déploiements automatisés dans un environnement Big Data.

Qualifications

• Diplômé(e) d'une école d'ingénieur ou d'une université, vous justifiez d'au moins 3 ans d'expérience dans un contexte Data.
• Maîtrise de SQL et d'au moins un langage: Python, Java ou Scala.
• Connaissance des architectures Big Data et gouvernance des données.

Responsabilités

• Participer à la conception et réalisation d'une solution Data depuis l'acquisition jusqu'à l'exploitation de la donnée.
• Identifier, collecter et intégrer les données nécessaires à la résolution de problématiques métier.
• Garantir la qualité des données via des outils de mesure et les pratiques de Data Gouvernance et Data Management.
• Transcrire les besoins métier en règles de gestion data.
• Industrialiser le déploiement par des tests unitaires, d'intégration et de non-régression.

Connaissances

SQL

Python/Java/Scala

Distributed computing framework

CI/CD (Git,JUnit,SonarQube,Jenkins)

Cloud providers (AWS,GCP,Azure) ou Big

Modélisation relationnelle & non-rela

Formation

Diplôme d'une école d'ingénieur ou université

Outils

Git

JUnit

SonarQube

Jenkins

AWS/GCP/Azure

Hadoop/Spark/Cloudera/Hortonworks

Description du poste

À propos de nous
Nous sommes

À propos de nous
Nous sommes le premier industriel de la donnée en Europe. Notre métier est de créer, manager et exploiter le patrimoine data de nos clients.

Nous avons la conviction que chaque entreprise peut adopter une démarche innovante de gestion de la donnée et créer des cas d’usage disruptifs en réduisant l'impact écologique et en diminuant la dette technique.

Nous comptons plus de 900 collaborateurs en mission chez nos clients grands comptes dans tout secteur d’activité.

Mission

Nous recherchons un(e) Data Engineer Hadoop Spark Scala capable de trouver des solutions innovantes et robustes à l'ensemble des problématiques Data

Vous Aurez La Charge De

• Participer à la conception et réalisation d'une solution Data depuis l'acquisition jusqu'à l'exploitation de la donnée en accompagnant la réflexion des directions métiers
• Identifier, collecter et intégrer les données nécessaires à la résolution de problématiques métier et opérationnelles
• Garantir la qualité des données en mettant en place les outils de mesure et de suivi adéquats en appliquant les règles de Data Gouvernance et de Data Management
• Transcrire des besoins métier en règles de gestion data
• Industrialiser le déploiement de vos réalisations à travers l'implémentation de tests unitaires, d'intégration et de non-régression

Profil

En tant que Data Engineer Hadoop Spark Scala vous maîtrisez :

• Le langage SQL
• Un langage objet (Python, JAVA, Scala)
• Un framework de calcul distribué
• L'intégration continue (Git, JUnit, SonarQube, Jenkins)
• Un cloud provider (AWS, GCP, Azure) ou une distribution Big Data (Hortonworks, Cloudera, Datastax)
• Les concepts de la modélisation relationnelle et non-relationnelle

Diplômé(e) d'une école d'ingénieur ou d'une université, vous justifiez d'au minimum 3 ans d'expérience professionnelle dans un contexte projet Data. Rigoureux(se), proactif(ve) et autonome vous restez en veille technologique et êtes force de proposition. Vous êtes capable de prendre de la hauteur et vous adapter aux enjeux du projet.

Référence de l'offre : zvrlmudefo