Data Engineer: Hadoop, Spark & Scala for Data Solutions

Jems Group; Levallois-Perret; Sur place; EUR 55 000 - 75 000; Plein temps

Résumé du poste

Jems Group recherche un Data Engineer Hadoop Spark Scala pour élaborer des solutions data robustes, de l'acquisition à l’exploitation. Vous travaillerez avec les métiers pour identifier et intégrer les données pertinentes et mettre en place les contrôles qualité et la gouvernance des données.

Diplômé d'une école d'ingénieur ou d'une université, vous justifiez d'au moins 3 ans d'expérience et savez mettre en place des tests et des déploiements automatisés dans un environnement Big Data.

Qualifications

• Diplômé(e) d'une école d'ingénieur ou d'une université, vous justifiez d'au moins 3 ans d'expérience dans un contexte Data.
• Maîtrise de SQL et d'au moins un langage: Python, Java ou Scala.
• Connaissance des architectures Big Data et gouvernance des données.

Responsabilités

• Participer à la conception et réalisation d'une solution Data depuis l'acquisition jusqu'à l'exploitation de la donnée.
• Identifier, collecter et intégrer les données nécessaires à la résolution de problématiques métier.
• Garantir la qualité des données via des outils de mesure et les pratiques de Data Gouvernance et Data Management.
• Transcrire les besoins métier en règles de gestion data.
• Industrialiser le déploiement par des tests unitaires, d'intégration et de non-régression.

Connaissances

SQL

Python/Java/Scala

Distributed computing framework

CI/CD (Git,JUnit,SonarQube,Jenkins)

Cloud providers (AWS,GCP,Azure) ou Big

Modélisation relationnelle & non-rela

Formation

Diplôme d'une école d'ingénieur ou université

Outils

Git

JUnit

SonarQube

Jenkins

AWS/GCP/Azure

Hadoop/Spark/Cloudera/Hortonworks

Description du poste

Jems Group recherche un Data Engineer Hadoop Spark Scala pour élaborer des solutions data robustes, de l'acquisition à l’exploitation. Vous travaillerez avec les métiers pour identifier et intégrer les données pertinentes et mettre en place les contrôles qualité et la gouvernance des données.

Diplômé d'une école d'ingénieur ou d'une université, vous justifiez d'au moins 3 ans d'expérience et savez mettre en place des tests et des déploiements automatisés dans un environnement Big Data.