Data Engineer H/F

Jems Group; France; Hybride; EUR 55 000 - 75 000; Plein temps

Résumé du poste

Jems Group recherche un data engineer Databricks capable de proposer des solutions innovantes et robustes pour l'ensemble des problématiques Data, de l'acquisition à l'exploitation de la donnée.

Vous participerez à la conception et réalisation d'une solution Data, identifierez les données nécessaires, garantirez leur qualité et industrialiserez les déploiements par des tests unitaires, d'intégration et de non-régression.

Qualifications

• Diplômé(e) d'une école d'ingénieur ou d'une université et au moins 3 ans d'expérience sur des projets Data.

Responsabilités

• Concevoir et réaliser une solution Data depuis l'acquisition jusqu'à l'exploitation.
• Identifier, collecter et intégrer les données nécessaires à la résolution des problématiques métier.
• Garantir la qualité des données avec des outils de mesure et de Data Governance.
• Transcrire les besoins métier en règles de gestion data.
• Industrialiser les déploiements via tests unitaires, d'intégration et de non-régression.

Connaissances

SQL

Databricks

Python/Java/Scala

Distributed framework

Git

JUnit

SonarQube

Jenkins

AWS

GCP

Azure

Hortonworks

Cloudera

Datastax

Relationnel

Non-relationnel

Formation

Diplômé(e) d'une école d'ingénieur ou d'une université

Outils

Databricks

Description du poste

Nous recherchonsun(e) data engineer Databricks capable de trouver des solutions innovantes et robustes à l'ensemble des problématiques Data.

Vous aurez la charge de :

• Participer à la conception et réalisation d'une solution Data depuis l'acquisition jusqu'à l'exploitation de la donnée en accompagnant la réflexion des directions métiers

• Identifier, collecter et intégrer les données nécessaires à la résolution de problématiques métier et opérationnelles

• Garantir la qualité des données en mettant en place les outils de mesure et de suivi adéquats en appliquant les règles de Data Gouvernance et de Data Management

• Transcrire des besoins métier en règles de gestion data

• Industrialiser le déploiement de vos réalisations à travers l'implémentation de tests unitaires, d'intégration et de non-régression

En tant que Data Engineer vous maîtrisez :

• Le langage SQL

• Databricks

• Un langage objet (Python, JAVA, Scala)

• Un framework de calcul distribué

• L'intégration continue (Git, JUnit, SonarQube, Jenkins)

• Un cloud provider (AWS, GCP, Azure) ou une distribution Big Data (Hortonworks, Cloudera, Datastax)

• Les concepts de la modélisation relationnelle et non-relationnelle

Diplômé(e) d'une école d'ingénieur ou d'une université, vous justifiez d'au minimum 3 ans d'expérience professionnelledans un contexte projet Data. Rigoureux(se), proactif(ve) et autonome vous restez en veille technologique et êtes force de proposition. Vous êtes capable de prendre de la hauteur et vous adapter aux enjeux du projet.