Senior Data Engineer - Spark & Big Data (Onsite Vannes)

Holenek Ingenierie; Vannes; Sur place; EUR 60 000 - 85 000; Plein temps

Résumé du poste

Holenek Ingenierie recherche un Data Engineer Expérimenté pour rejoindre une équipe Data sur Vannes. Poste basé à Vannes avec 3 jours sur site obligatoires, dans un environnement Big Data bancaire.

Vous intégrerez une squad agile, participerez à l'architecture Data et développerez des pipelines via Spark, tout en automatisant l'ingestion et en assurant les tests et le déploiement dans les environnements. Profil recherché: 4 à 7 ans d'expérience, maîtrise Spark (streaming/batch), SQL avancé et

Qualifications

• 4 à 7 ans d'expérience minimum sur un poste similaire.
• Maîtrise de Spark (batch et streaming) et SQL (Teradata, Hive, Phoenix).
• Connaissance des bases NoSQL (HBase, MongoDB) et Hadoop Cloudera.

Responsabilités

• Participer à l'architecture Data en lien avec les architectes et la squad.
• Concevoir et développer des pipelines ETL sur Spark.
• Automatiser l'ingestion et orchestrer les flux de données.
• Réaliser les tests et déployer le produit en environnements variés.
• Assurer le fonctionnement en production et le monitoring.

Connaissances

Spark

SQL

NoSQL

Hadoop Cloudera

DevOps

Monitoring

xDI

Scrum

RGPD

Data lineage

Data catalog

Outils

Git

Jenkins

Artifactory

XL Release

ELK

Grafana

Description du poste

Holenek Ingenierie recherche un Data Engineer Expérimenté pour rejoindre une équipe Data sur Vannes. Poste basé à Vannes avec 3 jours sur site obligatoires, dans un environnement Big Data bancaire.

Vous intégrerez une squad agile, participerez à l'architecture Data et développerez des pipelines via Spark, tout en automatisant l'ingestion et en assurant les tests et le déploiement dans les environnements. Profil recherché: 4 à 7 ans d'expérience, maîtrise Spark (streaming/batch), SQL avancé et