Senior Databricks Big Data Engineer Lead (Remote)

Talan; Paris; Hybrid; EUR 70,000 - 110,000; Full time

Benefits offered by this job

Plan de formation et certifications

Locaux modernes en centre-ville

Télétravail jusqu’à 5 jours

Mobilité en France et à l’étranger

Tickets restaurant et mutuelle

Job summary

Talan recherche un(e) Big Data Engineer Databricks Sénior pour assurer l’intégration des données, leur préparation, modélisation et stockage, ainsi que leur exposition. Vous devrez faire preuve d’un esprit innovant, méthodique et orienté solution, tout en communiquant efficacement.

Le candidat idéal possède au moins 4 ans d’expérience en Big Data (Spark) et 6 ans en développement logiciel, avec une maîtrise de Scala/Python et des pipelines de données, idéalement sur Databricks et AWS.

Qualifications

• Issu(e) d’une formation supérieure (école d’ingénieur, master, …).
• Vous disposez d’au moins 4 années d’expérience dans le Big Data et au moins 6 années d’expérience dans le développement logiciel.
• Maîtrise du développement logiciel (Scala, Python …) et mise en place de pipelines de données.
• Maîtrise du Framework Spark (Databricks idéal) et son optimisation.
• Une expérience sur une plateforme Cloud serait un plus (AWS).
• Une expérience sur des flux temps réel (Kafka + Spark Streaming) est un plus.
• Maîtrise SQL et bases de données (HDFS, S3).
• Bonnes connaissances en DevOps (Jenkins, Gitlab, Maven).
• Connaissance DataOps / DataVault / DataMesh est un plus.
• Connaissance Agile; Autonome; Organisé; Sens du partage; Bonne communication; Orientation produit et solution.

Responsibilities

• Manager des Big Data Engineer et Cloud Engineer.
• Coacher techniquement les membres de l’équipe: code review et formation.
• Analyser les besoins techniques métiers et définir l’architecture et le référent technique, développer et optimiser; assurer DevOps, recettes et mise en production; documentation.
• Réaliser des benchmarks et conseiller sur les solutions technologiques à adopter.
• Partager les connaissances et assurer des formations internes.

Skills

Spark

Scala

Python

Databricks

Cloud AWS

Kafka

SQL

Data pipelines

DevOps

Jenkins

GitLab

Maven

DataOps

DataVault

DataMesh

Agile

Autonomie

Communication

Education

Ingénieur / Master

Tools

Databricks

AWS

Jenkins

GitLab

Maven

HDFS

S3

Job description

Talan recherche un(e) Big Data Engineer Databricks Sénior pour assurer l’intégration des données, leur préparation, modélisation et stockage, ainsi que leur exposition. Vous devrez faire preuve d’un esprit innovant, méthodique et orienté solution, tout en communiquant efficacement.

Le candidat idéal possède au moins 4 ans d’expérience en Big Data (Spark) et 6 ans en développement logiciel, avec une maîtrise de Scala/Python et des pipelines de données, idéalement sur Databricks et AWS.