Senior Data Engineer Spark - Scala F / H

Devoteam; Lyon; Sur place; EUR 50 000 - 70 000; Plein temps

Résumé du poste

Une entreprise de transformation digitale recherche un Data Engineer Senior à Lyon. Le candidat doit concevoir des pipelines de données en utilisant Apache Spark et Scala. L'expérience requise est de 6 ans minimum dans le domaine, avec une bonne maîtrise des outils Big Data et une capacité à travailler en équipe. Ce poste offre des missions variées dans les secteurs de la banque et de l'assurance.

Qualifications

• Au moins 6 ans d'expérience en tant que Data Engineer.
• Maîtrise d’Apache Spark et Scala.
• Solide expérience dans la conception de pipelines ETL/ELT.
• Expérience avec des outils CI/CD.
• À l'aise avec les écosystèmes Big Data.

Responsabilités

• Concevoir et optimiser des pipelines de données.
• Mettre en œuvre des solutions de traitement de données.
• Définir les architectures data.
• Assurer la qualité et la performance des données.
• Collaborer avec les équipes Data Scientists et Data Analysts.
• Mentorer des profils juniors.

Connaissances

Apache Spark

Scala

CI/CD (Jenkins, Gitlab)

Big Data (Hadoop, Kafka)

Autonomie

Rigueur

Résolution de problèmes complexes

Anglais (niveau correct)

Formation

Diplôme d’ingénieur ou Master 2 dans le domaine de la Data

Outils

Outils Big Data

SQL

NoSQL

Description du poste

Description de l'entreprise

Chez Devoteam, nous sommes des « Digital Transformakers ». Le respect, la franchise et la passion animent chaque jour notre tribu. Ensemble, nous aidons nos clients du CAC40 à remporter la bataille du Digital : du conseil à la mise en œuvre de technologies innovantes, jusqu’à l’adoption des usages.

Nous intervenons principalement dans les secteurs de la banque, de l’énergie et de l’industrie ainsi que dans la santé, les transports et la distribution.

Cloud, Cybersécurité, Digital Workplace ainsi que Big Data et Project Management n’ont aucun secret pour notre tribu ! Nos 8000+ collaborateurs sont certifiés, formés et accompagnés au quotidien pour relever de nouveaux challenges innovants.

En 2022, nous avons réaliséun chiffre d’affaires de 1 milliard d’euros. Aujourd'hui nous sommesun des leaders européens de la transformation digitale. Es-tu prêt(e) à relever le défi ?

Description du poste

Dans un monde où les sources de données sont en constante évolution, Devoteam Data Driven aide ses clients à transformer leurs données en informations exploitables et les rendre ainsi impactantes pour plus de valeur business.

Data Driven adresse les 3 grandes dimensions suivantes : Data Strategy, Data for Business et Data Foundation en appui d’expertise chez ses clients pour les rendre encore plus performants et compétitifs au quotidien.

Rejoignez l’équipe Data Foundation sur des missions en régie au sein de nos clients de secteurs d’activités variés (Banque, Finance, Assurance notamment).

En tant que Data Engineer Senior, vous serez au cœur de nos projets data de la conception à la mise en production. Vos responsabilités incluront notamment :

• Concevoir, développer et optimiser des pipelines de données robustes et évolutifs en utilisant Apache Spark et Scala.

• Mettre en œuvre des solutions de traitement de données batch et temps réel pour des volumes de données importants.

• Participer à la définition des architectures data et au choix des technologies adaptées aux besoins de nos clients.

• Assurer la qualité et la performance des données, ainsi que la scalabilité des infrastructures.

• Collaborer étroitement avec les Data Scientists, les Data Analysts et les équipes métiers pour comprendre leurs besoins et traduire les exigences fonctionnelles en solutions techniques.

• Contribuer à l'amélioration continue de nos pratiques et outils d'ingénierie de données.

• Accompagner et mentorer les profils plus juniors.

Qualifications

Titulaire d’un diplôme d’ingénieur ou d’un Master 2 validé dans le domaine de la Data, vous justifiez d'une expérience significative d'au moins 6 ans en tant que Data Engineer.

Vous maîtrisez parfaitement Apache Spark et le langage de programmation Scala.

Vous avez une solide expérience dans la conception et la mise en œuvre de pipelines ETL/ELT.

Vous maîtrisez également des outils d'intégration CI/CD (Jenkins, Gitlab) et du travail en mode agile.

Vous êtes à l'aise avec les écosystèmes Big Data (Hadoop, Kafka, etc.).

La connaissance des bases de données SQL et NoSQL est un plus.

Vous êtes reconnu(e) pour votre autonomie, votre rigueur et votre capacité à résoudre des problèmes complexes.

Vous avez un excellent esprit d'équipe et de bonnes capacités de communication.

Un bon niveau d'anglais est attendu pour interagir avec nos équipes et clients internationaux.

Informations supplémentaires

Comment se déroule le processus de recrutement chez Devoteam ? Il comporte 2 à 3 entretiens :

- Talent Acquisition Interview : l'objectif est de faire le point sur vos compétences, votre niveau d'anglais et de valider vos éléments de motivation
- Tech & Business Interview : cet entretien vise à approfondir vos compétences techniques et à vérifier leur adéquation avec nos besoins lors d'un échange avec un expert métier
- Leadership Interview : il permet d'évaluer votre potentiel, vos ambitions et d'envisager votre évolution au sein de Devoteam.
Nous privilégions au moins un entretien en présentiel. Une prise de référence est demandée et, selon votre profil, des tests (techniques, anglais, personnalité...) peuvent vous être adressés.
Si votre candidature est retenue, nous vous faisons parvenir une proposition présentant les conditions d'embauche. En cas d'acceptation, le contrat de travail est formalisé.

Le Groupe Devoteam oeuvre pour l'égalité des chances, pour la promotion de ses collaboratrices et de ses collaborateurs au mérite et lutte activement contre toute forme de discrimination. Nous sommes convaincus que la diversité contribue à la créativité, au dynamisme et à l'excellence de notre organisation. Chaque candidature est donc considérée indépendamment de tout critère discriminatoire.