Data Engineer Databricks (H/F/NB)

Keyrus; Aix-en-Provence; Sur place; EUR 70 000 - 110 000; Plein temps

Avantages offerts par ce poste

Mobilité internationale

Handi-accueillant

Résumé du poste

Keyrus recherche un Lead Technique Spark et Databricks pour rejoindre l’équipe Data. Vous contribuerez à des projets Data Cloud complexes et accompagnerez les clients dans la mise en œuvre de solutions robustes.

Vous animerez des ateliers, améliorerez les pipelines et veillerez à l’efficacité des architectures Spark. Un rôle central dans l’évolution des équipes et des projets Data est proposé.

Qualifications

• Expérience min. 2 ans sur Databricks ou 4 ans sur une plateforme similaire (Fabric/Snowflake).
• Connaissances avancées de Databricks et/ou Spark.
• Maîtrise des langages SQL et Python et/ou Scala.
• Bonnes connaissances sur les Data Lakes et Delta Lake.

Responsabilités

• Participer à l’avant-vente Databricks et dimensionnement des clusters Spark.
• Mettre en place des pipelines CI/CD et des bonnes pratiques Spark.
• Animer des ateliers Databricks/Spark et former les équipes clientes et internes.
• Participer aux réponses aux appels d’offres et à l’animation de communautés Data Keyrus.

Connaissances

Databricks/Spark exp.

SQL

Python/Scala

Cloud Data Lake

Delta Lake

Spark cluster architecture

CI/CD in Databricks

Spark ML

Outils

Databricks platform

Kafka

Hadoop ecosystem

Description du poste

Qui sommes-nous ? Une success story dans la Data et le Digital !

Notre mission ? Des projets à forte valeur ajoutée pour accroître la performance et la compétitivité des entreprises, faciliter et accélérer leur transformation.
Notre expertise depuis plus de 20 ans ? Le conseil et l'intégration de solutions innovantes autour de trois domaines :

• Data Intelligence

Business Intelligence, Big Data & Analytics, Intelligence Artificielle

• Digital Experience

Conseil, Stratégie & Performance Digitales

• Conseil en Management & Transformation

Stratégie & Innovation, Pilotage de la Performance & Accompagnement des Projets
Nous sommes plus de 2800 talents sur plus de 28 pays et 4 continents. Notre ADN ? Innover et entreprendre.

Qui êtes-vous ?

• Vous participez à la réalisation de projets Databricks ou Spark (vous bénéficiez d'une expérience d'au moins 2 ans sur du Databricks ou 4 ans sur une plateforme similaire (Fabric/Snowflake)
• Vous souhaitez évoluer en tant que Lead Technique Spark et Databricks ;
• Vous aimez animer des ateliers Databricks/Spark et former vos collègues ;
• Vous avez des connaissances avancées sur la solution Databricks et/ou Spark ;
• Vous avez des connaissances avancées sur les langages SQL et/ou Python et/ou Scala ;
• Vous avez de bonnes connaissances sur les structures CSV et/ou JSON ;
• Vous avez de bonnes connaissances sur les Cloud Data Lake (AWS S3, Azure Blob Storage et Google Cloud Storage) ;
• Vous avez de bonnes connaissances sur la technologie Delta Lake ;
• Vous avez de bonnes connaissances sur l’architecture des clusters Spark ;
• Vous avez de bonnes connaissances sur l’écosystème Hadoop et les architectures de type stockage et calcul distribuée ;
• Vous avez de bonnes connaissances sur Kafka et le streaming de données ;
• Vous avez de bonnes connaissances sur le CI/CD dans Databricks
• Vous avez des notions sur Spark ML
• Vous avez des notions fonctionnelles dans les différents secteurs métier de nos clients (Banque, Retail, Transport, santé...etc…)
• Idéalement vous possédez des certifications sur DataBricks ((type Associate Data Engineer)

Quelles seront vos missions ?

Au sein de l’une de nos Business Unit de Conseil, d’Expertise, de Delivery et de services autour de la Data, vous intègrerez une équipe de Data Specialists (Data Engineer, Big Data, Data Scientists, Data Analytics, DevOps, CloudOps, Data Architecte…), capables d’accompagner nos clients dans la mise en œuvre d’une stratégie data cloud globale.

Vous interviendrez sur les sujets suivants (liste non exhaustive) :

• Participation à l’avant-vente Databricks
• Aide à la configuration des Data Lakes, Workspaces Databricks et au dimensionnement des clusters Spark
• Mise en place des pipelines CI/CD pour l’automatisation des build, test et déploiement
• Mise en place de bonnes pratiques Spark à destination des équipes client
• Mise en place des templates ou frameworks
• Audit de la stack technologique du client (Data Lakes, Workspaces, Notebooks, Jobs, etc…) ;
• Identification et Résolution des problèmes de performance et de robustesse des flux dans l’environnement du client
• Accompagnement de nos clients sur l’appropriation de nos solutions ;
• Formation des équipes client et internes sur les solutions Databricks et Spark
• Participation à l’animation de communautés data Keyrus (Articles, Rex, Webinar, etc…)
• Participation aux avant-ventes
• Participation aux réponses aux appels d’offres
  

Pourquoi nous rejoindre ?

Pour intégrer une communauté d’experts curieux et passionnés et évoluer dans un environnement multiculturel, formateur et favorisant la mobilité internationale.

Parce que notre culture d’entreprise favorise la diversité et l’inclusion. Cette diversité fait notre force : elle participe à l’innovation, au dynamisme et à l'évolution de notre organisation

Parce que vous êtes#DataGeek, #DigitalAddict, #InnovationLover!

A travers une Mission Santé-Handicap dédiée, Keyrus déploie une politique de recrutement etmet en place un environnement Handi-accueillants. Tous nos postes sont ouverts aux personnes en situation de handicap.

Keyrus a été classé dans le palmarès Le Point « Les entreprises les plus responsables de France 2022 » sur la base d'indicateurs dérivés, entre autres, de rapports sur la RSE.

#KeyrusRocks #YouRock

Keyrus est une entreprise où il fait bon vivre et travailler!
Découvrez:

• La vie chez Keyrus en 60 sec
• Keyrus en 3 mots
• Nos animations pour nos collaborateurs sur Facebooket surInstagram.
• Notre vidéo par Welcome To The Jungle