Data Engineer Databricks (H/F/NB)

Keyrus France; Aix-en-Provence; Sur place; EUR 70 000 - 95 000; Plein temps

Avantages offerts par ce poste

Mobilité internationale

Équipe multiculturelle

Résumé du poste

Keyrus France recherche un Lead Data & Spark pour accompagner les clients dans leurs projets Data & Cloud. Vous participerez à la conception, au déploiement et à l’optimisation de solutions Databricks et Spark. Vous animerez des ateliers, formerez des équipes et contribuerez à l’avant-vente.

Une expertise sur SQL/Python/Scala et sur les data lakes cloud est attendue. Rejoindre Keyrus, c’est intégrer une communauté d’experts, avec des opportunités de mobilité internationale et d’évolution

Qualifications

• Expérience d’au moins 2 ans sur Databricks ou 4 ans sur une plateforme similaire (Fabric/Snowflake).
• Capacité à animer des ateliers Databricks/Spark et à former les équipes.
• Connaissances avancées de Databricks et/ou Spark.
• Bonnes connaissances SQL et/ou Python et/ou Scala.
• Maîtrise des structures CSV/JSON et des data lakes cloud (S3, Azure, GCS).
• Connaissances Delta Lake et architecture des clusters Spark.
• Connaissances de l’écosystème Hadoop, Kafka et CI/CD Databricks.
• Certifications DataBricks souhaitées (ex.: Associate Data Engineer)

Responsabilités

• Participer à l’avant-vente Databricks.
• Aider à la configuration des Data Lakes et dimensionnement des clusters Spark.
• Mettre en place des pipelines CI/CD pour build/test/deploy.
• Mettre en place les bonnes pratiques Spark pour les équipes client.
• Rédiger des templates et frameworks.
• Audit de la stack technologique du client (Data Lakes, Notebooks, Jobs).
• Identifier et résoudre les problèmes de performance des flux.
• Accompagner les clients dans l’appropriation des solutions Databricks et Spark.
• Former les équipes client et internes sur Databricks et Spark.
• Participer à l’animation de communautés Keyrus (Articles, Rex, Webinar).
• Participer aux avant-vents et réponses aux appels d’offres

Connaissances

Databricks / Spark

SQL

Python

Scala

Cloud Data Lake

Delta Lake

Spark architecture

Kafka & streaming

CI/CD Databricks

Hadoop ecosystem

Spark ML

Databricks Certification

Description du poste

Qui sommes-nous ? Une success story dans la Data et le Digital !

Notre mission ? Des projets à forte valeur ajoutée pour accroître la performance et la compétitivité des entreprises, faciliter et accélérer leur transformation.
Notre expertise depuis plus de 20 ans ? Le conseil et l'intégration de solutions innovantes autour de trois domaines :

• Data Intelligence

Business Intelligence, Big Data & Analytics, Intelligence Artificielle

• Digital Experience

Conseil, Stratégie & Performance Digitales

• Conseil en Management & Transformation

Stratégie & Innovation, Pilotage de la Performance & Accompagnement des Projets
Nous sommes plus de 2800 talents sur plus de 28 pays et 4 continents. Notre ADN ? Innover et entreprendre.

Qui êtes-vous ?

• Vous participez à la réalisation de projets Databricks ou Spark (vous bénéficiez d'une expérience d'au moins 2 ans sur du Databricks ou 4 ans sur une plateforme similaire (Fabric/Snowflake)
• Vous souhaitez évoluer en tant que Lead Technique Spark et Databricks ;
• Vous aimez animer des ateliers Databricks/Spark et former vos collègues ;
• Vous avez des connaissances avancées sur la solution Databricks et/ou Spark ;
• Vous avez des connaissances avancées sur les langages SQL et/ou Python et/ou Scala ;
• Vous avez de bonnes connaissances sur les structures CSV et/ou JSON ;
• Vous avez de bonnes connaissances sur les Cloud Data Lake (AWS S3, Azure Blob Storage et Google Cloud Storage) ;
• Vous avez de bonnes connaissances sur la technologie Delta Lake ;
• Vous avez de bonnes connaissances sur l’architecture des clusters Spark ;
• Vous avez de bonnes connaissances sur l’écosystème Hadoop et les architectures de type stockage et calcul distribuée ;
• Vous avez de bonnes connaissances sur Kafka et le streaming de données ;
• Vous avez de bonnes connaissances sur le CI/CD dans Databricks
• Vous avez des notions sur Spark ML
• Vous avez des notions fonctionnelles dans les différents secteurs métier de nos clients (Banque, Retail, Transport, santé...etc…)
• Idéalement vous possédez des certifications sur DataBricks ((type Associate Data Engineer)

Quelles seront vos missions ?

Au sein de l’une de nos Business Unit de Conseil, d’Expertise, de Delivery et de services autour de la Data, vous intègrerez une équipe de Data Specialists (Data Engineer, Big Data, Data Scientists, Data Analytics, DevOps, CloudOps, Data Architecte…), capables d’accompagner nos clients dans la mise en œuvre d’une stratégie data cloud globale.

Vous interviendrez sur les sujets suivants (liste non exhaustive) :

• Participation à l’avant-vente Databricks
• Aide à la configuration des Data Lakes, Workspaces Databricks et au dimensionnement des clusters Spark
• Mise en place des pipelines CI/CD pour l’automatisation des build, test et déploiement
• Mise en place de bonnes pratiques Spark à destination des équipes client
• Mise en place des templates ou frameworks
• Audit de la stack technologique du client (Data Lakes, Workspaces, Notebooks, Jobs, etc…) ;
• Identification et Résolution des problèmes de performance et de robustesse des flux dans l’environnement du client
• Accompagnement de nos clients sur l’appropriation de nos solutions ;
• Formation des équipes client et internes sur les solutions Databricks et Spark
• Participation à l’animation de communautés data Keyrus (Articles, Rex, Webinar, etc…)
• Participation aux avant-ventes
• Participation aux réponses aux appels d’offres
  

Pourquoi nous rejoindre ?

Pour intégrer une communauté d’experts curieux et passionnés et évoluer dans un environnement multiculturel, formateur et favorisant la mobilité internationale.

Parce que notre culture d’entreprise favorise la diversité et l’inclusion. Cette diversité fait notre force : elle participe à l’innovation, au dynamisme et à l'évolution de notre organisation

Parce que vous êtes#DataGeek, #DigitalAddict, #InnovationLover!

A travers une Mission Santé-Handicap dédiée, Keyrus déploie une politique de recrutement etmet en place un environnement Handi-accueillants. Tous nos postes sont ouverts aux personnes en situation de handicap.

Keyrus a été classé dans le palmarès Le Point « Les entreprises les plus responsables de France 2022 » sur la base d'indicateurs dérivés, entre autres, de rapports sur la RSE.

#KeyrusRocks #YouRock

Keyrus est une entreprise où il fait bon vivre et travailler!
Découvrez:

• La vie chez Keyrus en 60 sec
• Keyrus en 3 mots
• Nos animations pour nos collaborateurs sur Facebooket surInstagram.
• Notre vidéo par Welcome To The Jungle