Data Engineer Databricks (H/F/NB)

Keyrus; Valbonne; Sur place; EUR 70 000 - 110 000; Plein temps

Avantages offerts par ce poste

Handi-accueillants

Mobilité internationale

Résumé du poste

Keyrus recherche un Lead Technique Spark/Databricks pour piloter des projets data ambitieux en France. Vous évoluerez au sein d’une équipe d’experts et accompagnerez les clients dans la mise en œuvre de solutions data cloud, du design à la production.

Vous maîtrisez Databricks, Spark, SQL et Python/Scala; des notions ML et une connaissance des architectures distribuées seront appréciées. Des certifications Databricks sont un plus.

Qualifications

• Expérience d’au moins 2 ans sur Databricks ou 4 ans sur une plateforme similaire.
• Animation d’ateliers Databricks/Spark et formation d’équipes.
• Bonnes connaissances SQL et Python/Scala; maîtrise des CSV/JSON et du Cloud Data Lake.

Responsabilités

• Participer à l’avant-vente Databricks et configurer Data Lakes et Workspaces Databricks.
• Mettre en place pipelines CI/CD et bonnes pratiques Spark pour les clients.
• Auditer et optimiser les flux de données et former les équipes client et internes.

Connaissances

Databricks

Spark

SQL

Python

Scala

CSV/JSON

Cloud Data Lake

Delta Lake

Spark Architecture

Hadoop ecosystem

Kafka

CI/CD Databricks

Spark ML

Industry domain knowledge

Databricks Certification

Description du poste

Qui sommes-nous ? Une success story dans la Data et le Digital !

Notre mission ? Des projets à forte valeur ajoutée pour accroître la performance et la compétitivité des entreprises, faciliter et accélérer leur transformation.

Notre Expertise Depuis Plus De 20 Ans ? Le Conseil Et L'intégration De Solutions Innovantes Autour De Trois Domaines

• Data Intelligence

Business Intelligence, Big Data & Analytics, Intelligence Artificielle

• Digital Experience

Conseil, Stratégie & Performance Digitales

• Conseil en Management & Transformation

Stratégie & Innovation, Pilotage de la Performance & Accompagnement des Projets

Nous sommes plus de 2800 talents sur plus de 28 pays et 4 continents. Notre ADN ? Innover et entreprendre.

Qui êtes-vous ?

• Vous participez à la réalisation de projets Databricks ou Spark (vous bénéficiez d'une expérience d'au moins 2 ans sur du Databricks ou 4 ans sur une plateforme similaire (Fabric/Snowflake)
• Vous souhaitez évoluer en tant que Lead Technique Spark et Databricks ;
• Vous aimez animer des ateliers Databricks/Spark et former vos collègues ;
• Vous avez des connaissances avancées sur la solution Databricks et/ou Spark ;
• Vous avez des connaissances avancées sur les langages SQL et/ou Python et/ou Scala ;
• Vous avez de bonnes connaissances sur les structures CSV et/ou JSON ;
• Vous avez de bonnes connaissances sur les Cloud Data Lake (AWS S3, Azure Blob Storage et Google Cloud Storage) ;
• Vous avez de bonnes connaissances sur la technologie Delta Lake ;
• Vous avez de bonnes connaissances sur l’architecture des clusters Spark ;
• Vous avez de bonnes connaissances sur l’écosystème Hadoop et les architectures de type stockage et calcul distribuée ;
• Vous avez de bonnes connaissances sur Kafka et le streaming de données ;
• Vous avez de bonnes connaissances sur le CI/CD dans Databricks
• Vous avez des notions sur Spark ML
• Vous avez des notions fonctionnelles dans les différents secteurs métier de nos clients (Banque, Retail, Transport, santé...etc…)
• Idéalement vous possédez des certifications sur DataBricks ((type Associate Data Engineer))

Quelles seront vos missions ?

Au sein de l’une de nos Business Unit de Conseil, d’Expertise, de Delivery et de services autour de la Data, vous intègrerez une équipe de Data Specialists (Data Engineer, Big Data, Data Scientists, Data Analytics, DevOps, CloudOps, Data Architecte…), capables d’accompagner nos clients dans la mise en œuvre d’une stratégie data cloud globale.

Vous interviendrez sur les sujets suivants (liste non exhaustive) :

• Participation à l’avant-vente Databricks
• Aide à la configuration des Data Lakes, Workspaces Databricks et au dimensionnement des clusters Spark
• Mise en place des pipelines CI/CD pour l’automatisation des build, test et déploiement
• Mise en place des bonnes pratiques Spark à destination des équipes client
• Mise en place des templates ou frameworks
• Audit de la stack technologique du client (Data Lakes, Workspaces, Notebooks, Jobs, etc…) ;
• Identification et Résolution des problèmes de performance et de robustesse des flux dans l’environnement du client
• Accompagnement de nos clients sur l’appropriation de nos solutions ;
• Formation des équipes client et internes sur les solutions Databricks et Spark
• Participation à l’animation de communautés data Keyrus (Articles, Rex, Webinar, etc…)
• Participation aux avant-ventes
• Participation aux réponses aux appels d’offres

Pourquoi nous rejoindre ?

Pour intégrer une communauté d’experts curieux et passionnés et évoluer dans un environnement multiculturel, formateur et favorisant la mobilité internationale.

Parce que notre culture d’entreprise favorise la diversité et l’inclusion. Cette diversité fait notre force : elle participe à l’innovation, au dynamisme et à l'évolution de notre organisation

Parce que vous êtes #DataGeek, #DigitalAddict, #InnovationLover !

A travers une Mission Santé-Handicap dédiée, Keyrus déploie une politique de recrutement et met en place un environnement Handi-accueillants. Tous nos postes sont ouverts aux personnes en situation de handicap.

Keyrus a été classé dans le palmarès Le Point « Les entreprises les plus responsables de France 2022 » sur la base d'indicateurs dérivés, entre autres, de rapports sur la RSE. #KeyrusRocks #YouRock

Keyrus est une entreprise où il fait bon vivre et travailler !

Découvrez

• La vie chez Keyrus en 60 sec
• Keyrus en 3 mots
• Nos animations pour nos collaborateurs sur Facebook et sur Instagram.
• Notre vidéo par Welcome To The Jungle