Data Engineer Databricks Senior - H/F - CDI

Talan Group; Paris; Sur place; EUR 45 000 - 65 000; Plein temps

Avantages offerts par ce poste

Tickets restaurant

Prime vacances

50% transport

Mutuelle

Actionnariat salarié

Télétravail possible jusqu’à 5 jours par semaine

Résumé du poste

Une entreprise de conseil en technologies recherche un expert en Big Data pour coacher son équipe et piloter des projets variés. Vous aurez des responsabilités sur l'architecture des solutions, le développement de pipelines de données et le mentorat d'autres développeurs. Un minimum de 4 ans d'expérience est requis, notamment avec Spark et des langages comme Scala et Python. L'entreprise offre un cadre de travail moderne, des avantages variés et la possibilité de télétravail.

Qualifications

• Au moins 4 années d'expérience dans le domaine du Big Data.
• Expérience dans le développement logiciel de plus de 6 ans.
• Connaissance des méthodes de stockage: HDFS, S3.

Responsabilités

• Coacher techniquement les membres de l’équipe.
• Analyser les besoins techniques métiers et définir l’architecture.
• Benchmark de solutions et conseil auprès du client.

Connaissances

Développement logiciel (Scala, Python)

Gestion de pipelines de données

Framework Spark

Bases de données SQL

DevOps (Jenkins, Gitlab, Maven)

Agilité

Communication

Formation

Formation supérieure (école d’ingénieur, master)

Outils

AWS

Kafka

Databricks

Description du poste

Responsabilités

• Coacher techniquement les membres de l’équipe: solution et code review sur site, recommandation sur les formations à suivre, certifications à réaliser, …
• Analyse des besoins techniques métiers, définition de l’architecture solution et logiciel, référent technique, développement et optimisation, code review, maintenir les pratiques Devops “You build IT, You run IT”, support à recette et mise en production, documentation, et parfois assumer le rôle de Scrum Master,…
• Benchmark de solutions et conseil auprès de notre client sur les solutions technologiques à adopter, en lien avec leurs besoins
• Partage de connaissances et formations interne
• Issu(e) d’une formation supérieure (école d’ingénieur, master,…)
• Vous disposez d’au moins 4 années d’expérience dans le domaine du Big Data (et particulièrement sur le framework Spark), et au moins 6 années d’expérience dans le développement logiciel
• Vous maîtrisez ledéveloppement logiciel (Scala, Python …), et vous disposez de solides expériences dans la mise en place de pipelines de données
• Vous maîtrisez leFramework Spark (idéalement sur Databricks) etson optimisation
• Expérience sur une plateforme Cloud serait un plus et idéalement AWS
• Expérience sur des flux temps réelserait un plus : Kafka + Spark Streaming
• Vous maîtrisez les bases de données SQL et le langage SQL
• Vous avez de l'expérience sur les méthodes de stockage: HDFS, S3,,…
• Vous avez de bonnes connaissances en devOps : Jenkins, Gitlab, Maven, …
• La connaissance des concepts suivants serait un +: DataOps, DataVault, DataMesh..
• Connaissance de l’Agilité
• Organisé(e)
• Sens du partage
• Bonne communication
• Orientation produit et solution
• Plan de formation pour accompagner votre carrière (formations éditeurs, certifications) grâce à nos partenariats nous accordant une position de partenaire privilégié, et management de proximité par des experts
• Locaux modernes en centre-ville
• Top 5 du Palmarès Great Place to Work
• Télétravail jusqu’à 5 jours selon les missions, prime d’équipement de 100€
• Mobilité en France et à l’étranger
• Top 1% des entreprises évaluées par Ecovadis dans le domaine social, environnemental et éthique
• Tickets restaurant, prime vacances, 50% transport (abonnement transport public), mutuelle
• Permanence handicap (consultant dédié aux collaborateurs en situation de handicap et aux proches aidants)
• Actionnariat salarié
• Prime de cooptations

L’équipe recrutement s’engage à vous proposer un processus de recrutement rapide et fluide

• 1 entretien RHpar Teams (45min)
• 1 test technique
• 1 entretien technique par Teams (1heure)
• 1 entretien opérationnel avec le responsable de domaine, au siège (1heure)