Data Engineer Databricks Senior - H/F - CDI

Talan Group; Paris; Sur place; EUR 55 000 - 75 000; Plein temps

Avantages offerts par ce poste

Télétravail jusqu’à 5 jours

Prime d’équipement de 100€

Tickets restaurant

Prime vacances

50% transport public

Mutuelle

Résumé du poste

Un groupe international de conseil recherche un Big Data Engineer Databricks Sénior en charge de l’intégration des données et de l'optimisation des pipelines. Le candidat idéal possède au moins 4 ans d'expérience en Big Data, maîtrise Scala et Python, ainsi que le framework Spark. L'environnement de travail est moderne et flexible avec la possibilité de télétravail. Des formations seront proposées pour accompagner la carrière des employés.

Qualifications

• Minimum 4 ans d'expérience dans le Big Data, 6 ans dans le développement logiciel.
• Expérience sur une plateforme Cloud comme AWS.
• Connaissances en DevOps et en méthodes de stockage comme HDFS, S3.

Responsabilités

• Coacher techniquement les membres de l’équipe et faire des recommandations.
• Définir l'architecture solution et logiciel en fonction des besoins.
• Analyser et benchmarker des solutions technologiques.

Connaissances

Développement logiciel (Scala, Python)

Maîtrise du framework Spark

Optimisation des pipelines de données

Connaissance des bases de données SQL

Bonnes compétences en communication

Organisation

Formation

Formation supérieure (école d’ingénieur, master)

Outils

Databricks

AWS

Kafka

Jenkins

Gitlab

Maven

Description du poste

Talan est un groupe international de conseil et d’expertises technologiques qui accélère la transformation de ses clients par les leviers de l'innovation, la technologie et la data.

Depuis plus de 20 ans, Talan conseille et accompagne les entreprises et les institutions publiques dans la mise en œuvre de leurs projets de transformation et d'innovation en France et à l'international.

Présent sur cinq continents, dans 20 pays, le Groupe, certifié Great Place To Work, qui compte plus de 7100 collaborateurs et réalise un chiffre d'affaires de 850 millions d'euros à fin 2024, et ambitionne de dépasser la barre du milliard d'euros à horizon 2025.

Doté d'un Centre de recherche et d'innovation, Talan met l'innovation au cœur de son développement et intervient dans les domaines des mutations technologiques telles que l'Intelligence Artificielle, la Data Intelligence, la Blockchain, pour servir la croissance des grands groupes et des ETI dans une démarche engagée et responsable.

En plaçant au cœur de sa stratégie « L’Innovation Positive » le Groupe Talan est convaincu que c’est en étant au service de l’humain que la technologie démultiplie son potentiel pour la société.

Nous sommes à la recherche d’un Big Data Engineer Databricks Sénior qui sera en charge de l’intégration des données: acquisition, préparation, modélisation et stockage, exposition, . Vous devrez faire preuve d’un état d’esprit à la fois innovant, méthodique, orienté solution (et non problème!), et communiquant.

Responsabilités

• Coacher techniquement les membres de l’équipe: solution et code review sur site, recommandation sur les formations à suivre, certifications à réaliser, …
• Analyse des besoins techniques métiers, définition de l’architecture solution et logiciel, référent technique, développement et optimisation, code review, maintenir les pratiques Devops “You build IT, You run IT”, support à recette et mise en production, documentation, et parfois assumer le rôle de Scrum Master,…
• Benchmark de solutions et conseil auprès de notre client sur les solutions technologiques à adopter, en lien avec leurs besoins
• Partage de connaissances et formations interne
• ISSUE(E) d’une formation supérieure (école d’ingénieur, master,…)
• Vous disposez d’au moins 4 années d’expérience dans le domaine du Big Data (et particulièrement sur le framework Spark), et au moins 6 années d’expérience dans le développement logiciel
• Vous maîtrisez le développement logiciel (Scala, Python …), et vous disposez de solides expériences dans la mise en place de pipelines de données
• Vous maîtrisez le Framework Spark (idéalement sur Databricks) et son optimisation
• Expérience sur une plateforme Cloud serait un plus et idéalement AWS
• Expérience sur des flux temps réel serait un plus : Kafka + Spark Streaming
• Vous maîtrisez les bases de données SQL et le langage SQL
• Vous avez de l'expérience sur les méthodes de stockage: HDFS, S3,…
• Vous avez de bonnes connaissances en devOps : Jenkins, Gitlab, Maven,…
• La connaissance des concepts suivants serait un +: DataOps, DataVault, DataMesh…
• Connaissance de l’Agilité
• Organisé(e)
• Sens du partage
• Bonne communication
• Orientation produit et solution
• Plan de formation pour accompagner votre carrière (formations éditeurs, certifications) grâce à nos partenariats nous accordant une position de partenaire privilégié, et management de proximité par des experts
• Locaux modernes en centre-ville
• Top 5 du Palmarès Great Place to Work
• Télétravail jusqu’à 5 jours selon les missions, prime d’équipement de 100€
• Mobilité en France et à l’étranger
• Top 1% des entreprises évaluées par Ecovadis dans le domaine social, environnemental et éthique
• Tickets restaurant, prime vacances, 50% transport (abonnement transport public), mutuelle
• Permanence handicap (consultant dédié aux collaborateurs en situation de handicap et aux proches aidants)
• Actionnariat salarié
• Prime de cooptations

L’équipe recrutement s’engage à vous proposer un processus de recrutement rapide et fluide

• 1 entretien RH par Teams (45min)
• 1 test technique
• 1 entretien technique par Teams (1heure)
• 1 entretien opérationnel avec le responsable de domaine, au siège (1heure)