Ingénieur Big Data H / F

SOMA; Vanves; Sur place; EUR 50 000 - 70 000; Plein temps

Résumé du poste

Une entreprise de technologie en forte croissance recherche un Data Engineer pour concevoir et maintenir des architectures Big Data. Le candidat idéal aura au moins 4 ans d'expérience et une expertise en PySpark et Snowpark. Vous serez responsable de la création de pipelines de données efficaces, de l'optimisation des bases de données et de la collaboration avec des équipes techniques. Ce rôle offre la possibilité de contribuer à une communauté Data interne et de participer à des projets innovants.

Qualifications

• Minimum 4 ans d'expérience en tant que Data Engineer dans un environnement Big Data.
• Une expertise en PySpark et Snowpark (ou Snowflake).
• Connaissance approfondie des écosystèmes Big Data.

Responsabilités

• Concevoir, développer et maintenir des pipelines de données.
• Optimiser les performances des bases de données.
• Collaborer avec les équipes Data Science et BI.
• Réaliser une veille technologique sur les meilleures pratiques.

Connaissances

PySpark

Snowpark

SQL

Gestion de base de données

Hadoop

Spark

Hive

Formation

Bac +5 informatique / Ecole d'ingénieur

Description du poste

Afin d'accompagner la forte croissance de SOMA, nous sommes à la recherche de Data Engineers.

Ta mission

En tant que Data Engineer, tu participeras à la conception, la construction, le déploiement et le maintien en production d'architectures Big Data, ces dernières ayant pour objectif de permettre tant l'évolution que l'optimisation du système d'information décisionnel existant en permettant de nouveaux usages Analytics et IA. Nous opérons au travers de cinq practices internes, incluant Data Platform Services, où nos consultants apportent leur expertise sur des environnements Big Data complexes.

Responsabilités

• Concevoir, développer et maintenir des pipelines de données dans des environnements Big Data à l'aide de PySpark et Snowpark.
• Optimiser les performances des bases de données, en garantissant une gestion efficace des données.
• Développer des architectures data robustes et scalables pour répondre aux besoins métiers et aux volumes croissants de données.
• Participer à la mise en place des bonnes pratiques en matière de gestion de données (gouvernance, qualité, sécurité).
• Collaborer avec les équipes Data Science et BI pour intégrer les données dans les solutions analytiques.
• Réaliser une veille technologique pour intégrer les meilleures pratiques et les outils les plus récents dans vos projets.

Selon ton appétence et les besoins sur les sujets Data, tu as la possibilité de monter une communauté Data interne, c'est à dire :

Qualifications

• Intervenir sur des réponses à appel d’offre
• Intervenir sur des phases d'avant-vente
• Animer ou contribuer au développement des communautés (pratiques, veille, formation, )
• Bac +5 informatique / Ecole d'ingénieur
• Minimum 4 ans d'expérience en tant que Data Engineer dans un environnement Big Data.
• Une expertise en PySpark et Snowpark (ou Snowflake).
• Une solide expérience avec les systèmes de gestion de bases de données (SQL, optimisation des BDD).
• Connaissance approfondie des écosystèmes Big Data (Hadoop, Spark, Hive, etc.).
• Capacité à gérer des projets complexes dans un environnement en évolution rapide et une aptitude à travailler en équipe en collaborant avec des profils techniques et des métiers.