DATA ENGINEER JAVA SPARK H/F

SmartRecruiters, Inc.; Nantes; Hybride; EUR 38 000 - 45 000; Plein temps

Avantages offerts par ce poste

Mutuelle

Transports

Indemnités vélo

Carte Swile

Télétravail 2 jours/semaine

Résumé du poste

Inetum recherche un Data Engineer confirmé pour renforcer l'équipe Data et le DatahubV2. Vous concevez, développez et optimisez les pipelines data, en assurant fiabilité, performance et bonnes pratiques DevOps.

Vous collaborerez avec les équipes Data, Infra et Méthodes pour élever les standards et les KPIs. Vous interviendrez sur Spark sur Kubernetes, SQL multi-sources et orchestrations (Airflow), avec Java et Python, dans un contexte cloud et containerisé; télétravail partiel et collaboration

Qualifications

• Expérience confirmée en data engineering sur environnements distribués.
• Maîtrise de Java et Spark.
• Compétences SQL et manipulation de données multi-sources.

Responsabilités

• Concevoir et optimiser des pipelines data (batch et streaming).
• Développer des traitements Spark sur Kubernetes (Spark as a Service).
• Manipuler les données DatahubV2 via Starburst (Trino) en SQL.
• Construire et orchestrer des workflows Data avec Airflow (Python).
• Réaliser les intégrations Java (et Scala selon les applications).
• Assurer la qualité, la performance et la fiabilité des jobs Data.

Connaissances

Java

Spark

Kubernetes

SQL

Python

DevOps

Outils

Airflow

Starburst (Trino)

Astronomer

ELK

Gitlab

Jenkins

ArgoCD

Description du poste

• Rémunération: EUR 38,000 - EUR 45,000 - annuel

Description de l'entreprise

Inetum est un leader européen des services numériques. Pour les entreprises, les acteurs publics et la société dans son ensemble, les 28 000 consultants et spécialistes du groupe visent chaque jour l'impact digital : des solutions qui contribuent à la performance, à l'innovation et au bien commun.

Présent dans 19 pays au plus près des territoires, et avec ses grands partenaires éditeurs de logiciels, Inetum répond aux enjeux de la transformation digitale avec proximité et flexibilité.

Porté par son ambition de croissance et d'industrialisation, Inetum a généré en 2023 un chiffre d'affaires de 2,5 milliards d'€.

Pour répondre à un marché en croissance continue depuis plus de 30ans, Inetum a fait le choix délibéré de se recentrer sur 4 métiers afin de gagner en puissance et proposer des solutions sur mesure, adaptées aux besoins spécifiques de ses clients : le conseil (Inetum Consulting), la gestion des infrastructures et applications à façon (Inetum Technologies), l'implémentation de progiciels (Inetum Solutions) et sa propre activité d'éditeur de logiciels (Inetum Software). Inetum a conclu des partenariats stratégiques avec 4 grands éditeurs mondiaux - Salesforce, ServiceNow, Microsoft et SAP et poursuit une stratégie d'acquisitions dédiée afin d'entrer dans le top 5 européen sur ces technologies et proposer la meilleure expertise à ses clients.

Tous nos postes sont ouverts aux personnes en situation de handicap.

Description du poste

Dans le cadre du développement du DatahubV2, nous recherchons un Data Engineer confirmé maîtrisant les environnements Java, Spark et les architectures Data modernes.

Vous interviendrez au sein de l'équipe Socle Data et serez responsable de la construction, l’optimisation et la fiabilisation des pipelines data, tout en garantissant les bonnes pratiques de développement et de performance.

Vos missions principales :

• Concevoir, développer et optimiser des pipelines de données performants (batch, calcul distribué).
• Développer des traitements Spark 3 instanciés sur Kubernetes (Spark as a Service).
• Manipuler les données du DatahubV2 via Starburst (Trino) en SQL.
• Construire et orchestrer des workflows Data sur Astronomer / Apache Airflow en Python.
• Réaliser les intégrations applicatives en Java (et potentiellement Scala selon les applications).
• Assurer la qualité, la performance et la fiabilité des jobs Data.
• Contribuer à la mise en place et à la maintenance des pipelines DevOps (Gitlab, Jenkins, ArgoCD…).
• Suivre et analyser les logs applicatifs via ELK (Log as a Service).
• Coopérer avec l’équipe Socle Data, utiliser et faire évoluer les librairies Python internes.
• Participer à la documentation et à l'amélioration continue des pratiques Data du DatahubV2.

Technologies & Compétences requises

• Traitements distribués, performance, optimisation, exécution sur Kubernetes.
• Requêtage SQL interactif, combinaison multi-sources, compréhension du SEP.
• Création, planification et supervision de DAGs, orchestration de workflows.

Compétences Cloud / Infrastructure

• Compréhension des environnements cloud de la DMZR.
• Dashboarding, gestion et analyse des logs.

Compétences DevOps

• Gestion et évolution de pipelines CI/CD basés sur des templates existants.

Profil recherché

• Expérience confirmée en tant que Data Engineer sur des environnements distribués et Big Data.
• Très bonne maîtrise de Java et Spark.
• Capacité à travailler dans un environnement cloud, containerisé et orienté DevOps.
• Bon niveau en SQL pour manipuler des données multi-sources.
• Autonomie, rigueur, esprit d’analyse, sens de la performance.
• Une expérience en contexte bancaire ou datahub est un plus.

Informations complémentaires

10 RTT en plus des 27 jours de congés payés

Des avantages groupes : 9€/jour sur votre carte Swile, une bonne mutuelle, prise en charge de 70% de votre abonnement de transports, des indemnités kilométriques vélo…

Un CSE : subvention sport et loisir, chèques vacances, chèques cadeaux…

De la flexibilité avec 2 jours de télétravail/semaine en moyenne