Data Engineer Big Data & IA - Toulouse

5 Degrés; Toulouse; Sur place; EUR 48 000 - 60 000; Plein temps

Avantages offerts par ce poste

Locaux en plein cœur de Toulouse

Formation Udemy et montée en skills

Tickets restaurant

Mutuelle d’entreprise/prévoyance

Forfait mobilité verte

Résumé du poste

5 Degrés Toulouse recherche un(e) Ingénieur(e) Data expérimenté(e) pour accompagner des clients publics toulousains sur des projets data à fort enjeu technique. Vous développerez des pipelines et optimiserez l’ingestion des données.

Vous travaillerez avec Hadoop, Spark, Kafka et Kubernetes, en collaboration avec les équipes ETL et décisionnel, dans un cadre dynamique et axé montée en compétence à Toulouse.

Qualifications

• 5 années d'expérience minimum en Data / Big Data.
• Maîtrise des technologies Hadoop, Hive, Spark, Kafka.
• Connaissance des environnements conteneurisés (Kubernetes, Docker).
• Capacité à travailler sur des projets publics toulousains.

Responsabilités

• Développer et maintenir des pipelines de traitement de données massives en batch et en temps réel.
• Concevoir et optimiser des flux d'ingestion et de routage de données.
• Exploiter et administrer les outils de l'écosystème Big Data du client.
• Participer à l'indexation et à la restitution de données via des outils de visualisation.
• Collaborer avec les équipes ETL, décisionnel et Modern Data Platform.

Connaissances

Hadoop

Hive

Spark

Kafka

Nifi

Elastic

Scala

Spark Streaming

IA

Outils

Kubernetes

Docker

Kibana

Description du poste

5 Degrés Toulouse recherche un(e) Ingénieur(e) Data expérimenté(e) pour accompagner des clients publics toulousains sur des projets data à fort enjeu technique. Vous développerez des pipelines et optimiserez l’ingestion des données.

Vous travaillerez avec Hadoop, Spark, Kafka et Kubernetes, en collaboration avec les équipes ETL et décisionnel, dans un cadre dynamique et axé montée en compétence à Toulouse.