Développeur Big Data H / F

IT MATES; Aix-en-Provence; Sur place; EUR 45 000 - 60 000; Plein temps

Résumé du poste

Une entreprise de services numériques basée à Aix-en-Provence recherche un Développeur Big Data pour renforcer son équipe Data. Vous serez intégré à une équipe technique pour développer des pipelines de données, optimiser les traitements, et collaborer avec les équipes Data. Une expérience confirmée et une maîtrise des outils de traitement distribué sont nécessaires. Le poste est en méthodologie Agile et implique des technologies comme Python, Scala, et Spark.

Qualifications

• Expérience confirmée (2 à 5 ans minimum) en développement Big Data.
• Maîtrise des outils de traitement distribué (Spark, Hadoop, etc.).
• Connaissance des architectures de données modernes (Data Lake, streaming, etc.).
• Capacité à travailler en équipe, esprit d'initiative, rigueur.

Responsabilités

• Concevoir et développer des pipelines de données robustes et scalables.
• Participer à l'optimisation et à l'automatisation des traitements de données.
• Collaborer avec les équipes Data pour proposer des solutions adaptées.
• Participer aux phases de test, de validation et de mise en production.
• Documenter les développements et assurer la maintenance évolutive.

Connaissances

Python

Scala

Java

Spark

Hadoop

SQL

Outils

Hive

Airflow

Databricks

HDFS

Description du poste

Dans le cadre du renforcement de son équipe Data, notre client grand compte basé à Aix-en-Provence recherche un Développeur Big Data. Vous serez intégré(e) à une équipe technique dynamique et participerez à la mise en oeuvre de projets autour de la collecte, du traitement et de la valorisation de grands volumes de données. Missions principales - Concevoir et développer des pipelines de données robustes et scalables. - Participer à l'optimisation et à l'automatisation des traitements de données. - Collaborer avec les équipes Data (ingénierie, science, architecture) pour proposer des solutions adaptées aux besoins métiers. - Participer aux phases de test, de validation et de mise en production. - Documenter les développements et assurer la maintenance évolutive des traitements.

Environnement technique - Langages : Python, Scala, Java - Frameworks : Spark, Kafka, Hadoop - Outils / Techs : Hive, Airflow, Databricks, HDFS, SQL - Cloud : Azure / AWS / GCP (selon environnement client) - Méthodologie : Agile / Scrum Profil recherché - Expérience confirmée (2 à 5 ans minimum) en développement Big Data. - Maîtrise des outils de traitement distribué (Spark, Hadoop, etc.). - Connaissance des architectures de données modernes (Data Lake, streaming, etc.). - Capacité à travailler en équipe, esprit d'initiative, rigueur.