Développeur Big Data, Spark, Java

Jobtailor; Lyon; Sur place; EUR 52 000 - 83 000; Plein temps

Résumé du poste

Jobtailor recherche un ingénieur data pour concevoir et maintenir des pipelines performants, migrer des traitements legacy vers Spark/Java et déployer sur Databricks. Vous assurerez la maintenance SQL/PL-SQL et veillerez à la qualité des données tout en participant au RUN et à l'amélioration continue.

Une expérience de 3 ans en architectures de données et une maitrise des technologies Big Data (Spark) sont souhaitées, avec une capacité à concevoir des solutions lisibles pour les Data Analysts.

Qualifications

• Ingénieur data avec expérience en Big Data et transformation.
• Idéalement au moins 3 ans sur architectures de données.
• Maîtrise Spark et SQL/PL-SQL, avec Java orienté objet.

Responsabilités

• Concevoir et maintenir des pipelines de données performants.
• Migrer des traitements legacy vers Spark/Java.
• Concevoir et déployer des pipelines sur Databricks.
• Assurer la maintenance SQL/PL-SQL et la qualité des données.
• Participer au RUN et à l'amélioration continue.
• Contribuer à la roadmap technique Spark.

Connaissances

Big Data

SQL/PL-SQL

Java

Data pipelines

Outils

Databricks

Spark

Informatica

PL/SQL

Description du poste

Responsabilités

• Concevoir et maintenir des pipelines de données performants : migrer des traitements legacy (Informatica, PL/SQL) vers des architectures modernes (Spark/Java).
• Concevoir et mettre en œuvre des pipelines de données sur Databricks.
• Assurer la maintenance corrective et évolutive des traitements existants SQL/PL-SQL.
• Garantir la performance, la robustesse et la qualité des données traitées.
• Participer activement au RUN et à l'amélioration continue des traitements.
• Contribuer à la guilde Spark pour l'optimisation des traitements et la définition de la roadmap technique.

Qualifications

• Vous êtes un ingénieur data avec une appétence forte pour les environnements Big Data en transformation.
• Vous possédez idéalement une expérience d'au moins 3 ans sur des architectures de données.
• Vous maîtrisez les technologies du Big Data (Spark) et les langages structurés (SQL/PL-SQL), avec une solide programmation orientée objet (Java).
• Votre capacité à comprendre les enjeux métier et à concevoir des solutions sécurisées et lisibles pour les Data Analysts est un atout majeur.