Big Data Engineer: Pipelines, Spark & SQL

Astek; Nantes; On-site; EUR 45,000 - 70,000; Full time

Job summary

Astek recherche un Développeur Data / Big Data à Nantes pour rejoindre une équipe data pluridisciplinaire et contribuer à des plateformes Big Data à forts enjeux.

Vous concevrez et développerez des pipelines, manipulerez de grands volumes de données et optimiserez des traitements SQL complexes, en collaboration avec les métiers et l’IT.

Dans un cadre Agile/Scrum, vous garantirez la qualité, la traçabilité et la gouvernance des données au service de cas d’usage critiques.

Qualifications

• Issu(e) d’une formation Bac+5 en ingénierie ou équivalent.
• Maîtrise du SQL et expérience en développement data / Big Data.
• Capacité à concevoir des pipelines robustes et à travailler dans un cadre Agile/Scrum.

Responsibilities

• Concevoir et développer des pipelines de données performants et robustes
• Manipuler, transformer et optimiser de grands volumes de données
• Développer et optimiser des traitements SQL complexes
• Participer à l’industrialisation des flux de données (qualité, traçabilité, performance)
• Contribuer à l’alimentation de datalakes et datawarehouses
• Travailler en collaboration avec les équipes métiers, BI et IT
• Appliquer les bonnes pratiques de développement et de tests dans un environnement data
• Évoluer dans un cadre Agile / Scrum

Skills

SQL

Big Data

Spark

Hadoop

Data pipelines

Git

CI/CD

Agile / Scrum

Education

Bac+5 (école d’ingénieur ou équivalent)

Tools

Git

CI/CD

Spark

Hadoop

Job description

Astek recherche un Développeur Data / Big Data à Nantes pour rejoindre une équipe data pluridisciplinaire et contribuer à des plateformes Big Data à forts enjeux.

Vous concevrez et développerez des pipelines, manipulerez de grands volumes de données et optimiserez des traitements SQL complexes, en collaboration avec les métiers et l’IT.

Dans un cadre Agile/Scrum, vous garantirez la qualité, la traçabilité et la gouvernance des données au service de cas d’usage critiques.