Data Engineer Confirmé – Pipelines Big Data & Spark

TerraOps; Lyon; Sur place; EUR 60 000 - 90 000; Plein temps

Résumé du poste

TerraOps recherche, pour un client dans le secteur de l'énergie, un Data Engineer confirmé (3 ans minimum hors alternance) pour booster plusieurs produits data et construire des pipelines solides, lisibles et performants. Si Spark/Scala/Hadoop sont ton terrain de jeu et que tu aimes intervenir sur tout le cycle de vie, tu vas adorer.

Conception et développement de traitements de données, détection et suivi des optimisations de requêtes, ateliers avec experts métiers et développement d’outils de

Qualifications

• 3 ans d'expérience minimum en data engineering (hors alternance)
• Maîtrise des traitements de données et de la construction de pipelines robustes et lisibles
• Bonne connaissance SQL et Spark, avec optimisation des requêtes

Responsabilités

• Conception et développement de traitements de données
• Détection et suivi des optimisations de requêtes (SQL/Spark)
• Ateliers avec experts métiers
• Développement d’outils de visualisation
• Documentation pour industrialisation
• Participation aux rituels agiles
• Cadrage de projets et défis d’architectures data

Connaissances

Spark

Scala

Hadoop

SQL

Big Data

Description du poste

TerraOps recherche, pour un client dans le secteur de l'énergie, un Data Engineer confirmé (3 ans minimum hors alternance) pour booster plusieurs produits data et construire des pipelines solides, lisibles et performants. Si Spark/Scala/Hadoop sont ton terrain de jeu et que tu aimes intervenir sur tout le cycle de vie, tu vas adorer.

Conception et développement de traitements de données, détection et suivi des optimisations de requêtes, ateliers avec experts métiers et développement d’outils de