Senior Data Engineer (H/F)

Believe; Paris; Sur place; EUR 40 000 - 60 000; Plein temps

Résumé du poste

Believe recherche un Data engineer pour rejoindre sa Tribu Data Office et la squad Dataplateforme. Dans ce rôle, vous serez en charge de l’implémentation des flux de données, de l’ingestion des nouvelles sources à leur préparation pour exposition.

Vous devrez travailler sur des transformations de données, la modélisation, et assurer des pratiques de test et de run au sein d’une organisation Scrum. Une expertise sur AWS et les pipelines de données est requise.

Responsabilités

• Implémenter les flux de données depuis l’ingestion des nouvelles sources.
• Préparer les données pour exposition au travers des niveaux Bronze, Silver et Gold.
• Travailler au sein de la squad organisée selon la pratique Scrum.

Connaissances

Conception et développement d’un pipeline d’ingestion sur AWS

Transformation de données

Pratiques de test

Modélisation Data en flocons

Pratiques de run

Rédaction de la documentation

Enjeux de performances et de sécurité

Description du poste

Vous intégrez la Tribu Data Office de Believe et la squad Dataplateforme en tant que Data engineer. La Dataplateforme s’appuie sur une stack AWS / Snowflake avec des pratiques à l’état de l’art en data engineering et data modélisation, et des contraintes de fort volume et haute performance.

Responsabilités

Au sein de la squad organisée selon la pratique Scrum, en charge du Build et du Run de son périmètre, vous aurez pour responsabilité d’implémenter les flux de données depuis l’ingestion des nouvelles sources jusqu’à leur préparation pour exposition au travers des niveaux Bronze, Silver et Gold (warehouse).

Compétences requises

• Conception et développement d’un pipeline d’ingestion sur AWS (Step function / Python / S3)
• Transformation de données (Python, Spark Scala / Databricks, SQL)
• Pratiques de test (TU Python, TU Spark Scala)
• Modélisation Data en flocons
• Pratiques de run (surveillance, monitoring, fix)
• Rédaction de la documentation (Data galaxy / Confluence)
• Enjeux de performances, de suivi des coûts et de sécurité