Data Engineer (21) - CDI

Collective.work

Paris

Sur place

EUR 105 331 - 138 208

Plein temps

14 jours+

Recevez plus de réponses des employeurs

Envoyez un CV adapté au poste en quelques minutes.

Résumé du poste

Une grande entreprise de médias, située à Paris, recherche un Data Engineer pour rejoindre leur équipe technique du numérique. Le candidat idéal aura au moins 3 ans d'expérience dans le domaine, avec des compétences solides en Python et SQL. Le rôle implique la construction de pipelines de données robustes et la collaboration avec les équipes pour garantir la qualité des données. Ce poste à temps plein est conçu pour un professionnel de niveau intermédiaire à senior.

Qualifications

Au moins 3 ans d'expérience en Data engineering dans un environnement data.
Compétences solides en data : structures de données, code, architecture.
Expérience dans les méthodologies Agile : Scrum ou Kanban.

Responsabilités

Collecter et centraliser les différentes sources de données non homogènes.
Construire et maintenir de pipelines data robustes et scalables.
Assurer la conformité et la sécurité des données.

Connaissances

Data engineering

Python

SQL

Spark

BigQuery

Terraform

Agile methodologies

Outils

Google Cloud Platform

Delta Lake

Gitlab

Description du poste

Descriptif du poste

La Direction Technique du Numérique d'une grande entreprise de médias mène des projets transverses en étroite collaboration avec les autres directions, notamment la direction Data. La Direction Data, au sein de la Direction du Numérique, a été créée avec la volonté de faire de la Data un levier de croissance des offres numériques. La Direction Data a 3 grandes activités : maximiser la collecte de données tout en respectant les réglementations en vigueur, développer la connaissance et l'expérience utilisateurs et mettre à disposition auprès des équipes internes des outils de pilotage et d'aide à la décision.

Au sein de l'équipe Bronze, la prestation se déroulera en collaboration avec les autres équipes de la Data, au coeur de la plateforme Data. Cette équipe est composée d'un product owner, d'un data steward et de deux autres data ingénieurs. Notre stack technique est principalement constituée de Python, Spark, SQL pour les traitements de données, Airflow pour l'orchestration et Cloud Storage et Delta Lake pour le stockage. La stack inclut aussi les services BigQuery, Dataproc, PubSub et Cloud Storage de la Google Cloud Platform ainsi que Terraform et Terragrunt pour la gestion de l'infrastructure.

Prestations attendues

Prestation de cette équipe

Collecter et centraliser les différentes sources de données non homogènes
Assurer la conformité et la sécurité des données
Participer aux initiatives de gouvernance des données

Prestation en data engineering

Participer activement aux différentes phases de conception, de planification et de réalisation des tâches avec l'équipe
Construire et maintenir de pipelines data robustes et scalables
Accompagner les membres de l'équipe dans l'exploitation et le requêtage des données
Organiser et structurer le stockage des données
Mettre en place et maintenir des infrastructures scalables capables de répondre aux besoins et à l'accroissement rapide du volume de données
Construire et maintenir les workflows de la CI/CD
Partager avec les autres data ingénieurs pour appliquer les bonnes pratiques en vigueur
Assurer l'évolutivité, la sécurité, la stabilité des environnements
Participer aux différentes instances de data engineering
Contribuer et veiller à la mise à jour de la documentation
Faire de la veille technologique active dans le domaine