Data Engineer AWS / Snowflake - Freelance - Freelance (H/F)

Brief IA; Paris; Sur place; EUR 60 000 - 90 000; Plein temps

Résumé du poste

Brief IA recherche un Data Engineer AWS/Snowflake pour renforcer une équipe Data en croissance et travailler sur des solutions à grande échelle. Vous serez intégré(e) dans une Direction Data stratégique et collaborez avec des Data Engineers, Data Scientists, DevOps et Product Owners.

Vous contribuerez à concevoir et industrialiser des pipelines, à optimiser les traitements et à garantir la qualité et l'accessibilité des données pour les métiers, tout en appliquant les bonnes pratiques CI/CD et

Qualifications

• Maîtrise d'AWS et de l'écosystème Data.
• Expérience significative sur Snowflake en production.
• Programmation en Python et SQL.
• Conception de pipelines ETL/ELT et ingestion de données.
• Bonnes pratiques DevOps: Git, CI/CD, Docker.

Responsabilités

• Concevoir, développer et maintenir des pipelines de données robustes et scalables.
• Développer et optimiser les traitements sur AWS et Snowflake.
• Participer à l'architecture Data et à l'industrialisation de la plateforme.
• Assurer l'ingestion, la transformation et la mise à disposition des données.
• Collaborer avec les équipes Data Science sur l'industrialisation et le déploiement ML.

Connaissances

Pipelines de données

Gestion des données

Langages Python/SQL

Outils

AWS

Snowflake

Python

SQL

ETL/ELT

Git

CI/CD

Docker

Spark/PySpark/Scala

Description du poste

Pour le compte d'un grand groupe international, nous recherchons un Data Engineer AWS / Snowflake afin de renforcer une équipe Data en pleine croissance.

Au sein d'une Direction Data stratégique, vous interviendrez sur la conception, le développement et l'industrialisation de solutions Data à grande échelle.

Vous évoluerez dans un environnement technique stimulant, en collaboration avec des Data Engineers, Data Scientists, Dev Ops et Product Owners.

VOS MISSIONS

• Concevoir, développer et maintenir des pipelines de données robustes et scalables.
• Développer et optimiser les traitements de données sur AWS et Snowflake.
• Participer à l'évolution de l'architecture Data et à l'industrialisation de la plateforme.
• Assurer l'ingestion, la transformation et la mise à disposition de données provenant de sources multiples.
• Développer des traitements de données en Python, SQL et Spark.
• Optimiser les performances, la fiabilité et les coûts des traitements Data.
• Mettre en œuvre les bonnes pratiques Dev Ops : CI/CD, Docker, automatisation et monitoring.
• Collaborer avec les équipes Data Science sur l'industrialisation et le déploiement de solutions Machine Learning.
• Garantir la qualité, la disponibilité et l'accessibilité des données pour les équipes métiers.

ENVIRONNEMENT TECHNIQUE

Compétences indispensables :

• Cloud : AWS (bonne maîtrise de son écosystème Data).
• Data Warehouse : Snowflake (expérience significative en production).
• Langages : Python, SQL.
• Data Engineering : conception de pipelines ETL/ELT, ingestion et transformation de données.
• Dev Ops : Git, CI/CD, Docker.

Compétences appréciées :

• Apache Spark / PySpark / Scala.
• Architecture Big Data et plateformes Data distribuées.
• Optimisation des performances et des coûts Cloud.
• MLOps et industrialisation de modèles de Machine Learning.
• Expérience dans un environnement Data international.

PROFIL RECHERCHÉ

• Vous justifiez d'au