Data Engineer Senior - Expert Snowflake H/F

Key Performance Consulting (KPC); Lyon; On-site; EUR 90,000 - 130,000; Full time

Job summary

KPC recrute un Data Engineer Senior avec une forte expertise Snowflake pour accompagner ses clients dans la conception et la construction de plateformes Data modernes. Vous interviendrez sur des projets à forte valeur ajoutée autour de la construction, transformation et industrialisation des plateformes Data.

Votre expertise Snowflake vous permettra d’intervenir sur les choix de conception, l’implémentation et l’optimisation des solutions, tout en développant des pipelines, des processus

Qualifications

• Expérience significative en Data Engineering dans des cabinets de conseil ou ESN.
• Conception et mise en production de plateformes Data reposant sur Snowflake.
• Bonne maîtrise de SQL et Python.
• Connaissance des problématiques de performance et de coût des plateformes Cloud.
• Les certifications Snowflake constituent un plus.
• Conception et industrialisation de pipelines Data robustes et scalables.

Responsibilities

• Concevoir et développer des pipelines Data robustes et industrialisés.
• Concevoir et implémenter des architectures Data s’appuyant fortement sur Snowflake.
• Développer les processus d’ingestion, de transformation et de mise à disposition des données.
• Modéliser et structurer les données pour Analytics, BI, Data Science et IA.
• Développer et optimiser des traitements SQL avancés.
• Mettre en œuvre les bonnes pratiques de développement et d’industrialisation autour de Snowflake.
• Optimiser les performances des traitements, des requêtes et des modèles de données.
• Travailler sur l’optimisation des coûts et de la consommation des ressources Snowflake.
• Mettre en place des mécanismes de qualité, de monitoring et d’observabilité de la donnée.
• Participer à l’automatisation des déploiements et à la mise en place de CI/CD et Infrastructure as Code.
• Contribuer aux choix techniques et aux bonnes pratiques d’architecture Data.
• Accompagner les équipes clientes dans leur montée en compétence sur les technologies Data modernes.
• Participer à la capitalisation et au partage d’expertise au sein de la communauté Data KPC.

Skills

Data Engineer

Snowflake

SQL avancé

Python

Data pipelines

Architecture Data

Performance tuning

Tools

Snowflake

dbt

Airflow

Spark

ETL/ELT

Git

Terraform

Docker

Snowpipe

CI/CD

Job description

KPC recrute un(e) Data Engineer Senior avec une forte expertise Snowflake pour accompagner ses clients dans la conception et la construction de plateformes Data modernes.

Votre rôle :

Au sein des équipes Data de KPC, vous intervenez sur des projets à forte valeur ajoutée autour de la construction, de la transformation et de l’industrialisation des plateformes Data de nos clients.

Votre expertise Snowflake vous permet d’intervenir aussi bien sur les choix de conception que sur l’implémentation et l’optimisation des solutions.

Vous ne vous contentez pas de développer des pipelines : vous comprenez l’ensemble de la chaîne de valeur de la donnée et êtes capable de proposer des solutions performantes, maintenables, scalables et adaptées aux usages métiers.

En collaboration avec les Data Architects, consultants et équipes clientes, vous serez notamment amené(e) à :

• Concevoir et développer des pipelines Data robustes et industrialisés ;
• Concevoir et implémenter des architectures Data s’appuyant fortement sur Snowflake ;
• Développer les processus d’ingestion, de transformation et de mise à disposition des données ;
• Modéliser et structurer les données pour répondre aux besoins Analytics, BI, Data Science et IA ;
• Développer et optimiser des traitements SQL avancés ;
• Mettre en œuvre les bonnes pratiques de développement et d'industrialisation autour de Snowflake ;
• Optimiser les performances des traitements, des requêtes et des modèles de données ;
• Travailler sur l’optimisation des coûts et de la consommation des ressources Snowflake ;
• Mettre en place des mécanismes de qualité, de monitoring et d’observabilité de la donnée ;
• Participer à l’automatisation des déploiements et à la mise en place de pratiques CI/CD et Infrastructure as Code ;
• Contribuer aux choix techniques et aux bonnes pratiques d’architecture Data ;
• Accompagner les équipes clientes dans leur montée en compétence sur les technologies et pratiques Data modernes ;
• Participer à la capitalisation et au partage d’expertise au sein de la communauté Data KPC.

Votre expertise Snowflake

Snowflake est au cœur de vos expériences passées.

Vous avez une expérience significative de la plateforme et maîtrisez notamment :

• L’architecture et les concepts fondamentaux de Snowflake ;
• La conception et l’optimisation des modèles de données ;
• Le développement SQL avancé et l’optimisation des requêtes ;
• La gestion des Virtual Warehouses et l’optimisation des performances ;
• Les mécanismes d’ingestion et de transformation de données ;
• Snowpipe, Streams & Tasks, Dynamic Tables ou fonctionnalités équivalentes ;
• La gestion des rôles, droits et modèles de sécurité ;
• Le partage et la mise à disposition des données ;
• Le monitoring et l’optimisation des coûts ;
• L’intégration de Snowflake avec les principaux outils de l’écosystème Data.

La connaissance de Snowpark, des fonctionnalités avancées de la plateforme ou des nouveaux usages Data & IA autour de Snowflake constitue un véritable plus.

Votre environnement technologique

Au-delà de Snowflake, vous évoluez dans des écosystèmes Data modernes et pouvez être amené(e) à travailler avec :

Data Engineering : Python, SQL, dbt, Airflow, Spark et solutions ETL/ELT.

DevOps & DataOps : Git, CI/CD, Terraform, Docker et Infrastructure as Code.

Data & Analytics : outils de BI, Data Science, Machine Learning et plateformes de gouvernance de données.

Vous n’avez pas nécessairement travaillé avec l’ensemble de ces technologies : nous recherchons avant tout une solide culture Data Engineering associée à une expertise forte de Snowflake.

Votre profil :

Vous disposez d’une expérience significative en tant que Data Engineer, idéalement acquise dans des environnements complexes au sein d’un cabinet de conseil, d’un intégrateur, d’une ESN ou d’une organisation disposant d’une forte culture Data.

Vous avez déjà participé à la conception et à la mise en production de plateformes Data reposant sur Snowflake.

Vous êtes particulièrement à l’aise avec SQL et disposez de bonnes compétences en développement, notamment en Python.

Vous comprenez les problématiques de performance, de volumétrie, de qualité de données, de sécurité et de maîtrise des coûts associées aux plateformes Cloud Data.

Ce qui fera la différence

Nous recherchons avant tout un(e) Data Engineer qui aime construire.

Vous savez aller au-delà de l’exécution d’une spécification : vous êtes capable de comprendre le besoin, de challenger une approche technique et de proposer une solution plus pertinente lorsque cela est nécessaire.

Vous accordez de l’importance à la qualité du code, à l’industrialisation, à la performance et à la maintenabilité des solutions que vous développez.

Vous appréciez également le contexte du conseil : travailler sur des problématiques différentes, découvrir de nouveaux environnements clients et partager votre expertise avec des interlocuteurs aussi bien techniques que métiers.

Les certifications Snowflake constitue un plus et pourront valoriser votre expertise.

Pourquoi rejoindre KPC ?

Rejoindre KPC, c’est intégrer un spécialiste de la Data et de la transformation digitale et intervenir sur des projets où la donnée occupe une place centrale.

Vous aurez l’opportunité de travailler sur des architectures Data modernes, d’approfondir votre expertise Snowflake et d’évoluer aux côtés de consultants, Data Engineers et Data Architects expérimentés.

Vous pourrez également contribuer à la construction des bonnes pratiques, accélérateurs et offres Data de KPC autour de Snowflake.

Nous recherchons des profils qui souhaitent être plus que de simples exécutants techniques : des Data Engineers capables de concevoir, construire, optimiser et faire évoluer les plateformes Data de demain.

Vous êtes passionné(e) par le Data Engineering et Snowflake est devenu votre terrain de jeu ? Rejoignez KPC.