Data Engineer confirmé F/H - Lyon

April Group; France; Sur place; EUR 40 000 - 60 000; Plein temps

Résumé du poste

Une entreprise innovante cherche un Data Engineer confirmé(e) basé à Lyon. Le candidat idéal concevra, développera et maintiendra des pipelines de données tout en participat aux choix technologiques. Vous ferez partie d'une équipe dynamique, en pleine transformation numérique, contribuant à l’efficacité opérationnelle et à l'amélioration des expériences client grâce à l'intelligence artificielle. Compétences requises incluent le développement en Python, l’utilisation de Snowflake et la connaissance des outils d'orchestration comme Dagster.

Prestations

Parcours d'intégration

Ambiance collaborative

Impact sociétal

Qualifications

• Expérience en développement de pipelines de données dans un environnement Cloud.
• Connaissance des outils d'orchestration et de BI.
• Capacité à travailler sur des projets de transformation de données.

Responsabilités

• Concevoir et maintenir des pipelines de données robustes.
• Participer à l'optimisation des plateformes analytiques.
• Documenter et former les équipes sur les bonnes pratiques Data.

Connaissances

Développement Python

SQL

ELT

Gestion des données

Travail avec Snowflake

Utilisation de Dagster

Formation

Diplôme en informatique ou domaine connexe

Outils

Talend

Data Build Tool

Qlik Sense

Azure Kubernetes Service

Description du poste

Venez développer et mettre en place des traitements de collecte, d'organisation et de mise à disposition des données (internes et externes).Votre objectif : faciliter le travail des équipes d'analystes et de valorisation des données.

• de choisir un métier dont vous pourrez être fier : «accompagner et protéger à chaque moment qui compte, simplement» telle est la mission et la raison d’être partagée par l’ensemble de nos collaborateurs,
• de développer votre expertise dans un environnement en pleine transformation, au carrefour de l’innovation et de l’expérience client : notre ambition, être un acteur digital, omnicanal et agile, champion de l'expérience client,
• de vous engager au sein d'une entreprise engagée : nous rejoindre, c’est faire partie d’un Groupe responsable qui agit en entreprise citoyenne en étant mobilisé autour de 4 axes (santé, aidants, éducation et environnement) avec un impact sociétal positif et réel.

Nous nous engageons à promouvoir des emplois respectant la diversité et la différence, ouverts à chacun.

Dans un contexte d’accélération de sa stratégie Data, le groupe renforce ses capacités pour répondre à des enjeux métiers majeurs : lutte contre la fraude, accompagnement des équipes commerciales, fidélisation des assurés et optimisation continue de la performance grâce à l’intelligence artificielle.

Nous recrutons un(e) Data Engineer confirmé(e) pour rejoindre notre équipe Data. Vous interviendrez à la fois sur le développement et la maintenance des pipelines métiers (environ 60 % de votre activité) et sur l’évolution de notre plateforme d’orchestration Dagster (environ 40 %), au cœur de notre écosystème data.

VOS FUTURES MISSIONS :

1. Data Engineering

Conception et industrialisation des pipelines de données

• Concevoir, développer et maintenir des pipelines ELT robustes et scalables dans un environnement Snowflake / dbt
• Garantir la disponibilité, la sécurité et la qualité des flux de données
• Intégrer et fiabiliser des sources de données hétérogènes (bases de données, APIs, fichiers plats)

Participer à la conception et à l’évolution de datamarts transverses

Innovation et amélioration continue

• Contribuer aux projets structurants de la roadmap Data 2025 (Fraude, GENIA, KPI transverses, etc.)
• Proposer et mettre en œuvre des optimisations sur les processus de transformation et de modélisation des données
• Participer aux choix technologiques et à la définition des standards et bonnes pratiques Data

Documentation et partage des connaissances

• Rédiger et maintenir la documentation technique
• Accompagner et former les équipes métiers et techniques sur les nouveaux flux et usages data

2. Gestion, exploitation et évolution de notre plateforme analytique & orchestration

• Superviser le bon fonctionnement de la plateforme d’orchestration
• Administrer les jobs, schedules et sensors
• Diagnostiquer, analyser et résoudre les incidents d’exécution
• Participer aux déploiements et mises à jour de Dagster sur Azure Kubernetes Service (AKS)
• Optimiser les performances de la plateforme (gestion des ressources, métadonnées, fiabilité)
• Contribuer aux pipelines CI/CD (GitLab CI, Azure Key Vault)
• Mettre en œuvre et faire évoluer les starter kits à destination des équipes Data
• Accompagner les équipes dans l’adoption et l’utilisation de Dagster
• Documenter et diffuser les bonnes pratiques d’orchestration
• Contribuer à la définition et à l’évolution de la stratégie DataOps

Notre stack technique :

• Orchestration: Dagster (que vous apprendrez avec nous), VTOM
• ELT/Transformation: Talend et Data Build Tool (essentiel), DataLoad Tool
• Stockage: Snowflake (alimenté via BDD, API, fichiersplats...)
• Versioning : Git / GitLab
• BI et Dataviz : Qlik Sense, Streamlit
• Développement: Python (maîtrise requise), SQL
• Infrastructure: Azure (AKS), Docker, Kubernetes, Helm
• DevOps: GitLab CI, Azure KeyVault, Terraform

Notre roadmap 2025 comprend :

• Amélioration de la performance opérationnelle grâce à l’IA
• Lutte contre la fraude
• Fidélisation de nos assurés
• Industrialisation de notre écosystème Data

Cette opportunité est à pourvoir dans le cadre d'une création de poste.

Directement rattaché.e à une équipe Data groupe, vous rejoindrez notre équipe Lyonnaise.

Dès votre arrivée, vous bénéficierez d'un parcours d'intégration pour favoriser votre prise de poste.