Data Engineer Big Data (H / F) (IT) / Freelance

Insitoo Freelances; Lyon; Hybride; EUR 45 000 - 70 000; Plein temps

Résumé du poste

An innovative company is seeking a skilled Data Engineer to join their team in Lyon. This role involves developing and maintaining data pipelines within an Azure Datalake, ensuring operational excellence while collaborating with developers to produce insightful reports. With a flexible work arrangement of 3 days onsite and 2 days remote, this position offers a unique opportunity to contribute to a dynamic environment. You will be part of a dedicated team, working on exciting projects in the Professional Coffee Machine sector. If you have a passion for data engineering and thrive in an agile setting, this is the perfect opportunity for you.

Qualifications

• 3+ years of experience in data engineering with a focus on Azure environments.
• Proficient in Spark, Scala, and Java for data pipeline development.

Responsabilités

• Develop data pipelines for the Azure Datalake and maintain operational conditions.
• Collaborate with Qlik Sense developers to create reports for clients.

Connaissances

Spark

Scala

Java

Azure Data Explorer

Azure DevOps

KQL

Git

Maven

Agile methodologies

Description du poste

Contexte : 3 jours sur site en périphérie lyonnaise + 2 jours télétravail

Les missions attendues par le Data Engineer Big Data (H / F) :

Notre domaine fournit les services IT pour l’activité Professional Coffee Machine (PCM) : Digital Platform PCM, un datalake Azure dédié et des reportings pour nos clients et équipes internes (hors scope de la recherche). Back-office process (ERP et Field Service Management) : des reportings corporate et locaux sous SAP BW, Analysis for Office ou encore Qlik Sense.

DATA ENGINEER CONFIRME

Dans le cadre de la Digital Platform PCM, nous recherchons un :

• qui aura pour missions de prendre en charge des tâches de développement sur des projets de build pour fournir les data pipelines du Datalake et d’intervenir sur le maintien en condition opérationnelle du Datalake. Les développements réalisés permettent aux développeurs Qlik Sense et Azure Dashboard de construire les reports adéquats pour nos clients. Une expérience requise dans ce type d’environnement de 3 ans minimum est pré-requise.

Contexte de la mission

La mission s’opère en 3 jours sur site et 2 jours en télétravail. Le site est situé à Ecully, dont 2 jours au campus et 1 journée au 4M. La mission est un remplacement temporaire d’un membre de l’équipe, actuellement composée de 2 Data Engineers, pour une durée de 6 mois minimum. Démarrage souhaité fin avril / début mai, avec une date de fin prévisionnelle fin novembre 2025.

Profil candidat :

Les compétences clés recherchées sont :

1. Maîtrise des langages et outils tels que Spark, Scala, Java, ainsi que les environnements Azure (Azure Data Explorer, Azure DevOps).
2. Bonnes connaissances des services Azure pour le traitement de données batch et streaming (Data Factory, Synapse), ainsi que des requêtes KQL et de leur optimisation.
3. Une expérience dans les déploiements automatisés avec des outils comme ARM et la maîtrise des concepts DevOps (Git, Maven) est un plus.
4. Des expériences de travail dans un contexte de gestion de projets internationaux et de méthodologies agiles.
5. Des réflexes acquis en développement de produit dans un contexte agile, méthodologie SCRUM.
6. Anglais courant, niveau B2 requis, compte tenu du périmètre du poste.