Data Engineer Modern Data Stack F/H

Orange Business; Lyon; Sur place; EUR 65 000 - 90 000; Plein temps

Résumé du poste

Orange Business recherche un Data Engineer pour concevoir et maintenir des pipelines d'ingestion et de transformation en Python et SQL, en mode batch et temps réel, sur des plateformes cloud (Azure, AWS, GCP). Vous industrialiserez les traitements via CI/CD et IaC et contribuerez aux projets IA/ML, tout en maîtrisant les coûts et les performances.

Le poste implique une collaboration avec les équipes data et métiers et une expérience confirmée sur le déploiement en environnement cloud et des

Qualifications

• Expérience 5 ans minimum en data engineering et production de pipelines dans le cloud.
• Maîtrise Python et SQL avancé.
• Connaissance des outils d’intégration: dbt, Spark/PySpark, Kafka, Nifi, Talend et équivalents.
• Orchestration: Airflow, Dagster, Prefect, Azure Data Factory.
• Connaissance des architectures cloud et hybrid cloud et notions FinOps, coût/performances.

Responsabilités

• Concevoir, développer et maintenir des pipelines d'ingestion et de transformation de données en Python et SQL.
• Mettre en oeuvre des Modern Data Platforms sur le cloud: Data Lake, Data Warehouse, zones raw/ cleansed/ business.
• Industrialiser les traitements : orchestration, CI/CD, tests, reprise sur erreur, déploiement via IaC.
• Mettre en place les contrôles de qualité de données et l’observabilité associée.
• Contribuer aux projets liés à la donnée et à l’IA (LLM chatbot, RAG, Azure AI/ML services).
• Optimiser les performances et les coûts des traitements (partitionnement, formats defichiers, FinOps), y compris architectures hybrides on-premise.

Connaissances

5+ ans data engineering

Python

SQL avancé

dbt

Spark / PySpark

Kafka / Kafka Connect

Nifi

Airbyte

Talend

Airflow

Dagster

Prefect

Azure Data Factory

Terraform

AWS CDK

Bicep

GitHub Actions

GitLab CI/CD

Jenkins

MLOps / AI platforms

Parquet / Delta Lake / Iceberg

Cloud hybride (on-premise)

Outils

dbt

Spark

Talend

Kafka Connect

Nifi

Airbyte

Airflow

Dagster

Prefect

Azure Data Factory

Terraform

AWS CDK

Bicep

GitHub Actions

GitLab CI/CD

Jenkins

Description du poste

Votre rôle

Présente à Lyon, Grenoble, Marseille et Nice, l'agence Conseil & Expertise Grand Sud-Est intervient en synergie avec les agences sectorielles et géographiques d'Orange Business sur les périmètres suivants : Stratégie, Gouvernance & Trust, Architecture, Infrastructure, Services, et Acculturation.

• Concevoir, développer et maintenir des pipelines d'ingestion et de transformation de données (batch et temps réel) en Python et SQL.
• Mettre en oeuvre des Modern Data Platforms sur le cloud (Azure, AWS, GCP) : Data Lake, Data Warehouse, zones raw / cleansed / business.
• Industrialiser les traitements : orchestration, CI/CD, tests, reprise sur erreur, déploiement via IaC.
• Mettre en place les contrôles de qualité de données et l'observabilité associée (fraîcheur, complétude, lineage, alerting).
• Contribuer aux projets liés à la donnée et à l'IA (LLM chatbot, RAG, Azure AI/ML services) en exposant des données fiables et exploitables.
• Optimiser les performances et les coûts des traitements (partitionnement, formats defichiers, dimensionnement, FinOps), y compris sur des architectures hybrides intégrant des environnements on-premise.

Vos missions

• Concevoir, développer et maintenir des pipelines d'ingestion et de transformation de données (batch et temps réel) en Python et SQL.
• Mettre en oeuvre des Modern Data Platforms sur le cloud (Azure, AWS, GCP) : Data Lake, Data Warehouse, zones raw / cleansed / business.
• Industrialiser les traitements : orchestration, CI/CD, tests, reprise sur erreur, déploiement via IaC.
• Mettre en place les contrôles de qualité de données et l'observabilité associée (fraîcheur, complétude, lineage, alerting).
• Contribuer aux projets liés à la donnée et à l'IA (LLM chatbot, RAG, Azure AI/ML services) en exposant des données fiables et exploitables.
• Optimiser les performances et les coûts des traitements (partitionnement, formats defichiers, dimensionnement, FinOps), y compris sur des architectures hybrides intégrant des environnements on-premise.

Votre profil

• Expérience: au moins 5 ans sur des projets de data engineering, dont une expérience significative sur la mise en production de pipelines en environnement cloud.
• Python: maîtrise confirmée (code structuré, testé, packagé), ainsi queSQL avancé.
• Intégration & transformation: dbt, Spark / PySpark, Talend, Kafka / Kafka Connect, Nifi, Airbyte ou équivalents — plusieurs outils du marché pratiqués.
• Orchestration : Airflow, Dagster, Prefect, Azure Data Factory.
• Cloud: maîtrise d'au moins une des plateformes (Azure, GCP, AWS) avec une expérience significative sur ses services data (BigQuery, Synapse, Databricks, Snowflake, Redshift…).
• IaC : Terraform, AWS CDK, Bicep.
• CI/CD: GitHub Actions, GitLab CI/CD, Jenkins.
• Data/AI (un plus): connaissance des plateformes MLOps, services AI/ML cloud, formats et moteurs de table (Parquet, Delta Lake, Iceberg).
• Cloud hybride :expérience des déploiements et intégrations avec des infrastructures on-premise.

Entité

Orange Business est un intégrateur réseau et numérique qui comprend toute la chaîne de valeur du monde digital, permettant à nos clients de se concentrer sur les initiatives stratégiques qui font avancer leur business. Chaque jour, vous collaborerez avec une équipe dédiée à la livraison de solutions globales cohérentes et durables, peu importe où nos clients opèrent. Avec plus de 30 000 salariés en Europe, Asie, Amérique et Afrique, nous proposons un environnement dynamique et innovant permettant de développer et affiner vos compétences. Nous offrons des opportunités passionnantes dans la data et le digital, le cloud, l'IA, la cybersécurité, ou encore l'IoT et le digital workspace.