Data Engineer Senior H/F

Consort Group; Paris; Hybride; EUR 110 700 - 147 600; Plein temps

Avantages offerts par ce poste

Mutuelle

Carte TR

CSE

Prévoyance

Formations continues

Résumé du poste

Consort Group recherche un Data Engineer Senior pour intervenir sur les plateformes Data d\'un grand acteur bancaire en France. Vous participerez à des migrations et à l’industrialisation des traitements Big Data dans un cadre Cloud et distribués.

Vous maîtrisez Spark, SQL, Cloudera CDP et GCP, et vous évoluerez dans une équipe Data Engineer/Run, avec des méthodes Agile et une culture d’excellence.

Qualifications

• Au moins 7 ans d’expérience en Data Engineering dans des environnements Big Data et Cloud.
• Expérience en migration et industrialisation des traitements Big Data.

Responsabilités

• Étudier faisabilité sur CDP, Lake House et GCP.
• Concevoir et développer les migrations Big Data.
• Préparer les données: nettoyage, transformation et chargement.
• Réaliser tests unitaires, d’intégration et performance.
• Déployer en prod et bascules des apps.
• Surveiller traitements et diagnostiquer via logs Spark.
• Support post-migration et validation métier.

Connaissances

Spark

SQL

Cloudera CDP

Parquet

Iceberg

GCP

Kubernetes

Git

Docker

Kafka

Streaming

Jira

Confluence

CI/CD

Outils

GitLab CI/CD

Docker

GitHub Copilot

Jira

Confluence

GitHub

Description du poste

Chaque moment compte. Surtout ceux que vous vivez à fond. Bienvenue chez Consort Group.

Consort Group, accompagne depuis plus de 30 ans les entreprises dans la valorisation de leurs données et infrastructures. Elle s'appuie sur deux leaders, Consortis et Consortia, et place l’humain et la responsabilité sociétale au cœur de ses valeurs.

C’est votre future équipe

Les équipes de ConsortIA

Les équipes de ConsortIA sont des acteurs de référence de la Data, du Développement Digital et de l'Ingénierie Média. En combinant ces expertises, nous concevons des systèmes d’information augmentés, intégrés, agiles et sécurisés, au service de la performance et de la transformation numérique de nos clients.

Data Engineer Senior H/F

C’est votre mission

Vous êtes passionné·e par les environnements Big Data, le Cloud et les architectures distribuées ? Ce poste est fait pour vous.

En tant que Data Engineer Senior, vous participez à la modernisation des plateformes Data d'un grand acteur bancaire, en contribuant aux projets de migration et d'industrialisation des traitements Big Data.

Côté Build

• Participer aux études de faisabilité (POC/POV) autour des plateformes Data Cloudera CDP, Flexible Lake House et Google Cloud Platform.
• Concevoir et développer les solutions de migration des traitements Big Data vers les nouvelles architectures.
• Préparer les données (nettoyage, transformation, chiffrement et chargement) avant leur migration.
• Réaliser les développements Spark et SQL nécessaires à l'adaptation des traitements existants.
• Concevoir et exécuter les tests unitaires, d'intégration et de performance.
• Documenter les solutions mises en œuvre et contribuer aux estimations de charge des projets.

Côté Run

• Participer au déploiement en production et aux opérations de bascule des applications.
• Assurer le monitoring des traitements et le diagnostic des incidents via l'analyse des logs et des métriques Spark.
• Garantir la période de support post-migration et accompagner les équipes métiers lors des phases de validation.
• Collaborer avec les équipes architecture, plateforme et les différentes squads Data.
• Contribuer à l'amélioration continue des plateformes et des pratiques d'industrialisation.

C’est votre parcours

Vous avez au moins 7 ans d’expérience en Data Engineering dans des environnements Big Data et Cloud. Vous appréciez les projets de transformation technique, les architectures distribuées et les environnements collaboratifs où innovation et qualité vont de pair.

C’est Votre Expertise

• Spark, SQL et traitements batch distribués
• Cloudera CDP
• Parquet, Apache Iceberg
• Google Cloud Platform (GCS, Dataproc ou GKE)
• Kubernetes (exécution de jobs Spark)
• Git, GitLab CI/CD, Docker
• Kafka et technologies de streaming (notions appréciées)
• Lecture de logs, monitoring et diagnostic des traitements
• Méthodologie Agile
• Jira, Confluence, GitHub Copilot

C’est Votre Manière De Faire Équipe

• Sens du service
• Esprit d'analyse et de synthèse
• Excellent relationnel et communication
• Esprit collaboratif
• Organisation et adaptabilité
• Autonomie
• Curiosité
• Capacité à travailler avec des équipes techniques et métiers

C’est notre engagement

• Un onboarding attentif et humain
• Une vraie proximité managériale
• Des formations accessibles en continu
• Des engagements concrets : inclusion, égalité, solidarité
• Un package RH complet : mutuelle, carte TR, CSE, prévoyance
• Une culture du feedback et des projets qui font sens

C’est clair

Le Process De Recrutement

• Un premier échange téléphonique avec notre team recrutement
• Un entretien RH ainsi qu’un échange métier avec un.e ingénieur.e d’affaires
• Un test ou un échange technique avec un.e de nos expert.es
• Un dernier point avec votre futur.e manager ou responsable de mission
• Et si on se reconnaît : on démarre ensemble

C’est bon à savoir

Lieu: Villejuif

Contrat: Freelance

Télétravail: [Hybride selon mission]

TJM = à partir de 600€

Famille métier: Data Engineering / Big Data / Cloud

Ce que vous ferez ici, vous ne le ferez nulle part ailleurs.

Ce moment c’est le vôtre.

Chaque moment compte. Surtout ceux que vous vivez à fond.

Consort Group, accompagne depuis plus de 30 ans les entreprises dans la valorisation de leurs données et infrastructures. Elle s'appuie sur deux leaders, Consortis et Consortia, et place l’humain et la responsabilité sociétale au cœur de ses valeurs.