Data Engineer (H / F)

SKOTT GROUP; Île-de-France; Sur place; EUR 50 000 - 70 000; Plein temps

Résumé du poste

Une société de conseil spécialisée en Data recherche un(e) expert(e) en exploitation et support de plateformes Big Data pour gérer le support en production, optimiser les traitements Spark et aider les équipes métiers. Le poste est situé en Ile-de-France, avec des possibilités de freelancing ou un contrat en CDI.

Qualifications

• Expérience confirmée en exploitation/support Data en production.
• Maîtrise de Kubernetes et au moins une techno parmi : Spark, Airflow, Starburst / Trino.
• Compétences en monitoring/observabilité (Dynatrace, Kibana, Grafana).

Responsabilités

• Assurer le support de niveau 2 en production sur des plateformes Big Data.
• Participer à la gestion des incidents et à leur résolution.
• Optimiser les traitements Spark sur Kubernetes.

Connaissances

Exploitation de plateformes Big Data

Kubernetes

Spark

Airflow

Monitoring/observabilité

Scripting (Ansible, Python, Bash)

CI/CD (Git, Jenkins, Gitlab CI)

Anglais

Outils

Dynatrace

Kibana

Grafana

Hashicorp Vault

PKI

Description du poste

Qui sommes-nous ?

SKOTT GROUP est un cabinet de conseil spécialisé dans l’accompagnement de ses clients et consultants dans le domaine de la DATA. Fondé par une équipe d’associés partageant les mêmes valeurs d’Excellence et de Transparence, nous plaçons l’humain au cœur de nos activités.

Nous vous offrons à nos clients un accompagnement professionnel et de qualité tout au long du cycle de vie de leurs données dans divers domaines.

️ Au sein de nos quatre filiales spécialisées, nous proposons à nos consultants partenaires un positionnement adapté et évolutif favorisant ainsi la pérennité de la collaboration. ️

Nous cherchons un(e) expert(e) en exploitation et support de plateformes Big Data pour intervenir sur des environnements critiques en production.

Vos missions

• Assurer le support de niveau 2 en production sur des plateformes Big Data (Spark, Airflow / Astronomer, Starburst / Trino).
• Participer à la gestion des incidents , à l’analyse des causes racines et à leur résolution.
• Optimiser les traitements Spark sur Kubernetes (tuning, configuration, dimensionnement).
• Contribuer à l’optimisation de l’orchestration Airflow et à la gestion des catalogues Starburst.
• Accompagner les équipes métiers dans un usage efficace et sécurisé des plateformes.
• Rédiger la documentation et contribuer à l’amélioration continue.

Compétences attendues

• Expérience confirmée en exploitation / support Data en production
• Maîtrise de Kubernetes et au moins une techno parmi : Spark, Airflow, Starburst / Trino
• Compétences en monitoring / observabilité (Dynatrace, Kibana, Grafana)
• Bonne maîtrise des bonnes pratiques d’exploitation de traitements distribués
• Connaissances en scripting (Ansible, Python, Bash)
• Familiarité avec les CI / CD (Git, Jenkins, Gitlab CI)
• Connaissances Hashicorp Vault et PKI appréciées
• Bon niveau en anglais

Le poste est basé en Ile-de-France, à temps plein.

Freelance possible, préférence pour contrat en CDI.