Data Engineer / Développeur Big Data (F/H)

SII Group

Le Mans

Hybrid

EUR 55,000 - 75,000

Full time

14 days+

Get a reply from this employer

Your resume and cover letter, tailored to exactly what they’re hiring for.

Get past ATS filters

Benefits offered by this job

Formation technique
Évolution de carrière
Déjeuners techniques
Ambiance conviviale
Jusqu’à 50% télétravail

Job summary

SII Ouest recherche un ingénieur Data expérimenté pour migrer des flux existants vers une plateforme Spark et concevoir des pipelines ETL/ELT en PySpark. Vous optimiserez les traitements et les requêtes SQL tout en intervenant sur les environnements Cloudera/Hadoop, Hive et Impala.

Vous participerez aux tests, à la validation, à la documentation et à l’accompagnement des mises en production, avec jusqu’à 50% de télétravail possible.

Qualifications

  • Minimum 5 ans d'expérience en environnement Data
  • Expertise Spark et PySpark
  • Maîtrise SQL
  • Connaissances Cloudera/CDP/Hadoop
  • Bonne maîtrise de HDFS, Hive et YARN
  • Connaissances Talend, Databricks, AWS, Cloud, Kafka, l’orchestration et les pratiques CI/CD

Responsibilities

  • Analyser et migrer les traitements vers Apache Spark
  • Développer des pipelines ETL/ELT en PySpark
  • Optimiser les requêtes SQL et les performances
  • Intervenir sur les environnements Cloudera/Hadoop, Hive et Impala
  • Participer aux phases de tests et de validation
  • Rédiger la documentation technique
  • Accompagner les mises en production
  • Assurer l’optimisation continue des performances

Skills

Apache Spark
PySpark
SQL
Data migration
ETL/ELT design

Tools

Cloudera/CDP/Hadoop
Hive
HDFS
YARN
Databricks
Talend
AWS
Kafka
CI/CD
Orchestration
Impala

Job description

Dans le cadre d’un projet de migration de flux de données existants vers une plateforme Data moderne basée sur Spark et les technologies Big Data, vous intervenez sur l’analyse, la conception et l’optimisation des traitements de données.

  • Analyser et migrer des traitements vers Apache Spark
  • Développer des pipelines ETL/ELT en PySpark
  • Optimiser les requêtes SQL et les performances des traitements
  • Intervenir sur les environnements Cloudera/Hadoop, Hive et Impala
  • Participer aux phases de tests et de validation
  • Rédiger la documentation technique
  • Accompagner les mises en production
  • Assurer l’optimisation continue des performances
  • Expérience professionnelle de 5 ans minimum en environnement Data
  • Expertise Apache Spark et PySpark
  • Maîtrise de SQL
  • Solides connaissances Cloudera/CDP/Hadoop
  • Bonne maîtrise de HDFS, Hive et YARN
  • Connaissances appréciées sur Talend, Databricks, AWS, Cloud, Kafka, l’orchestration et les pratiques CI/CD
Rejoindre SII Ouest, c’est aussi:
  • Un service formation au top (formations techniques, développement personnel, gestion d’équipe, management, …)
  • Des possibilités d’évolution pour votre carrière (devenir Lead Dev, Chef de Projet, passerelles entre les métiers techniques et fonctionnels, …)
  • Une vraie communauté de passionnés (participation aux événements techniques tels que le Breizh Camp, l’Agile Tour; possibilité de partager ses connaissances à travers les Déjeuners Techniques, …)
  • Une ambiance conviviale (Petit déjeuner à l’agence tous les vendredi matins, Afterworks, Soirées d’Agence, …)
  • Jusqu’à 50% de télétravail (on privilégié l’équilibre vie pro/vie perso tout en gardant le lien avec nos collaborateurs!)
Chez SII Ouest, nous souhaitons un process de recrutement simple et clair:
  • Un premier échange téléphonique avec un(e) RH
  • Un entretien avec un(e) RH + un(e) Business Manager
  • Un échange technique avec un Expert Technique
Get your free, confidential resume review.

or drag and drop your file here.

Similar jobs

Similar jobs worth comparing

Développeur Talend Big Data (F/H)
Développeur Talend Big Data (F/H)

SII Group • Neuville-sur-Sarthe

Hybrid
EUR 42,000 - 66,000
Formation technique
Évolution de carrière et responsabilit
Événements techniques et déjeuners
+2
Data Engineer Spark & Big Data – ETL/ELT Specialist
Data Engineer Spark & Big Data – ETL/ELT Specialist

SII Group • Le Mans

Hybrid
EUR 55,000 - 75,000
Formation technique
Évolution de carrière
Déjeuners techniques
+2
Data Engineer F/H
Data Engineer F/H

SOCIETE POUR L'INFORMATIQUE INDUSTRIELLE • Lille

On-site
EUR 37,000 - 48,000
Data Engineer H/F - Spark, DBT, python, Iceberg, AWS et Terraform.
Data Engineer H/F - Spark, DBT, python, Iceberg, AWS et Terraform.

Lexi / Tailornet • Paris

On-site
EUR 62,000 - 67,000
Ticket restaurant
Transport 50% remboursé
Mutuelle et prévoyance santé
+1
Data Engineer Spark Scala - Services Financiers - Ile-De-France
Data Engineer Spark Scala - Services Financiers - Ile-De-France

Sopra Steria • Courbevoie

Hybrid
EUR 55,000 - 75,000
Télétravail jusqu'à 2 jours par semaine
Mutuelle
CSE
+4
Data Engineer H/F - Paris
Data Engineer H/F - Paris

AVISIA • Paris

On-site
EUR 60,000 - 95,000
Data Engineer – H/F CDI - Paris
Data Engineer – H/F CDI - Paris

Cyllene Group • Paris

Hybrid
EUR 45,000 - 50,000
Télétravail hybride
Carte restaurant 50%
Mutuelle prise en charge 60%
+2
Senior Data Engineer Spark - Scala F/H
Senior Data Engineer Spark - Scala F/H

Devoteam Data Driven • Lyon

On-site
EUR 45,000 - 55,000
Environnement d'apprentissage continu
Certifications professionnelles
Accès à des technologies innovantes
Big Data Engineer - Services Financiers - Ile de France
Big Data Engineer - Services Financiers - Ile de France

Groupe Talents Handicap • Paris

Hybrid
EUR 90,000 - 130,000
Mutuelle
Titres restaurants
Accord télétravail 2 jours/semaine
+4
Développeur Big Data - + 3 ans
Développeur Big Data - + 3 ans

gamme solutions • Lyon

On-site
EUR 55,000 - 75,000