Streaming Data Engineer: Java/Kafka, Spark | Remote

Skiils; Suresnes; Hybrid; EUR 65,000 - 100,000; Full time

Benefits offered by this job

Télétravail partiel

Mutuelle et transport pris en charge

Job summary

Data Factorii recherche un Data Engineer passionné par les plateformes de streaming et le traitement en temps réel pour rejoindre une équipe technique de pointe. Vous concevrez et déployerez des pipelines distribués avec Kafka et orchestrerez les flux via Airflow, tout en développant des API robustes en Java/Scala et Spring Boot.

Le rôle exige une expertise en ELT/ETL, des architectures orientées événements et une forte appétence pour l’optimisation des performances, dans un cadre agile et

Qualifications

• Expérience minimale de 5 ans en Data Engineering.
• Maîtrise confirmée de Java et/ou Scala.
• Expérience en développement de traitements de streaming avec Kafka Streams.
• Bonne maîtrise des architectures de data streaming (Kafka, Pub/Sub).
• Maîtrise de Spring Boot pour le développement d’API et de services.
• Expérience avec Apache Airflow / Cloud Composer.
• Maîtrise des outils Git, CI/CD (GitLab CI) et Linux.
• Connaissance des méthodes Agile / Scrum.

Responsibilities

• Concevoir et développer des traitements de données distribués avec Kafka Streams.
• Développer des architectures orientées événements (Event-Driven).
• Concevoir, développer et maintenir des API et services en Java/Scala avec Spring Boot.
• Contribuer aux traitements ELT/ETL et orchestrer les pipelines via Airflow.
• Industrialiser les développements et garantir la qualité via Git et CI/CD.
• Collaborer avec les équipes techniques et métiers pour proposer des solutions adaptées.
• Participer à l’amélioration continue et aux performances des traitements Data.

Skills

Java

Scala

Kafka

Kafka Streams

Spring Boot

ETL/ELT

Airflow

Git CI/CD

Linux

Agile/Scrum

Tools

Kafka Streams

Apache Airflow

Cloud Composer

GitLab CI

Kubernetes

BigQuery

Elasticsearch

Pub/Sub

Job description

Data Factorii recherche un Data Engineer passionné par les plateformes de streaming et le traitement en temps réel pour rejoindre une équipe technique de pointe. Vous concevrez et déployerez des pipelines distribués avec Kafka et orchestrerez les flux via Airflow, tout en développant des API robustes en Java/Scala et Spring Boot.

Le rôle exige une expertise en ELT/ETL, des architectures orientées événements et une forte appétence pour l’optimisation des performances, dans un cadre agile et