Tech Lead Data Streaming AWS / Kafka / Flink / Anglais (10 ans+) (IT) / Freelance

Octopus Group; Courbevoie; Sur place; EUR 90 000 - 130 000; Plein temps

Résumé du poste

Octopus Group recherche un Tech Lead Data expérimenté pour piloter la conception, le développement et l'exploitation de produits de données en temps réel sur une plateforme moderne AWS.

Vous interviendrez sur l'ingestion, le traitement streaming, les APIs et les microservices, en promouvant les standards techniques et l'accompagnement des équipes de développement.

Qualifications

• Expérience confirmée en leadership technique et pilotage d'équipes Data.
• Maîtrise des flux de données en temps réel (Kafka, Flink) et architectures orientées événements.

Responsabilités

• Concevoir et développer des solutions de traitement de données temps réel basées sur Apache Flink et Apache Kafka.
• Définir et promouvoir les architectures évènementielles (Event-Driven Architecture).
• Construire des pipelines de données temps réel et batch robustes et scalables.
• Développer des APIs REST et des microservices documentés (OpenAPI).
• Mettre en œuvre les services AWS nécessaires aux plateformes Data.
• Garantir la qualité, la sécurité et l'observabilité des solutions.
• Mettre en place les bonnes pratiques CI/CD et DevOps.
• Piloter les revues d'architecture, revues de code et standards d'ingénierie.
• Accompagner et faire monter en compétence les développeurs de l'équipe.
• Assurer le support de production, le suivi des performances et l'amélioration continue.

Connaissances

Leadership technique

Architecture Data

OpenAPI

CI/CD

DevOps

Outils

Apache Kafka

Apache Flink

Kafka Streams

Event-Driven Architecture

Schema Registry

AWS MSK

Amazon Kinesis

AWS Managed Service for Flink

AWS Lambda

API Gateway

ECS / EKS

S3

IAM

Description du poste

Contexte :

Dans le cadre du développement de sa plateforme Data Groupe, notre client recherche un Tech Lead Data expérimenté pour piloter la conception, le développement et l'exploitation de produits de données temps réel à forte volumétrie.

Vous interviendrez sur l'ensemble de la chaîne de valeur Data : ingestion, traitement streaming, APIs, microservices et mise en production sur un environnement Cloud AWS moderne.

Vous jouerez également un rôle majeur dans les choix d'architecture, la définition des standards techniques et l'accompagnement des équipes de développement.

Vos missions :

• Concevoir et développer des solutions de traitement de données temps réel basées sur Apache Flink et Apache Kafka

• Définir et promouvoir les architectures évènementielles (Event-Driven Architecture)

• Construire des pipelines de données temps réel et batch robustes et scalables

• Développer des APIs REST et des microservices documentés (OpenAPI)

• Mettre en œuvre les services AWS nécessaires aux plateformes Data

• Garantir la qualité, la sécurité et l'observabilité des solutions

• Mettre en place les bonnes pratiques CI/CD et DevOps

• Piloter les revues d'architecture, revues de code et standards d'ingénierie

• Accompagner et faire monter en compétence les développeurs de l'équipe

• Assurer le support de production, le suivi des performances et l'amélioration continue

Environnement technique :

Data Streaming

• Apache Kafka

• Apache Flink

• Kafka Streams

• Event-Driven Architecture

• Schema Registry

Cloud & Infrastructure

• AWS MSK

• Amazon Kinesis

• AWS Managed Service for Apache Flink

• AWS Lambda

• API Gateway

• ECS / EKS

• S3

• IAM

APIs & Développement

• REST APIs

• OpenAPI / Swagger

• Microservices

DevOps & Observabilité

• GitLab CI

• GitHub Actions

• CloudWatch

• OpenTelemetry

• Prometheus

• Grafana

Sécurité

• OAuth2

• OpenID Connect (OIDC)

• IAM

• Secrets Management