Lead Kafka / Confluent Architect – Real-time Data Platform

Cherry-Pick; Gradignan; Sur place; EUR 70 000 - 95 000; Plein temps

Résumé du poste

Cherry-Pick recherche un expert Architecte Kafka/Confluent pour concevoir, construire et industrialiser le socle d’intégration des données. Vous piloterez l’installation et l’exploitation des clusters Kafka (KRaft, Confluent) et des connecteurs, tout en assurant la sécurité et la performance sur des environnements RedHat et Kubernetes.

Vous participerez à la migration des flux CDC et batch vers du temps réel et à la mise en place de la réplication PostgreSQL via Kafka, avec automatisation via

Qualifications

• Expertise en architecture Kafka/Confluent et conception de plateformes de données.
• Installation et administration de clusters Kafka (KRaft), Schema Registry et Kafka Connect.
• Mise en œuvre de flux temps réel et réplication PostgreSQL via Kafka.
• Automatisation avec Ansible, Shell et Python; pipelines CI/CD.
• Sécurité des échanges et gestion des habilitations.
• Expérience RedHat et Kubernetes.
• Rédaction de dossiers d’architecture et transfert de compétences.
• Mobilité et disponibilité sur site Gradignan (Paris/Lyon mobilité possible).

Responsabilités

• Concevoir et faire évoluer l’architecture Kafka/Confluent.
• Installer/configurer les clusters et les connecteurs.
• Industrialiser les flux CDC et batch en temps réel.
• Mettre en place supervision Prometheus/Grafana.
• Automatiser les déploiements et les opérations.
• Rédiger documentation et procédures.
• Former les équipes et assurer le transfert de compétences.

Connaissances

Architecting Kafka/Confluent platform

Real-time data replication

Data integration

Automation with Ansible Shell Python

CI/CD pipelines

Kubernetes administration

Security and access control

On-site collaboration

French language communication

Outils

Kafka

Confluent

Kafka Connect

Schema Registry

KRaft

PostgreSQL

HDFS

Datastage

Teradata

RedHat

Kubernetes

Prometheus

Grafana

Ansible

Python

Shell

CI/CD

Description du poste

Cherry-Pick recherche un expert Architecte Kafka/Confluent pour concevoir, construire et industrialiser le socle d’intégration des données. Vous piloterez l’installation et l’exploitation des clusters Kafka (KRaft, Confluent) et des connecteurs, tout en assurant la sécurité et la performance sur des environnements RedHat et Kubernetes.

Vous participerez à la migration des flux CDC et batch vers du temps réel et à la mise en place de la réplication PostgreSQL via Kafka, avec automatisation via