Data Engineer Experimenté chez CATS à Vannes

Onyx-Conseil; Vannes; Sur place; EUR 40 000 - 60 000; Plein temps

Résumé du poste

CATS recherche un Data Engineer expérimenté à Vannes pour renforcer la squad Data, dans un cadre agile et en lien avec PO/BA et l'équipe Dev. Vous concevrez et développerez des pipelines de collecte et stockage des données depuis diverses sources, en utilisant Spark en batch et streaming, et participerez à la migration et à la supervision des traitements.

Vous assurerez les tests, le déploiement et le monitoring, et veillerez à la qualité du code et à l'alignement avec les exigences

Qualifications

• 4–7 ans d'expérience en Data Engineering.
• Expérience dans le secteur bancaire fortement appréciée.
• Bonnes aptitudes en communication et autonomie.

Responsabilités

• Affiner les US avec le PO/BA et concevoir des pipelines de collecte et stockage.
• Développer des solutions ETL via Spark et orchestrer les flux batch et temps réel.
• Réaliser les tests unitaires et automatisés.
• Déployer les solutions dans les environnements et assurer le support.
• Contribuer à l'amélioration continue et à la qualité du code.

Connaissances

Spark streaming

Semarchy xDI

Hadoop Cloudera

Description du poste

Data Engineer Experimenté chez CATS à Vannes

Renfort du Chapitre Data d’un profil Data Engineer Experimenté qui sera amené à intervenir au sein d'une squad du domaine régalien, dans un environnement Cloudera - en utilisant un framework interne entreprise – en lien avec PO/BA de la squad ainsi que l’équipe de Dev., ceci dans un cadre agile

sujets : adaptations et réécritures des traitements réglementaires autour des arrêtés comptables, évolution des traitements de supervision, montée de version, documentation technique,

Activités

• Affiner les US avec le PO/BA, concevoir puis développer les solutions de collecte et de stockage des données (provenant de multiples sources) afin de le rendre disponibles pour les usages métiers :
• Concevoir et développer des pipelines via ETL interne basé sur spark / Automatiser l'ingestion de données depuis diverses source / Orchestrer les flux de données batch et temps réel
• Mettre en œuvre les tests unitaires et automatisés
• Déployer le produit dans les différents environnements
• Garantir le bon fonctionnement du produit en production et assurer le suivi / l'assistance / la gestion des incidents y compris mise en place et optimisation du monitoring
• Accompagner l’évolution des pratiques de l’équipe dans une logique d’amélioration continue de la qualité du code

Domaine d'activité :

Domaine bancaire - équipe régalien (Expérience dans le domaine Bancaire très fortement apprécié)

Compétences Techniques :

• Langage / ETL : Spark - streaming et batch (requis), Semarchy xDI (apprécié)
• Framework Big Data : Hadoop Cloudera (très fortement apprécié)

Sensibilité forte aux enjeux métiers, de préférence avec le milieu bancaire

Compétences Humaines :

• Bonne communication / Pédagogue
• Prise de Lead / Force de proposition,
• Sait challenger les besoins
• Autonomie,
• Adaptabilité

XP :

Experimenté (4 à 7 ans)

Localisation :

Vannes : 3 jours sur le site