DATA ENGINEER GCP SPARK SCALA

Nous recherchons un data engineer GCP Spark / Scala avec pour missions principales :

1. Collecter des données provenant de diverses sources externes.
2. Exploiter les capacités du Datalake sur GCP.
3. Implémenter l'ensemble du processus incluant :
1. L'ingestion des données,
2. La validation des données,
3. Le croisement des données,
4. L'intégration des données enrichies dans le Datalake.
4. Développer en respectant les principes d'architecture définis.
5. Rédiger et documenter les user stories en collaboration avec le Product Owner.
6. Rédiger les scripts nécessaires au déploiement.
7. Identifier et prioriser la correction des anomalies.
8. Assister les équipes en charge de l'exploitation.
9. Contribuer à la mise en place d'une chaîne de livraison continue.
10. Automatiser les tests fonctionnels.
11. Encadrer et superviser le travail des data engineers de la squad.

Profil candidat :

1. Compétences relationnelles : Forte aptitude au travail en équipe, dans un environnement Scrum / Kanban.
2. Excellentes capacités relationnelles et de communication, avec une attention particulière aux détails.
3. Sensibilité aux évolutions technologiques et veille active sur les stacks utilisées.
4. Capacité à accompagner et encadrer les équipes de développement sur GCP.