Data Engineer Senior H / F

HN Services; Vanves; Sur place; EUR 40 000 - 60 000; Plein temps

Résumé du poste

Une entreprise de services numériques recherche un ingénieur Big Data pour le projet Finance Data. Le candidat sera responsable de la mise en œuvre des flux de données conformément aux normes et en collaboration avec plusieurs équipes. Les missions incluent le développement de flux de traitement avec Spark/SQL et la documentation technique.

Qualifications

• Expérience dans l'ingénierie des données ou un domaine connexe.
• Capacité à travailler en équipe et à communiquer efficacement.
• Connaissance des normes de traitement de données.

Responsabilités

• Construire et valider le modèle de données avec les analystes.
• Développer des flux de traitement de données avec Spark ou SQL.
• Documenter les étapes techniques des projets.
• Proposer des améliorations pour l'efficacité de l'équipe.

Connaissances

Expérience en ETL

Connaissance de Spark

Compétences en SQL

Collaboration

Description du poste

Overview

En tant qu'ingénieur Big Data dans le cadre du projet Finance Data, vous serez chargé de la mise en oeuvre des flux de traitement de données conformément aux normes définies par vos collègues et le service métier. Vous serez en contact avec plusieurs équipes qui formulent diverses exigences en matière de données pour leurs applications web ou leurs outils de business intelligence.

Vos missions principales

• Travailler en étroite collaboration avec les analystes de données afin de construire et valider le modèle de données
• Développer les flux de traitement en utilisant un outil ETL générique basé sur Spark ou des instructions SQL
• Documenter les étapes techniques effectuées
• Proposer de nouvelles approches pour accroître l'efficacité de l'équipe
• Élever le niveau de connaissance de l'équipe en partageant des informations clés sur les technologies et outils Big Data