Data Pipeline Engineer

ZipRecruiter; London; Hybrid; GBP 50,000 - 60,000; Full time

Job summary

Une entreprise de conseil technique réputée recherche un professionnel pour assurer la santé des données dans leurs outils d'analyse. Le rôle consiste à maintenir et déboguer les pipelines de données, tout en apportant un soutien technique aux utilisateurs. Les candidats doivent être à l'aise avec le code en Python, PySpark et Java. Des avantages intéressants, notamment un salaire compétitif et des opportunités de développement professionnel, sont offerts.

Benefits

Budget de développement professionnel de 5000£ par an

Programme de bien-être

25 jours de congés annuels

Qualifications

• Connaissance des outils de développement de pipelines.
• Compréhension basique de Spark.

Responsibilities

• Maintenir les horaires de construction pour les pipelines.
• Répondre et déboguer les pannes des pipelines.
• Communiquer les pannes aux utilisateurs finaux.

Skills

Python

PySpark

Java

Job description

Job Description

The role

You will ensure our customer works with updated and correct data in our data analytics tools by being the first to respond to data health failures on key pipelines, reading code and making changes.

About us

Hexegic are a leading technical consultancy providing agile multi-disciplinary teams to high performing organisations. The company promises exciting, engaging and rewarding projects for those that are keen to develop and build a successful career.

Core Responsibilities

• Maintain build schedules so that pipelines run effectively
• Set up and maintain health checks on data pipelines
• Respond, triage and debug the pipelines when broken
• Read and make changes to code, and modify monitoring set-ups
• Communicating outages to end users

What we are looking for

• Comfortable reading and writing code in Python, PySpark and Java
• Basic understanding of Spark
• Ability to navigate pipeline development tools

What’s in it for you?

• Base salary of £50,000-£60,000
• £5000 a year professional development budget
• Wellness program
• 25 days annual leave
• Hybrid working arrangements

Please note that successful candidates must be eligible for UK security clearance, with sole UK and in the UK of minimum 5 years.