Data Engineer: Scalable Pipelines & ML Ops

Enfint; Greater London; On-site; GBP 70,000 - 110,000; Full time

Benefits offered by this job

Health insurance

9% Employer pension contribution

Annual training budget

Access to myPOS Academy and LinkedIn L

Job summary

myPOS ищет опытного дата-инженера для построения и поддержки конвейеров данных, трансформации и экспорта между источниками. Вы будете развивать архитектуру данных, сотрудничать с аналитиками и учёными, обеспечивая качество и безопасность данных.

Требуется 3+ года опыта, знание Python/SQL и облачных технологий. Приоритет — оперирование в рамках масштабируемых данных и CI/CD, IaC, DataOps.

Qualifications

• Требуется степень бакалавра в области информатики, инженерии или смежной технической дисциплины.
• 3+ года опыта дата-инженером, создание и поддержка production pipelines.
• Уверенное владение Python и SQL; понимание ETL/ELT и оптимизации.
• Опыт работы с orchestration-инструментами и облачных решений.
• ЗНАНИЕ GCP приветствуется, наличие знаний CI/CD, IaC, DataOps.
• Разбираетесь в мониторинге данных, качества данных иGovernance.

Responsibilities

• Строить и поддерживать конвейеры данных для загрузки, трансформации и экспорта между источниками.
• Развивать масштабируемую архитектуру данных под требования бизнеса и производительности.
• Сотрудничать с аналитиками и учёными данных для подготовки наборов данных и самостоятельной аналитики.
• Реализовать лучшие практики качества данных, тестирования, мониторинга и прослеживаемости.
• Оптимизировать рабочие процессы по производительности, затратам и масштабируемости.
• Обеспечивать безопасную обработку данных и соответствие нормам защиты.
• Документировать процессы, стандарты и развивать платформу данных и процессы инженерии.
• Обеспечивать безопасность данных и моделей, управление доступом, аудит и контроль.

Skills

Python

SQL

ETL/ELT

Orchestration tools

Cloud

Troubleshooting

Collaborative mindset

GCP experience

Education

Bachelor’s degree in Computer Science or related field

Tools

CI/CD

IaC

DataOps

Git

Job description

myPOS ищет опытного дата-инженера для построения и поддержки конвейеров данных, трансформации и экспорта между источниками. Вы будете развивать архитектуру данных, сотрудничать с аналитиками и учёными, обеспечивая качество и безопасность данных.

Требуется 3+ года опыта, знание Python/SQL и облачных технологий. Приоритет — оперирование в рамках масштабируемых данных и CI/CD, IaC, DataOps.