Data Engineer — ETL Pipelines, Data Lakes & ML Collaboration

HireHi; Greater London; On-site; GBP 70,000 - 110,000; Full time

Job summary

Barclays ищет опытного инженера данных для разработки и поддержки конвейеров ETL, хранения и анализа данных в рамках масштабируемой архитектуры. Взаимодействие с учёными данными и департаментами позволит внедрять модели ML и улучшать качество данных.

Кандидат должен владеть SQL, проектированием больших датасетов, опытом работы с хранилищами и интеграцией источников, а также уметь общаться с стейкхолдерами и руководить командами.

Qualifications

• Опыт ETL-разработки, преобразование данных и конвейеры.
• Опыт создания структурированных наборов данных и аналитических выходов.
• Сильные навыки SQL, запросов к базам и моделирования больших данных.
• Опыт работы с хранилищами данных и интеграцией источников.

Responsibilities

• Построение и поддержка архитектурных конвейеров данных для передачи и обработки данных.
• Проектирование и внедрение хранилищ данных и озер данных с учётом объёмов и скорости обработки и мер безопасности.
• Разработка алгоритмов обработки и анализа для сложности и объёмов данных.
• Сотрудничество с дата-сайентистами для построения и развёртывания моделей ML.
• Консультирование и влияние на принятие решений, участие в разработке политик.
• Руководство совместными задачами и наставничество членов команды.
• Идентификация новых направлений проектов и применение межфункциональных подходов.
• Консультации по сложным вопросам руководителям по персоналу в эскалированных вопросах.
• Идентификация способов управления рисками и разработки политик и процедур контроля.
• Управление рисками и усиление контроля над работой.
• Сотрудничество с другими направлениями и бизнес-подразделениями.
• Анализ данных из нескольких внутренних и внешних источников для решения проблем.
• Коммуникация сложной информации заинтересованным сторонам.
• Влияние на заинтересованные стороны для достижения результатов.

Skills

ETL разработка

SQL/базы данных

Хранилища данных

Интеграция источников

Распределённые данные

Контроль качества данных

Коммуникация с стейкхолдерами

Лидерство

Tools

AWS

Data Lake

Каталогизация данных

Доставка ML моделей

Job description

Barclays ищет опытного инженера данных для разработки и поддержки конвейеров ETL, хранения и анализа данных в рамках масштабируемой архитектуры. Взаимодействие с учёными данными и департаментами позволит внедрять модели ML и улучшать качество данных.

Кандидат должен владеть SQL, проектированием больших датасетов, опытом работы с хранилищами и интеграцией источников, а также уметь общаться с стейкхолдерами и руководить командами.