Azure Data Engineer — ETL/ELT Pipelines Expert

HireHi

United States

Remote

USD 110,000 - 180,000

Full time

10 days ago

Application generator

Stand out for this role — generate a tailored resume and cover letter in about a minute.

Get past ATS filters

Job summary

EPAM приглашает специалиста по обработке данных для проектирования и реализации ETL/ELT конвейеров на базе Azure Data Factory. Ваша работа объединит данные из разных источников, обеспечит качество и безопасность данных, а также поддержит CI/CD и мониторинг процессов.

Требуется 5+ лет опыта с Azure Data Factory, глубокие знания SQL и интеграции данных, а также опыт с ADLS, Azure SQL, Synapse и Databricks. Уровень английского не ниже B2+.

Qualifications

5+ лет практического опыта работы с Azure Data Factory
Владение SQL и концепциями интеграции данных
Опыт работы с сервисами Azure, такими как ADLS, Azure SQL и Synapse
Опыт работы с Databricks для обработки и трансформации данных
Уровень владения английским языком не ниже B2+

Responsibilities

Проектирование и разработка ETL/ELT конвейеров на базе Azure Data Factory
Интеграция данных из баз данных, API, файлов, SaaS и облачного хранилища
Построение и управление рабочими процессами, триггерами, датасетами и пайплайнами
Реализация валидации данных, мониторинга, обработки ошибок и оптимизации производительности
Использование Azure Data Lake, Azure SQL, Synapse и Databricks по мере надобности
Сотрудничество с инженерами по данным, аналитиками и бизнес-командам для надёжных решений
Поддержка развёртывания, CI/CD, безопасности и контроля доступа к конвейерам данных