Cloud Data Engineer — AWS Glue, Redshift & Medallion

HireHi; United States; Hybrid; USD 76,000 - 127,000; Full time

Benefits offered by this job

Гибридная работа

Удаленная работа по запросу

Job summary

Empiric ищет опытного инженера данных для проектирования и поддержки масштабируемых ETL/ELT пайплайнов на AWS. В задачи входит моделирование данных в Redshift, внедрение CDC, а также построение оркестрации через Step Functions и серверless-решения. Требуется крепкий опыт с Python и AWS сервисами.

Гибридная или удаленная работа, наличие гибких условий для работы по локации в Венгрии и удаленности возможностей сотрудничества.

Qualifications

• Опыт разработки ETL/ELT на AWS и Python.
• Опыт построения и оптимизации Redshift и CDC-подключений.
• Навыки оркестрации через AWS Step Functions и безсерверной разработки.

Responsibilities

• Проектирование, сборка и поддержка масштабируемых ETL/ELT пайплайнов на AWS.
• Разработка моделей данных в Redshift и внедрение CDC.
• Реализация оркестрации через AWS Step Functions и серверless-решения (Lambda, Glue).
• Управление дата-лотками на S3 и мониторинг качества данных.

Skills

AWS Glue

AWS data engineering

Amazon Redshift

CDC ingestion

AWS Step Functions

AWS Lambda

Serverless

Amazon S3 data lakes

Medallion Architecture

Python

SNS

Tools

SNS

AWS Glue

Job description

Empiric ищет опытного инженера данных для проектирования и поддержки масштабируемых ETL/ELT пайплайнов на AWS. В задачи входит моделирование данных в Redshift, внедрение CDC, а также построение оркестрации через Step Functions и серверless-решения. Требуется крепкий опыт с Python и AWS сервисами.

Гибридная или удаленная работа, наличие гибких условий для работы по локации в Венгрии и удаленности возможностей сотрудничества.