Data Platform Engineer (DWH, Big Data, Airflow)

Holyweb; United States; Remote; USD 90,000 - 130,000; Full time

Benefits offered by this job

Holyrelax для хобби и личностного发展

Job summary

Holyweb — сервисная IT-компания, создающая корпоративные системы и сервисы для IT-холдингов, ритейла, финтеха и логистических компаний. Ваша роль будет развивать ядро платформы данных и улучшать процессы выгрузки.

Требуется опыт работы с SQL, DWH и архитектурами, а также знание Apache Airflow/NiFi/Flink и соответствующих систем хранения данных. Работа над проектами с инженерными вызовами и возможностями профессионального роста.

Qualifications

• Опыт работы с данными и SQL.
• Знание принципов построения DWH и архитектуры.
• Знание архитектуры Greenplum, Hadoop и ClickHouse; умение оптимизировать запросы.
• Опыт работы с Airflow, NiFi и Flink.

Responsibilities

• Участвовать в разработке ядра продуктов платформы данных.
• Разрабатывать и оптимизировать процессы выгрузки данных.
• Проводить код-ревью.
• Разрабатывать сопроводительную документацию к продуктам.

Skills

SQL

Аналитическое мышление

Системный подход

Tools

Greenplum

Hadoop

ClickHouse

Apache Airflow

Apache NiFi

Apache Flink

Job description

Holyweb — сервисная IT-компания, создающая корпоративные системы и сервисы для IT-холдингов, ритейла, финтеха и логистических компаний. Ваша роль будет развивать ядро платформы данных и улучшать процессы выгрузки.

Требуется опыт работы с SQL, DWH и архитектурами, а также знание Apache Airflow/NiFi/Flink и соответствующих систем хранения данных. Работа над проектами с инженерными вызовами и возможностями профессионального роста.