Лидер дата-инженер: Big Data, ETL и Airflow

Альфа-Банк; United States; Hybrid; USD 24,000 - 38,000; Full time

Benefits offered by this job

Гибридный формат или удалённая работа

ИТ-хаб в Москве

ДМС, стоматология, страхование, больн.

Job summary

HireHi приглашает опытного технического лидера в команду разработки платформ BigData. Ваша роль — управлять командой дата-инженеров, руководить архитектурными решениями по витринам данных и ETL-процессам, формировать бэклог совместно с проджект-менеджерами и наставлять коллег.

Требуется знание Spark и Hive/Iceberg, а также Python или Scala. Ожидается активное участие в тестировании, документации и взаимодействии с заказчиками.

Qualifications

• Опыт разработки ПО не менее 6 лет.
• Опыт работы со стеком BigData от 3 лет.
• Опыт на руководящей технической позиции от 1 года.
• Отличное знание Spark и Hive/Iceberg.
• Умение SQL с вложенными запросами и сводными таблицами.
• Умение писать на Python или Scala, работа в Linux.

Responsibilities

• Управлять техническими аспектами работы команды дата-инженеров.
• Реализовывать витрины данных и ETL-процессы.
• Управлять бэклогом и ожиданиями заказчиков вместе с PM.
• Лидировать команду по технике и процессам.
• Наставлять команду и развивать стандарты и документацию.
• Консультировать по эксплуатации ПО и взаимодействовать с заказчиками.
• Помогать сопровождению стабилизировать работу в продакшене.
• Разрабатывать решения и документацию совместно с командой.
• Участвовать в тестировании и планировании работ.

Skills

BigData стек

Apache Spark

Apache Hive

Apache Iceberg

Apache Airflow

Python

SQL

Linux CLI

Kubernetes

Kafka

Tools

Hadoop

Docker

REST API

Git

Job description

HireHi приглашает опытного технического лидера в команду разработки платформ BigData. Ваша роль — управлять командой дата-инженеров, руководить архитектурными решениями по витринам данных и ETL-процессам, формировать бэклог совместно с проджект-менеджерами и наставлять коллег.

Требуется знание Spark и Hive/Iceberg, а также Python или Scala. Ожидается активное участие в тестировании, документации и взаимодействии с заказчиками.