Data Engineer: High-Volume Pipelines in Cloud (Hybrid)

BETWEEN Group; Barcelona; Hybrid; EUR 60,000 - 90,000; Full time

Benefits offered by this job

Health insurance with Alan

Training opportunities

Lots of events

Flexible compensation

Incentives for referring talent

Job summary

BETWEEN Group ищет Data Engineer для работы в технологической продуктовой команде, обрабатывающей большие объёмы данных. Вы будете проектировать ETL-процессы на Python, оптимизировать конвейеры и работать с аналитическими базами данных в облаке.

Вакансия предполагает гибридный график: 1 день в офисе в неделю, участие в Agile проектах и активное участие в технических решениях команды. Предоставляются обучение, сетевые мероприятия и гибкое вознаграждение.

Qualifications

• Опыт более 4 лет с Python и SQL в дата-средах.
• Проектирование, разработка и сопровождение ETL-процессов.
• Знания SQL: соединения, подзапросы, агрегаты, индексы, нормализация.
• Опыт работы с облачными сервисами (AWS, Google Cloud или Azure).
• Опыт работы с Airflow, Git, контейнерами (Docker), Kubernetes и Databricks.

Responsibilities

• Разработка конвейеров обработки данных на Python.
• Оптимизация и сопровождение ETL-процессов.
• Работа с аналитическими базами и большими объёмами данных.
• Участие во внедрении Airflow и оркестрации задач.
• Разработка решений в облачных средах и поддержка CI/CD.

Skills

Python

SQL

ETL

Airflow

Git

CI/CD

Docker

Kubernetes

Databricks

AWS

Tools

Airflow

Git

Databricks

Docker

Kubernetes

CI/CD

AWS

Job description

BETWEEN Group ищет Data Engineer для работы в технологической продуктовой команде, обрабатывающей большие объёмы данных. Вы будете проектировать ETL-процессы на Python, оптимизировать конвейеры и работать с аналитическими базами данных в облаке.

Вакансия предполагает гибридный график: 1 день в офисе в неделю, участие в Agile проектах и активное участие в технических решениях команды. Предоставляются обучение, сетевые мероприятия и гибкое вознаграждение.