GCP Banking Data Engineer - Pipelines & BigQuery

Enfint; Warszawa; Hybrid; PLN 185,000 - 251,000; Full time

Job summary

Enfint ищет инженера по данным для проекта в банковской сфере, ориентированного на создание инновационных дата-платформ в Google Cloud Platform. Вы будете проектировать и поддерживать обработку данных, конвейеры пакетной и потоковой обработки с использованием BigQuery, DBT, Dataflow и Composer, писать на Python и SQL, строить структуры для аналитики и отчетности.

Офис в Варшаве с возможными визитами 1–2 раза в неделю; ставка около 158 zł/ч до вычета налогов и НДС при работе по схеме B2B.

Qualifications

• Опыт проектирования и внедрения облачных решений на Google Cloud Platform (GCP).
• Отличное знание Python и SQL.
• Знание Dataproc, Composer (Airflow), Cloud Storage и BigQuery.
• Опыт работы с репозиториями GitHub.
• Опыт управления артефактами приложений с помощью Google Artifact Registry.
• Будет преимуществом: знание DBT, Terraform.

Responsibilities

• Разрабатывать и поддерживать решения обработки данных в среде Google Cloud Platform (GCP).
• Создавать пакетные и потоковые конвейеры данных с использованием BigQuery, DBT, Dataflow, Composer и Cloud Storage.
• Программировать на Python и SQL.
• Строить и оптимизировать структуры данных для аналитики и отчетности.
• Автоматизировать развёртывания с использованием Terraform и GitHub.
• Тестировать, мониторить и поддерживать разработанные решения.
• Сотрудничать с аналитиками, архитекторами и проектными командами для обеспечения бизнес-требований.

Skills

Python

SQL

GCP

Tools

BigQuery

Dataflow

Composer

Cloud Storage

Dataproc

Terraform

GitHub

Artifact Registry

DBT

Job description

Enfint ищет инженера по данным для проекта в банковской сфере, ориентированного на создание инновационных дата-платформ в Google Cloud Platform. Вы будете проектировать и поддерживать обработку данных, конвейеры пакетной и потоковой обработки с использованием BigQuery, DBT, Dataflow и Composer, писать на Python и SQL, строить структуры для аналитики и отчетности.

Офис в Варшаве с возможными визитами 1–2 раза в неделю; ставка около 158 zł/ч до вычета налогов и НДС при работе по схеме B2B.