data engineer banking platforms

Enfint; Warszawa; On-site; PLN 185,000 - 251,000; Full time

Job summary

Enfint ищет инженера по данным для проекта в банковской сфере, ориентированного на создание инновационных дата-платформ в Google Cloud Platform. Вы будете проектировать и поддерживать обработку данных, конвейеры пакетной и потоковой обработки с использованием BigQuery, DBT, Dataflow и Composer, писать на Python и SQL, строить структуры для аналитики и отчетности.

Офис в Варшаве с возможными визитами 1–2 раза в неделю; ставка около 158 zł/ч до вычета налогов и НДС при работе по схеме B2B.

Qualifications

• Опыт проектирования и внедрения облачных решений на Google Cloud Platform (GCP).
• Отличное знание Python и SQL.
• Знание Dataproc, Composer (Airflow), Cloud Storage и BigQuery.
• Опыт работы с репозиториями GitHub.
• Опыт управления артефактами приложений с помощью Google Artifact Registry.
• Будет преимуществом: знание DBT, Terraform.

Responsibilities

• Разрабатывать и поддерживать решения обработки данных в среде Google Cloud Platform (GCP).
• Создавать пакетные и потоковые конвейеры данных с использованием BigQuery, DBT, Dataflow, Composer и Cloud Storage.
• Программировать на Python и SQL.
• Строить и оптимизировать структуры данных для аналитики и отчетности.
• Автоматизировать развёртывания с использованием Terraform и GitHub.
• Тестировать, мониторить и поддерживать разработанные решения.
• Сотрудничать с аналитиками, архитекторами и проектными командами для обеспечения бизнес-требований.

Skills

Python

SQL

GCP

Tools

BigQuery

Dataflow

Composer

Cloud Storage

Dataproc

Terraform

GitHub

Artifact Registry

DBT

Job description

Описание

The company provides IT services and consulting, with this project focused on banking and the development of innovative data platforms in Google Cloud Platform.

Задачи

• Develop and maintain data processing solutions in the Google Cloud Platform (GCP) environment;
• Create batch and streaming data pipelines using BigQuery, DBT, Dataflow, Composer, and Cloud Storage;
• Program in Python and SQL;
• Build and optimize data structures supporting analytics and reporting;
• Automate deployments using Terraform and GitHub repositories;
• Test, monitor, and maintain developed solutions;
• Collaborate with analysts, architects, and project teams to deliver business requirements.

Требования

• Experience designing and building cloud solutions on Google Cloud Platform (GCP);
• Very good knowledge of Python and SQL;
• Knowledge of Dataproc, Composer (Airflow), Cloud Storage, and BigQuery;
• Experience working with GitHub code repositories;
• Experience managing application artifacts using Google Artifact Registry;
• Nice to have: knowledge of DBT, knowledge of Terraform.

Условия

Rate: do approx. 158 zł/h net + VAT, B2B; Office visits 1-2 times per week in Warsaw.