GCP Data Engineer – BigQuery & Airflow Pipelines (Remote)

Sii Ukraїna TOV; Poland; Hybrid; PLN 180,000 - 280,000; Full time

Job summary

Sii запрошує інженера з даних на позицію Data Engineer. Ваша роль зосередиться на створенні надійних ETL/ELT-процесів у Google Cloud Platform, головно з BigQuery та Cloud Storage, та підтримці масштабованих конвеєрів даних.

Задачі включають проектування та впровадження пайплайнів, інтеграцію даних з різних джерел, оркестрацію через Airflow/Cloud Composer, CI/CD для рішень з даних та IaC через Terraform; робота з командами аналітики, BI та продукту.

Qualifications

• Монад 4 роки досвіду як Data Engineer або подібна роль з продукційними даними.
• Грунтовні знання Google Cloud Platform, зокрема BigQuery та Cloud Storage.
• Здатність проектувати, будувати та підтримувати конвеєри даних (пакетні та потокові).
• Сильні навички SQL та Python для обробки даних та оркестрації.
• Досвід оркестрації workflows (Airflow / Cloud Composer).
• Досвід CI/CD для даних (GitHub Actions, GitLab CI, Cloud Build).
• Знайомство з Infrastructure as Code, зокрема Terraform.
• Попередній досвід роботи з великими обсягами даних, націленість на продуктивність та надійність.
• Необхідно знаходитися в Польщі та володіти польською мовою.

Responsibilities

• Проектування, впровадження та підтримка масштабованих даних пайплайнів на основі GCP.
• Робота з BigQuery як основним сховищем даних: моделювання даних, оптимізація запитів, забезпечення продуктивності.
• Інтеграція даних з різних джерел (файли, бази даних, API, події) та їх обробка.
• Оркестрація робочих процесів за допомогою Apache Airflow / Cloud Composer.
• Створення та підтримка CI/CD рішень для конвеєрів даних та інфраструктури.
• Керування хмарною інфраструктурою за принципами Infrastructure as Code (Terraform).
• Забезпечення якості даних, моніторинг конвеєрів та швидке реагування на інциденти.
• Співпраця з аналітикою, BI та продуктовими командами для стабільних та добре задокументованих даних.
• Участь у розробці архітектури даних та спільне визначення кращих практик Data Engineering.

Skills

Google Cloud Platform

BigQuery

Cloud Storage

SQL

Python

Apache Airflow

CI/CD for data

Terraform

Big data processing

Data modeling

Tools

Databricks

Snowflake

MS Fabric

Dataflow

Apache Beam

Pub/Sub

dbt

Job description

Sii запрошує інженера з даних на позицію Data Engineer. Ваша роль зосередиться на створенні надійних ETL/ELT-процесів у Google Cloud Platform, головно з BigQuery та Cloud Storage, та підтримці масштабованих конвеєрів даних.

Задачі включають проектування та впровадження пайплайнів, інтеграцію даних з різних джерел, оркестрацію через Airflow/Cloud Composer, CI/CD для рішень з даних та IaC через Terraform; робота з командами аналітики, BI та продукту.