Senior Data Engineer – Remote (GCP & BigQuery)

Sii Sp. z o.o.; Województwo pomorskie; On-site; PLN 180,000 - 260,000; Full time

Benefits offered by this job

Prywatna opieka zdrowotna

Kafeteryjna platforma benefitów

Zniżki na samochody

Możliwość pracy zdalnej/biura klasy A

Działalność rozwojowa i szkolenia

Job summary

Sii Sp. z o.o. poszukuje doświadczonego Data Engineer z GCP w Gdańsku. Dołączysz do zespołu Data & Analytics, by projektować i utrzymywać skalowalne pipeline'y danych na Google Cloud Platform, głównie z BigQuery, dbt i Airflow.

Wymagane są min. 4 lata pracy z danymi w środowisku produkcyjnym, dobra znajomość SQL i Pythona, a także praktyka w CI/CD i IaC (Terraform). Praca w zespole międzynarodowym, z możliwościami rozwoju w kierunku Data Engineeringu, Big Data lub ML.

Qualifications

• Co najmniej 4 lata doświadczenia na podobnym stanowisku w roli Data Engineer.
• Bardzo dobra znajomość Google Cloud Platform, w szczególności BigQuery i Cloud Storage.
• Umiejętność projektowania, budowy i utrzymania pipeline'ów danych (batch i/lub streaming).
• Bardzo dobra znajomość SQL oraz Pythona w kontekście przetwarzania danych i orkiestracji.
• Doświadczenie w orkiestracji workflow (Apache Airflow/Cloud Composer).
• Praktyka w implementacji CI/CD dla rozwiązań data (GitHub Actions, GitLab CI, Cloud Build).
• Znajomość Terraform i podejścia Infrastructure as Code.
• Wcześniejsza praca z dużymi wolumenami danych, nacisk na wydajność i niezawodność.
• Swobodna komunikacja w języku angielskim oraz płynna znajomość języka polskiego.

Responsibilities

• Projektowanie, implementacja i utrzymanie skalowalnych pipeline'ów danych w oparciu o Google Cloud Platform.
• Praca z BigQuery jako główną hurtownią danych: modelowanie danych, optymalizacja zapytań, koszty i wydajność.
• Integracja danych z różnych źródeł (pliki, bazy danych, API, eventy) oraz ich przetwarzanie i transformacja.
• Orkiestracja workflow danych przy użyciu Apache Airflow / Cloud Composer.
• Tworzenie i utrzymanie rozwiązań CI/CD dla pipeline'ów danych oraz infrastruktury.
• Zarządzanie infrastrukturą w chmurze zgodnie z podejściem IaC (Terraform).
• Zapewnianie jakości danych, monitoringu pipeline'ów i szybkiego reagowania na incydenty.
• Współpraca z zespołami analitycznymi, BI i produktowymi w celu dostarczania stabilnych i dobrze udokumentowanych danych.
• Udział w rozwoju architektury danych oraz definiowanie dobrych praktyk data engineeringowych.

Tools

BigQuery

Cloud Computing

SQL

Python

Infrastructure as Code

Google Cloud Platform

Apache Airflow/Cloud Composer

Terraform

dbt (Data Build Tool)

Apache Spark

Databricks

Snowflake

Microsoft Fabric

Job description

Sii Sp. z o.o. poszukuje doświadczonego Data Engineer z GCP w Gdańsku. Dołączysz do zespołu Data & Analytics, by projektować i utrzymywać skalowalne pipeline'y danych na Google Cloud Platform, głównie z BigQuery, dbt i Airflow.

Wymagane są min. 4 lata pracy z danymi w środowisku produkcyjnym, dobra znajomość SQL i Pythona, a także praktyka w CI/CD i IaC (Terraform). Praca w zespole międzynarodowym, z możliwościami rozwoju w kierunku Data Engineeringu, Big Data lub ML.