Remote Data Engineer, GCP & BigQuery

Sii Sp. z o.o.; Piła; On-site; PLN 120,000 - 180,000; Full time

Benefits offered by this job

Stabilność zatrudnienia

Prywatna opieka zdrowotna

Tryb pracy hybrydowy lub zdalny

Szkolenia i rozwój

Job summary

Sii Sp. z o.o. w Piła poszukuje doświadczonego Data Engineera z Google Cloud Platform. Pracownik będzie projektować i utrzymywać pipeline’y danych, pracować z BigQuery i rozwijać rozwiązania w chmurze.

Oczekujemy solidnej znajomości SQL i Pythona, orkiestracji Airflow/Cloud Composer oraz zastosowania IaC (Terraform). Dołącz do zespołu Data & Analytics i wpływaj na realne projekty w dynamicznym środowisku.

Qualifications

• Min. 4 lata doświadczenia w Data Engineer w środowisku produkcyjnym.
• Bardzo dobra znajomość GCP, w szczególności BigQuery i Cloud Storage.
• Umiejętność projektowania, budowy i utrzymania pipeline’ów danych (batch i/lub streaming).
• Swobodna komunikacja w języku angielskim; wymagana płynna znajomość języka polskiego.

Responsibilities

• Projektowanie, implementacja i utrzymanie skalowalnych pipeline’ów danych w oparciu o Google Cloud Platform.
• Praca z BigQuery jako hurtownią danych: modelowanie danych, optymalizacja zapytań i kosztów.
• Integracja danych z różnych źródeł (pliki, bazy danych, API, eventy) oraz ich przetwarzanie i transformacja.
• Orkiestracja workflow danych przy użyciu Apache Airflow / Cloud Composer.
• Tworzenie i utrzymanie rozwiązań CI/CD dla pipeline’ów danych oraz infrastruktury.
• Zarządzanie infrastrukturą w chmurze zgodnie z podejściem Infrastructure as Code (Terraform).
• Zapewnienie jakości danych, monitoringu pipeline’ów oraz szybkiego reagowania na incydenty.
• Współpraca z zespołami analitycznymi, BI i produktowymi w celu dostarczania stabilnych i dobrze udokumentowanych danych.
• Udział w rozwoju architektury danych oraz wspólne definiowanie dobrych praktyk data engineeringowych.

Skills

Google Cloud Platform

BigQuery

SQL

Python

Airflow/Cloud Composer

Tools

Terraform

dbt

Databricks

Datastream/Snowflake

Apache Spark

Job description

Sii Sp. z o.o. w Piła poszukuje doświadczonego Data Engineera z Google Cloud Platform. Pracownik będzie projektować i utrzymywać pipeline’y danych, pracować z BigQuery i rozwijać rozwiązania w chmurze.

Oczekujemy solidnej znajomości SQL i Pythona, orkiestracji Airflow/Cloud Composer oraz zastosowania IaC (Terraform). Dołącz do zespołu Data & Analytics i wpływaj na realne projekty w dynamicznym środowisku.