Remote-friendly GCP Data Engineer: BigQuery & Airflow

Sii Sp. z o.o.; Białystok; On-site; PLN 180,000 - 250,000; Full time

Benefits offered by this job

Prywatna opieka zdrowotna

Platforma kafeteryjna

Zniżki na samochody

Biura klasy A lub praca zdalna

Job summary

Sii Sp. z o.o. w Białymstoku poszukuje doświadczonego Data Engineera z Google Cloud Platform. Dołączysz do zespołu Data & Analytics, projektując i utrzymując skalowalne pipeline’y danych, pracując z BigQuery i CI/CD.

Oferujemy pracę w dynamicznym środowisku z realnym wpływem na projekty cloudowe. Wymagana dobra znajomość GCP, SQL i Pythona, doświadczenie z Airflow/Cloud Composer i IaC (Terraform). Mile widziane Dataflow, Spark, Databricks i Snowflake.

Responsibilities

• Projektowanie, implementacja i utrzymanie skalowalnych pipeline’ów danych w oparciu o Google Cloud Platform
• Praca z BigQuery jako główną hurtownią danych: modelowanie danych, optymalizacja zapytań i kosztów, dbanie o wydajność oraz niezawodność rozwiązań
• Integracja danych z różnych źródeł (pliki, bazy danych, API, eventy) oraz ich przetwarzanie i transformacja
• Orkiestracja workflow danych przy użyciu Apache Airflow / Cloud Composer
• Tworzenie i utrzymanie rozwiązań CI/CD dla pipeline’ów danych oraz infrastruktury
• Zarządzanie infrastrukturą w chmurze zgodnie z podejściem Infrastructure as Code (Terraform)
• Zapewnienie jakości danych, monitoringu pipeline’ów oraz szybkiego reagowania na incydenty
• Współpraca z zespołami analitycznymi, BI i produktowymi w celu dostarczania stabilnych i dobrze udokumentowanych danych
• Udział w rozwoju architektury danych oraz wspólne definiowanie dobrych praktyk data engineeringowych

Job description

Sii Sp. z o.o. w Białymstoku poszukuje doświadczonego Data Engineera z Google Cloud Platform. Dołączysz do zespołu Data & Analytics, projektując i utrzymując skalowalne pipeline’y danych, pracując z BigQuery i CI/CD.

Oferujemy pracę w dynamicznym środowisku z realnym wpływem na projekty cloudowe. Wymagana dobra znajomość GCP, SQL i Pythona, doświadczenie z Airflow/Cloud Composer i IaC (Terraform). Mile widziane Dataflow, Spark, Databricks i Snowflake.