Data Engineer - ETL/ELT & Big Data on GCP

B2B.NET S.A.; Województwo mazowieckie; Hybrid; PLN 153,000 - 219,000; Full time

Benefits offered by this job

Kontrakt B2B

Praca hybrydowa: 1 dzień w tygodniu w

Prywatna opieka medyczna

Dofinansowanie zajęć sportowych

Wsparcie formalne od dokumentów po on-

Job summary

B2B.NET S.A. poszukuje specjalisty ds. przetwarzania danych do hybrydowego zespołu pracującego nad procesami ETL/ELT w środowisku Big Data. Projekt obejmuje zasilanie hurtowni danych i analitykę w Google Cloud oraz kampanie marketingowe.

Praca w trybie hybrydowym, 1 dzień w biurze w Warszawie; długość projektu przekracza 12 miesięcy; stawka do 135 zł/h netto (B2B). Wymagane doświadczenie z BigQuery, SQL, Python lub Rust oraz Kafka/ Pub/Sub.

Qualifications

• Wymagane doświadczenie w budowie procesów ETL/ELT.
• Doświadczenie w pisaniu i optymalizacji zapytań SQL.
• Doświadczenie w pracy z BigQuery.
• Znajomość Python lub Rust.
• Doświadczenie w przetwarzaniu danych w batchu i streaming.
• Doświadczenie w pracy z Kafka lub Pub/Sub.
• Doświadczenie w bazach Oracle lub PostgreSQL.
• Znajomość systemu Linux.

Responsibilities

• Projektowanie, budowa i rozwój pipeline'ów ETL/ELT w batchu i strumieniu.
• Integracja danych z systemów on-premise, chmur, baz, plików, API i zdarzeniowych.
• Modelowanie danych i tworzenie datamartów.
• Optymalizacja SQL, wydajności i kosztów.
• Zapewnianie jakości danych, monitoring, obsługa błędów i testów.
• Diagnostyka incydentów i wsparcie wdrożeń.
• Dokumentowanie rozwiązań zgodnie z DevSecOps.

Job description

B2B.NET S.A. poszukuje specjalisty ds. przetwarzania danych do hybrydowego zespołu pracującego nad procesami ETL/ELT w środowisku Big Data. Projekt obejmuje zasilanie hurtowni danych i analitykę w Google Cloud oraz kampanie marketingowe.

Praca w trybie hybrydowym, 1 dzień w biurze w Warszawie; długość projektu przekracza 12 miesięcy; stawka do 135 zł/h netto (B2B). Wymagane doświadczenie z BigQuery, SQL, Python lub Rust oraz Kafka/ Pub/Sub.