GCP Data Engineer / Cloud Data Engineer

IT Squad; Warszawa; Hybrid; PLN 180,000 - 290,000; Full time

Job summary

IT Squad w Warszawie poszukuje doświadczonego inżyniera danych do projektowania i utrzymania wysokowydajnych pipeline'ów danych na Google Cloud, w tym BigQuery i Ab Initio. Dołączysz do zespołu specjalistów zajmujących się Data Lake, Data Warehouse i migracjami danych.

Wymagane minimum 5 lat doświadczenia, dobra znajomość SQL i tuningów, oraz umiejętność pracy z Data Scientists i software engineers. Pracujesz w trybie zdalnym lub hybrid, z lokalizacją w Warszawie.

Qualifications

• Minimum 5 lat doświadczenia w projektowaniu i wdrażaniu wysokowydajnych pipeline'ów danych (batch i streaming).
• Doświadczenie w budowie i utrzymaniu Data Lake i Data Warehouse na GCP.

Responsibilities

• Projektowanie, tworzenie i utrzymanie wysokowydajnych pipeline'ów danych (batch i streaming).
• Projektowanie rozwiązań chmurowych klasy enterprise w GCP (BigQuery, Data Lake/ DW).
• Udział w migracjach i transformacjach danych dla klientów.
• Współpraca z Data Scientists, Data Analysts i Software Engineers przy realizacji złożonych potrzeb związanych z danymi.
• Prowadzenie i wdrażanie rozwiązań DevOps, CI/CD oraz automatyzacja provisioning'u infrastruktury.

Skills

BigQuery

Ab Initio

SQL tuning

Cloud data platforms

Data pipelines

DevOps

CI/CD

Data Lake

Data Warehouse

Python/ETL scripting

Tools

BigQuery

Ab Initio

Job description

Jesteśmy firmą o profilu wdrożeniowo – doradczym. Specjalizujemy się m.in. w takich obszarach jak rescue IT, transformacja cyfrowa i utrzymanie. Wspólnie tworzymy najnowocześniejsze rozwiązania cyfrowe przede wszystkim dla klientów z branż takich jak: opieka zdrowotna, bankowość, ubezpieczenia, e-commerce, FMCG i handel detaliczny.

Łączymy innowację z praktycznym podejściem do rozwiązywania problemów technologicznych. Nasz zespół to pasjonaci IT, którzy stawiają na rozwój, nowoczesne technologie i przyjazne środowisko pracy.

• Projektowanie, rozwój i wdrażanie wysokowydajnych pipeline'ów danych w modelu batch i streaming.
• Projektowanie i implementacja skalowalnych systemów przetwarzania danych oraz pipeline'ów na Google Cloud.
• Budowa i utrzymanie bezpiecznych, niezawodnych i skalowalnych Data Lake oraz Data Warehouse na GCP.
• Udział w projektach migracji i transformacji danych.
• Projektowanie rozwiązań chmurowych klasy enterprise.
• Prowadzenie projektów klienckich od etapu projektowania do skutecznego wdrożenia.
• Praca z BigQuery i Ab Initio.
• Automatyzacja provisioningu infrastruktury oraz procesów DevOps.
• Projektowanie i utrzymanie procesów CI/CD.
• Współpraca z zespołami Google Cloud oraz klientami przy wdrażaniu produktów i rozwiązań GCP.
• Współpraca z Data Scientists, Data Analysts oraz Software Engineers przy realizacji złożonych potrzeb związanych z danymi.
• Minimum 5 lat doświadczenia w projektowaniu, tworzeniu i wdrażaniu wysokowydajnych pipeline'ów danych – batch i streaming.
• Doświadczenie w budowie i utrzymaniu bezpiecznych, niezawodnych i skalowalnych Data Lake oraz Data Warehouse na GCP.
• Doświadczenie w projektowaniu rozwiązań chmurowych klasy enterprise.
• Doświadczenie w prowadzeniu projektów klienckich do zakończenia.
• Bardzo dobra znajomość BigQuery i Ab Initio.
• Doświadczenie w automatyzacji provisioningu infrastruktury.
• Znajomość DevOps oraz CI/CD.
• Płynna znajomość języka angielskiego - C1.
• Znajomość języka niemieckiego.
• Doświadczenie w technical consultingu.
• Zaawansowana znajomość SQL tuning i optymalizacji pod kątem kosztów i wydajności.
• Doświadczenie w budowie pipeline'ów do przetwarzania danych streamingowych oraz znajomość mechanizmów dostarczania zdarzeń (event delivery semantics).
• Doświadczenie w projektowaniu i tworzeniu produkcyjnych, wielkoskalowych rozwiązań Big Data na public cloud.
• Doświadczenie w projektowaniu rozwiązań typu internet-scale.
• Doświadczenie we współpracy z Data Scientists, Data Analysts i Software Engineers przy realizacji złożonych potrzeb związanych z danymi.
• Pracę przy projektach klienckich i produktach własnych
• Realny wpływ na rozwiązania biznesowe i technologiczne w ramach realizowanych projektów
• Szkolenia oraz wsparcie w określeniu ścieżki rozwoju
• Eventy firmowe, dostęp do usług medycznych oraz pakietów sportowych
• Zatrudnienie na umowę B2B / UZ Student
• Pracę w trybie zdalnym/ hybrydowym (Warszawa)