Data Engineer

IT Squad; Warszawa; Hybrid; PLN 180,000 - 260,000; Full time

Benefits offered by this job

Dostęp do usług medycznych

Pakiet sportowy

Events firmowe

Job summary

IT Squad w Warszawie poszukuje doświadczonego inżyniera danych do projektowania i wdrażania wysokowydajnych pipeline’ów danych (batch i streaming) na Google Cloud. Praca obejmuje budowę Data Lake i Data Warehouse na GCP oraz ścisłą współpracę z Data Scientists, Analysts i Software Engineers.

Wymagane 5+ lat doświadczenia, biegła znajomość BigQuery i Ab Initio, znajomość DevOps i CI/CD, a także angielski na poziomie C1 oraz niemiecki. Praca hybrydowa z możliwością pracy zdalnej w Warszawie.

Qualifications

• Minimum 5 lat doświadczenia w projektowaniu i wdrażaniu wysokowydajnych pipeline’ów danych – batch i streaming.
• Doświadczenie w budowie i utrzymaniu bezpiecznych Data Lake i Data Warehouse na GCP.
• Bardzo dobra znajomość BigQuery i Ab Initio.
• Doświadczenie w projektowaniu rozwiązań chmurowych klasy enterprise.
• Biegle angielski (C1) i znajomość języka niemieckiego.

Responsibilities

• Projektowanie, tworzenie i wdrażanie wysokowydajnych pipeline'ów danych – batch i streaming.
• Projektowanie i implementacja skalowalnych systemów przetwarzania danych i pipeline’ów na Google Cloud.
• Budowa i utrzymanie bezpiecznych, niezawodnych i skalowalnych Data Lake oraz Data Warehouse na GCP.
• Udział w projektach migracji i transformacji danych oraz prowadzenie projektów klienckich od designu do wdrożenia.
• Współpraca z Data Scientists, Data Analysts oraz Software Engineers przy realizacji złożonych potrzeb danych.
• Automatyzacja provisioningu infrastruktury oraz procesów DevOps; CI/CD.

Skills

BigQuery

Ab Initio

Data pipelines

DevOps

CI/CD

English (C1)

German

GCP

Tools

GCP

Job description

Jesteśmy firmą o profilu wdrożeniowo – doradczym. Specjalizujemy się m.in. w takich obszarach jak rescue IT, transformacja cyfrowa i utrzymanie. Wspólnie tworzymy najnowocześniejsze rozwiązania cyfrowe przede wszystkim dla klientów z branż takich jak: opieka zdrowotna, bankowość, ubezpieczenia, e-commerce, FMCG i handel detaliczny.

Łączymy innowację z praktycznym podejściem do rozwiązywania problemów technologicznych. Nasz zespół to pasjonaci IT, którzy stawiają na rozwój, nowoczesne technologie i przyjazne środowisko pracy.

• Projektowanie, rozwój i wdrażanie wysokowydajnych pipeline'ów danych w modelu batch i streaming.
• Projektowanie i implementacja skalowalnych systemów przetwarzania danych oraz pipeline'ów na Google Cloud.
• Budowa i utrzymanie bezpiecznych, niezawodnych i skalowalnych Data Lake oraz Data Warehouse na GCP.
• Udział w projektach migracji i transformacji danych.
• Projektowanie rozwiązań chmurowych klasy enterprise.
• Prowadzenie projektów klienckich od etapu projektowania do skutecznego wdrożenia.
• Praca z BigQuery i Ab Initio.
• Automatyzacja provisioningu infrastruktury oraz procesów DevOps.
• Projektowanie i utrzymanie procesów CI/CD.
• Współpraca z zespołami Google Cloud oraz klientami przy wdrażaniu produktów i rozwiązań GCP.
• Współpraca z Data Scientists, Data Analysts oraz Software Engineers przy realizacji złożonych potrzeb związanych z danymi.
• Minimum 5 lat doświadczenia w projektowaniu, tworzeniu i wdrażaniu wysokowydajnych pipeline'ów danych – batch i streaming.
• Doświadczenie w budowie i utrzymaniu bezpiecznych, niezawodnych i skalowalnych Data Lake oraz Data Warehouse na GCP.
• Doświadczenie w projektowaniu rozwiązań chmurowych klasy enterprise.
• Doświadczenie w prowadzeniu projektów klienckich do zakończenia.
• Bardzo dobra znajomość BigQuery i Ab Initio.
• Doświadczenie w automatyzacji provisioningu infrastruktury.
• Znajomość DevOps oraz CI/CD.
• Płynna znajomość języka angielskiego - C1.
• Znajomość języka niemieckiego.
• Doświadczenie w technical consultingu.
• Zaawansowana znajomość SQL tuning i optymalizacji pod kątem kosztów i wydajności.
• Doświadczenie w budowie pipeline'ów do przetwarzania danych streamingowych oraz znajomość mechanizmów dostarczania zdarzeń (event delivery semantics).
• Doświadczenie w projektowaniu i tworzeniu produkcyjnych, wielkoskalowych rozwiązań Big Data na public cloud.
• Doświadczenie w projektowaniu rozwiązań typu internet-scale.
• Doświadczenie we współpracy z Data Scientists, Data Analysts i Software Engineers przy realizacji złożonych potrzeb związanych z danymi.
• Pracę przy projektach klienckich i produktach własnych
• Realny wpływ na rozwiązania biznesowe i technologiczne w ramach realizowanych projektów
• Szkolenia oraz wsparcie w określeniu ścieżki rozwoju
• Eventy firmowe, dostęp do usług medycznych oraz pakietów sportowych
• Zatrudnienie na umowę B2B / UZ Student
• Pracę w trybie zdalnym/ hybrydowym (Warszawa)