Senior Cloud Data Engineer (AWS)

Future Processing; Gliwice; In loco; PLN 180.000 - 240.000; Tempo pieno

Descrizione del lavoro

Future Processing w Gliwicach poszukuje specjalisty ds. danych do Talent Poola – inicjatywy dla doświadczonych osób zainteresowanych pracą z nami w przyszłości. Dołączysz do zespołu realizującego projekty chmurowe i analityczne, będziesz projektować i optymalizować przepływy danych w AWS, Databricks i Data Lakehouse oraz tworzyć dokumentację techniczną.

Wymagane jest min. 5 lat pracy w IT, w tym 3,5 roku w pracy z danymi w chmurze AWS; dobra znajomość SQL, Git, CI/CD; angielski na poziomie min.

Competenze

• Minimum 5 years of IT experience, including at least 3.5 years working with data in AWS cloud (commercial projects deployed to production).
• Commercial experience in processing large data sets using Databricks.
• Advanced SQL skills and using SQL in MS solutions and beyond.

Mansioni

• Odpowiedzialność za całość rozwiązań tworzonych wraz z zespołem.
• Tworzenie i modyfikowanie rozwiązań do przetwarzania danych w chmurze.
• Tworzenie i modyfikowanie dokumentacji technicznej.

Conoscenze

AWS

Databricks

SQL

Git

CI/CD

ETL/ELT

Delta Lake

Data Lakehouse

SMP/MPP

Migration to Cloud

Cloud security

AWS data services

English B2

Strumenti

Databricks

AWS

Descrizione del lavoro

Aplikując na tę ofertę, aplikujesz do Talent Poola – inicjatywy dla doświadczonych osób, które są zainteresowane pracą z nami w przyszłości.

Szukamy Ciebie, jeśli:

• masz min. 5 lat doświadczenia w IT, w tym min. 3,5 roku w pracy z danymi w chmurze AWS (potwierdzone projektami komercyjnymi wdrożonymi na produkcje),
• masz komercyjne doświadczenie w przetwarzaniu sporych danych przy użyciu Databricks,
• korzystasz z SQL na poziomie zaawansowanym i wykorzystujesz go na rozwiązaniach technologicznych MS i nie tylko,
• znasz metodyki i stosujesz biegle Git oraz CI/CD,
• tworzysz i optymalizujesz rozwiązania przetwarzające dane (ETL, ELT, itp.) poprzedzone projektem technicznym oraz alternatywami rozwiązań,
• monitoring, diagnostyka oraz rozwiązywanie problemów w chmurze nie stanowi dla Ciebie problemu i dobrze wiesz, jak zaplanować infrastrukturę oraz obliczyć jej koszt,
• koncepcje Delta Lake i Data Lakehouse są Ci znane,
• znasz architekturę SMP oraz MPP wraz z przykładami rozwiązań opartych o te architektury,
• masz wiedzę na temat migracji rozwiązań on-premise do chmury oraz znasz podstawowe typy migracji,
• masz wiedzę na temat stosowania mechanizmów związanych z bezpiecznym przechowywaniem i przetwarzaniem danych w chmurze,
• bardzo dobrze znasz usługi związanie z przechowywaniem i przetwarzaniem danych, oferowanych przez dostawcę chmury AWS,
• masz doświadczenie w bezpośredniej współpracy z klientem,
• posługujesz się j. angielskim na poziomie średniozaawansowanym (min. B2).

Praca na tym stanowisku w naszej firmie oznacza:

• odpowiedzialność za całość rozwiązań współtworzonych wraz z zespołem,
• tworzenie lub modyfikowanie rozwiązań do przetwarzania danych w chmurze,
• tworzenie i modyfikowanie dokumentacji,
• analizowanie i optymalizowanie rozwiązań w zakresie działającego lub projektowanego systemu,
• analizowanie wymagań klienta pod kątem dostarczenia optymalnego rozwiązania jego potrzeby biznesowej,
• analizowanie potencjalnych zagrożeń,
• dostosowywanie rozwiązań względem wymagań biznesowych.