Developer Hurtowni Danych (k/m)

PZU Tech SA; Warszawa; On-site; PLN 180,000 - 280,000; Full time

Job summary

PZU Tech SA poszukuje specjalisty ds. hurtowni danych, który posiada praktyczne doświadczenie w budowie i rozwijaniu hurtowni danych oraz znajomość Oracle i SAS Viya.

Kandydat będzie projektował procesy ETL, modele danych i interfejsy integracyjne pomiędzy systemami PZU. Zakres obejmuje budowę narzędzi developerskich HD, API, monitorowanie aktywności użytkowników oraz udział w optymalizacji przetwarzania danych i implementacji nowoczesnych architektur danych.

Qualifications

• Praktyczne doświadczenie w budowie i rozwoju hurtowni danych.
• Znajomość Oracle (mile widziana Exadata) i SQL/PLSQL.
• Projektowanie procesów ETL i modelowanie danych.

Responsibilities

• Budowa narzędzi wspomagających pracę developerów HD.
• Budowa API i komponentów integracyjnych łączących technologie HD (SAS, SAS Viya, Oracle, PowerBI, Microsoft Fabric, Office 365, REST API).
• Budowa narzędzi wymiany danych między systemami IT PZU (integracyjne, plikowe, API, strumieniowe, m.in. Kafka).
• POC nowych narzędzi i technologii do wdrożenia w HD PZU (SAS Viya, Oracle Exadata, Microsoft Fabric, Power BI).
• Budowa narzędzi monitorujących aktywność użytkowników HD oraz wsparcie jakości, audytu i utrzymania przetwarzania danych.
• Rozwój systemu słownikowego Sanmargar Metastudio 4.
• Udział w optymalizacji przetwarzania HD poprzez komponenty wspierające, analizy i automatyzację prac utrzymaniowych.
• Budowa technicznych data martów, raportów BI oraz komponentów wspierających przetwarzanie danych.
• Wsparcie projektów strategicznych w zakresie technologii, integracji i architektury.

Skills

ETL design

Data modeling

BI reporting

Data warehousing

Tools

SAS Viya

Oracle

Git

Bitbucket

Bamboo

JIRA

Job description

• praktyczne doświadczenie w budowie i rozwoju hurtowni danych, bardzo dobra znajomość Oracle (mile widziana Oracle Exadata), projektowanie i implementacja procesów ETL, modelowanie danych oraz projektowanie przepływów danych
• doświadczenie w pracy na środowiskach i narzędziach SAS oraz SAS Viya, w tym DI Studio, Enterprise Guide, SAS Studio i Visual Analytics
• doświadczenie w pracy na środowiskach Oracle, w tym mile widziane doświadczenie z Oracle Exadata, PL/SQL oraz optymalizacją przetwarzania danych
• znajomość zagadnień i technologii CI/CD, w tym Git, Bitbucket, Bamboo, JIRA oraz praktyczne doświadczenie w automatyzacji procesu wytwarzania
• umiejętność projektowania i budowy rozwiązań analitycznych, technicznych data martów, raportów BI oraz komponentów wspierających przetwarzanie danych

Wymagania oczekiwane:

• znajomość Microsoft Fabric, Power BI, Python, REST API, Office 365 oraz zagadnień integracji danych pomiędzy systemami
• znajomość Azure Data Factory, integracji danych pomiędzy cloud i on-premise oraz platform danych w Azure
• znajomość nowoczesnych architektur danych oraz projektowania interfejsów wymiany danych pomiędzy systemami
• znajomość formatu Parquet, pracy z warstwami Data Lake oraz doświadczenie w integracji opartej o Kafka i strumienie danych

Zadania:

• budowa narzędzi wspomagających pracę developerów Hurtowni Danych, w tym wspólnych, re-używalnych komponentów w technologiach SAS, SAS Viya, Oracle oraz innych technologiach wykorzystywanych w HD
• budowa API oraz komponentów integracyjnych łączących technologie wykorzystywane w HD, w tym SAS, SAS Viya, Oracle, PowerBI, Microsoft Fabric, Office 365, REST API oraz inne rozwiązania techniczne
• budowa narzędzi wspomagających wymianę danych pomiędzy systemami informatycznymi PZU, w tym rozwiązania integracyjne, plikowe, API oraz strumieniowe, m.in. Kafka
• POC nowych narzędzi i technologii do potencjalnego wdrożenia w HD PZU, w tym rozwiązań SAS Viya, Oracle Exadata, Microsoft Fabric, Power BI oraz narzędzi automatyzujących pracę zespołu
• budowa narzędzi monitorujących aktywność użytkowników HD oraz wspierających kontrolę jakości, audyt, utrzymanie i optymalizację procesów przetwarzania danych
• rozwój systemu słownikowego Sanmargar Metastudio 4
• udział w pracach optymalizujących przetwarzanie HD, poprzez budowę komponentów wspierających, punktowe analizy, optymalizacje przetwarzań oraz automatyzację prac utrzymaniowych
• budowa technicznych data martów, raportów BI oraz komponentów wspierających przetwarzanie i optymalizację danych
• wsparcie projektów strategicznych w aspektach technologicznych, integracyjnych i architektonicznych