Data Engineer: Oracle, Databricks & Cloud ETL

Solid Company; Polska; Hybrid; PLN 141,000 - 234,000; Full time

Job summary

Solid Company poszukuje specjalisty ds. hurtowni danych i integracji danych do pracy nad projektami z branży ubezpieczeniowej. Zakres obejmuje integrację chmurowych systemów z Databricks, Oracle i SAS oraz projektowanie ETL.

Praca w środowisku hybrydowym, z obecnością w biurze w Warszawie raz w tygodniu. Wymagane doświadczenie w Databricks, SQL i integracji danych, a także znajomość Azure Data Factory i SAS. Wynagrodzenie zależne od doświadczenia, do 170 zł netto+VAT za godzinę.

Qualifications

• Praktyczne doświadczenie w budowie i rozwoju hurtowni danych.
• Bardzo dobra znajomość Oracle (mile widziane Exadata).
• Umiejętność projektowania i implementacji procesów ETL, modelowania danych i przepływów danych.
• Praktyczna znajomość Databricks oraz doświadczenie z danymi w cloud data platform i integracji Databricks z systemami zewnętrznymi.
• Doświadczenie w środowiskach hybrid cloud + on-premise w Data & Analytics.
• Znajomość Azure Data Factory, integracji danych między cloud i on-premise oraz platform danych w Azure.
• Znajomość SAS 9.4, SAS Viya i procesów realizowanych w SAS.
• Znajomość Git/GitHub/Bitbucket/Bamboo w celu automatyzacji procesu wytwarzania.
• Umiejętność wykorzystania AI/GitHub Copilot w zadaniach developerskich i analitycznych.
• Umiejętność projektowania rozwiązań analitycznych, definiowania standardów technicznych oraz projektowania architektury rozwiązań danych.
• Znajomość nowoczesnych architektur danych i projektowania interfejsów wymiany danych pomiędzy systemami.
• Mile widziane: Microsoft Fabric, Python, automatyzacja procesów, tworzenie skryptów integracyjnych i przetwarzanie danych. Format Parquet, praca z warstwami Data Lake, integracje oparte na Kafka i strumieniach danych.

Responsibilities

• wsparcie projektu z branży ubezpieczeniowej w zakresie integracji systemu chmurowego z Databricks oraz istniejącą Hurtownią Danych opartą o Oracle i SAS
• projektowanie i implementacja procesów ETL oraz przepływów danych pomiędzy warstwą cloud i środowiskiem on-premise
• integracja Databricks, Azure Data Factory oraz Oracle, w tym przygotowanie danych do dalszego przetwarzania w Hurtowni Danych
• udział w projektowaniu architektury rozwiązań danych, definiowaniu standardów technicznych oraz projektowaniu interfejsów wymiany danych między systemami
• automatyzacja procesów wytwarzania i utrzymania rozwiązań, z wykorzystaniem CI/CD, GitHub Copilot oraz Visual Studio Code
• realizacja bieżących zadań związanych z rozwojem i utrzymaniem rozwiązań Hurtowni Danych/BI w technologiach SAS, Oracle, Microsoft Fabric, Python, Kafka oraz Sanmargar Metastudio
• budowa technicznych data martów, raportów BI oraz komponentów wspierających przetwarzanie i optymalizację danych
• wsparcie projektów strategicznych w aspektach technologicznych, integracyjnych i architektonicznych
• tryb realizacji usług: hybrydowo, obejmujący obecność w biurze w Warszawie 1 raz w tygodniu
• budżet projektu: do 170 zł netto+VAT/h, w zależności od doświadczenia oraz zakresu świadczonych usług

Skills

Budowa i rozwój hurtowni danych

Databricks

AI w zadaniach developerskich i analty

Praca w środowisku hybrid cloud

Tools

Databricks

Azure Data Factory

Oracle

SAS

GitHub/Bamboo/Bitbucket

Python

Kafka

Microsoft Fabric

Parquet/Data Lake

Job description

Solid Company poszukuje specjalisty ds. hurtowni danych i integracji danych do pracy nad projektami z branży ubezpieczeniowej. Zakres obejmuje integrację chmurowych systemów z Databricks, Oracle i SAS oraz projektowanie ETL.

Praca w środowisku hybrydowym, z obecnością w biurze w Warszawie raz w tygodniu. Wymagane doświadczenie w Databricks, SQL i integracji danych, a także znajomość Azure Data Factory i SAS. Wynagrodzenie zależne od doświadczenia, do 170 zł netto+VAT za godzinę.