Data Engineer (Oracle)

Solid Company; Polska; Hybrid; PLN 141,000 - 234,000; Full time

Job summary

Solid Company poszukuje specjalisty ds. hurtowni danych i integracji danych do pracy nad projektami z branży ubezpieczeniowej. Zakres obejmuje integrację chmurowych systemów z Databricks, Oracle i SAS oraz projektowanie ETL.

Praca w środowisku hybrydowym, z obecnością w biurze w Warszawie raz w tygodniu. Wymagane doświadczenie w Databricks, SQL i integracji danych, a także znajomość Azure Data Factory i SAS. Wynagrodzenie zależne od doświadczenia, do 170 zł netto+VAT za godzinę.

Qualifications

• Praktyczne doświadczenie w budowie i rozwoju hurtowni danych.
• Bardzo dobra znajomość Oracle (mile widziane Exadata).
• Umiejętność projektowania i implementacji procesów ETL, modelowania danych i przepływów danych.
• Praktyczna znajomość Databricks oraz doświadczenie z danymi w cloud data platform i integracji Databricks z systemami zewnętrznymi.
• Doświadczenie w środowiskach hybrid cloud + on-premise w Data & Analytics.
• Znajomość Azure Data Factory, integracji danych między cloud i on-premise oraz platform danych w Azure.
• Znajomość SAS 9.4, SAS Viya i procesów realizowanych w SAS.
• Znajomość Git/GitHub/Bitbucket/Bamboo w celu automatyzacji procesu wytwarzania.
• Umiejętność wykorzystania AI/GitHub Copilot w zadaniach developerskich i analitycznych.
• Umiejętność projektowania rozwiązań analitycznych, definiowania standardów technicznych oraz projektowania architektury rozwiązań danych.
• Znajomość nowoczesnych architektur danych i projektowania interfejsów wymiany danych pomiędzy systemami.
• Mile widziane: Microsoft Fabric, Python, automatyzacja procesów, tworzenie skryptów integracyjnych i przetwarzanie danych. Format Parquet, praca z warstwami Data Lake, integracje oparte na Kafka i strumieniach danych.

Responsibilities

• wsparcie projektu z branży ubezpieczeniowej w zakresie integracji systemu chmurowego z Databricks oraz istniejącą Hurtownią Danych opartą o Oracle i SAS
• projektowanie i implementacja procesów ETL oraz przepływów danych pomiędzy warstwą cloud i środowiskiem on-premise
• integracja Databricks, Azure Data Factory oraz Oracle, w tym przygotowanie danych do dalszego przetwarzania w Hurtowni Danych
• udział w projektowaniu architektury rozwiązań danych, definiowaniu standardów technicznych oraz projektowaniu interfejsów wymiany danych między systemami
• automatyzacja procesów wytwarzania i utrzymania rozwiązań, z wykorzystaniem CI/CD, GitHub Copilot oraz Visual Studio Code
• realizacja bieżących zadań związanych z rozwojem i utrzymaniem rozwiązań Hurtowni Danych/BI w technologiach SAS, Oracle, Microsoft Fabric, Python, Kafka oraz Sanmargar Metastudio
• budowa technicznych data martów, raportów BI oraz komponentów wspierających przetwarzanie i optymalizację danych
• wsparcie projektów strategicznych w aspektach technologicznych, integracyjnych i architektonicznych
• tryb realizacji usług: hybrydowo, obejmujący obecność w biurze w Warszawie 1 raz w tygodniu
• budżet projektu: do 170 zł netto+VAT/h, w zależności od doświadczenia oraz zakresu świadczonych usług

Skills

Budowa i rozwój hurtowni danych

Databricks

AI w zadaniach developerskich i analty

Praca w środowisku hybrid cloud

Tools

Databricks

Azure Data Factory

Oracle

SAS

GitHub/Bamboo/Bitbucket

Python

Kafka

Microsoft Fabric

Parquet/Data Lake

Job description

Zakres współpracy obejmuje:

• wsparcie projektu z branży ubezpieczeniowej w zakresie integracji systemu chmurowego z Databricks oraz istniejącą Hurtownią Danych opartą o Oracle i SAS,


• projektowanie i implementacja procesów ETL oraz przepływów danych pomiędzy warstwą cloud i środowiskiem on-premise,


• integracja Databricks, Azure Data Factory oraz Oracle, w tym przygotowanie danych do dalszego przetwarzania w Hurtowni Danych,


• udział w projektowaniu architektury rozwiązań danych, definiowaniu standardów technicznych oraz projektowaniu interfejsów wymiany danych między systemami,


• automatyzacja procesów wytwarzania i utrzymania rozwiązań, z wykorzystaniem CI/CD, GitHub Copilot oraz Visual Studio Code,


• realizacja bieżących zadań związanych z rozwojem i utrzymaniem rozwiązań Hurtowni Danych/BI w technologiach SAS, Oracle, Microsoft Fabric, Python, Kafka oraz Sanmargar Metastudio,


• budowa technicznych data martów, raportów BI oraz komponentów wspierających przetwarzanie i optymalizację danych,


• wsparcie projektów strategicznych w aspektach technologicznych, integracyjnych i architektonicznych,


• tryb realizacji usług: hybrydowo, obejmujący obecność w biurze w Warszawie 1 raz w tygodniu,


• budżet projektu: do 170 zł netto+VAT/h, w zależności od doświadczenia oraz zakresu świadczonych usług.

Kogo poszukujemy?

• praktyczne doświadczenie w budowie i rozwoju hurtowni danych,


• bardzo dobra znajomość Oracle, mile widziane Oracle Exadata,


• umiejętność projektowania i implementacji procesów ETL, modelowania danych oraz projektowania przepływów danych,


• praktyczna znajomość Databricks oraz doświadczenie z danymi w środowisku cloud data platform i integracji Databricks z systemami zewnętrznymi,


• doświadczenie w środowiskach hybrydowych cloud + on-premise i w projektach Data & Analytics,


• znajomość Azure Data Factory, integracji danych pomiędzy cloud i on-premise oraz platform danych w Azure,


• znajomość SAS 9.4, SAS Viya i procesów realizowanych w środowisku SAS,


• znajomość Git/GitHub/Bitbucket/Bamboo w celu automatyzacji procesu wytwarzania,


• umiejętność wykorzystania AI/GitHub Copilot w zadaniach developerskich i analitycznych,


• umiejętność projektowania rozwiązań analitycznych, definiowania standardów technicznych oraz projektowania architektury rozwiązań danych,


• znajomość nowoczesnych architektur danych i projektowania interfejsów wymiany danych pomiędzy systemami,


• Mile widziane: Microsoft Fabric, programowanie w Pythonie, automatyzacja procesów, tworzenie skryptów integracyjnych i przetwarzanie danych. Format Parquet, praca z warstwami Data Lake, integracje oparte na Kafka i strumieniach danych.