DWH Architect (HLD)

Britenet; Warszawa; On-site; PLN 180,000 - 240,000; Full time

Job summary

Britenet poszukuje specjalisty ds. architektury danych w Polsce, aby zaprojektować i wdrożyć nowoczesne platformy danych i hurtownie. Osoba ta stworzy architekturę Data Lake/Lakehouse, poprowadzi transformacje zespołów DW i zdefiniuje standardy CI/CD dla środowisk DataOps.

Wymagane doświadczenie z Apache Spark, Hadoop/HDFS oraz Delta Lake lub Iceberg, a także umiejętność tworzenia dokumentacji HLD/LLD i prowadzenia projektów na dużą skalę, w tym wizyt klienta w Gdańsku.

Qualifications

• Doświadczenie w projektowaniu nowoczesnych platform danych i hurtowni danych.
• Tworzenie architektury Data Lake / Lakehouse oraz zorientowanie na dużą skalę.
• Praca z Apache Spark (Data Engineering) i Hadoop/HDFS.
• Znajomość Delta Lake i/lub Apache Iceberg.
• Definiowanie architektury przetwarzania danych na dużą skalę oraz ETL/ELT.
• Przygotowywanie dokumentacji architektury (HLD, LLD).
• Prowadzenie transformacji technologicznych zespołów Data Warehouse.
• Okazjonalne wizyty w biurze klienta w Gdańsku.

Responsibilities

• Assessment obecnej architektury danych.
• Stworzenie dokumentu HLD architektury docelowej.
• Stworzenie roadmapy transformacji technologicznej.
• Stworzenie rekomendacji technologicznych wraz z uzasadnieniem.
• Stworzenie koncepcji CI/CD oraz standardów wytwarzania.
• Stworzenie rekomendacji kompetencyjnych dla zespołu i planu transferu wiedzy.

Skills

Data platform design

Data warehouse architecture

Apache Spark

Hadoop / HDFS

Delta Lake / Iceberg

ETL/ELT design

HLD/LLD documentation

Lead Architect / Technical Lead

Client visits / engagement

Tools

Oracle Data Integrator

Oracle Database

CI/CD for DataOps

Job description

Wymagania

• doświadczenie w projektowaniu nowoczesnych platform danych i hurtowni danych,
• tworzeniu architektury Data Lake / Lakehouse,
• Apache Spark (Data Engineering),
• Apache Hadoop / HDFS,
• Delta Lake i/lub Apache Iceberg,
• definiowaniu architektury przetwarzania danych na dużą skalę,
• projektowaniu procesów ETL/ELT,
• przygotowywaniu dokumentacji architektonicznej HLD i LLD,
• prowadzeniu transformacji technologicznych zespołów Data Warehouse.
• okazjonalne wizyty w biurze klienta w Gdańsku

Welcome Skills

• doświadczenie w migracji środowisk Oracle DWH,
• znajomość Oracle Data Integrator,
• znajomość Oracle Database,
• doświadczenie w obszarze DataOps i CI/CD dla platform danych,
• doświadczenie w pracy w roli Technical Lead lub Lead Architect.

Zadania

• Assessment obecnej architektury.
• Stworzenie dokumentu HLD architektury docelowej.
• Stworzenie roadmapy transformacji technologicznej.
• Stworzenie rekomendacji technologicznych wraz z uzasadnieniem.
• Stworzenie koncepcji CI/CD oraz standardów wytwarzania.
• Stworzenie rekomendacji kompetencyjnych dla zespołu i planu transferu wiedzy.