Architekt Data Lakehouse / Hurtowni Danych - Tech Lead

BCF Software Sp. z o.o.; Warszawa; On-site; PLN 180,000 - 280,000; Full time

Job summary

BCF Software Sp. z o.o. poszukuje Architekta Hurtowni Danych do zaprojektowania docelowej architektury platformy danych, stworzenia HLD i roadmapy transformacji, oraz modernizacji Data Warehouse w kierunku Data Lake/Data Lakehouse.

Rola obejmuje pracę z Apache Spark, Hadoop/HDFS, Delta Lake lub Apache Iceberg, a także pełnienie funkcji Technical Leada i wsparcie zespołu w decyzjach technicznych. Dołączysz do doświadczonego zespołu i będziesz miał/miała realny wpływ na kształt architektury,

Qualifications

• Projektowanie hurtowni danych i architektury Data Lake/Data Lakehouse.
• Praca z Apache Spark i Hadoop/HDFS.
• Znajomość Delta Lake / Apache Iceberg.
• Doświadczenie w ETL/ELT i DataOps/CI/CD.
• Role Technical Leada / Architekta.
• Komunikacja po polsku i po angielsku techniczną.

Responsibilities

• Analiza istniejącego środowiska i projektowanie docelowej architektury hurtowni danych.
• Przygotowanie HLD oraz roadmapy transformacji technologicznej.
• Projektowanie architektury Data Lake / Data Lakehouse z Hadoop/HDFS, Spark, Delta Lake lub Iceberg.
• Modernizacja procesów ETL/ELT, w tym zastąpienie ODI oraz warstw SRC/STG.
• Definiowanie sposobu przetwarzania danych batch, near-real-time i streaming oraz standardów DataOps/CI/CD.
• Przygotowywanie rekomendacji technologicznych i wsparcie zespołu w decyzjach architektonicznych.
• Pełnienie roli Technical Leada, mentoring i transfer wiedzy w Data Engineering.

Skills

Data Warehouse design

Data Lake / Lakehouse

Apache Spark

Hadoop / HDFS

Delta Lake / Iceberg

ETL/ELT processing

DataOps / CI/CD

Technical Lead

English (technical)

Polish language

Tools

ODI (Oracle Data Integrator)

Job description

BCF Software Sp. z o.o. poszukuje Architekta Hurtowni Danych do zaprojektowania docelowej architektury platformy danych, stworzenia HLD i roadmapy transformacji, oraz modernizacji Data Warehouse w kierunku Data Lake/Data Lakehouse.

Rola obejmuje pracę z Apache Spark, Hadoop/HDFS, Delta Lake lub Apache Iceberg, a także pełnienie funkcji Technical Leada i wsparcie zespołu w decyzjach technicznych. Dołączysz do doświadczonego zespołu i będziesz miał/miała realny wpływ na kształt architektury,