Senior Data Platform Engineer - Databricks & Spark

XTB; Polska; Remoto; PLN 150.000 - 210.000; Tempo pieno

Descrizione del lavoro

XTB w Polsce poszukuje Data Engineera do zespołu Core Data Platform. Będziesz rozwijać skalowalne mechanizmy integracji danych, pracować nad spójną architekturą hurtowni danych i dbać o jakość danych w całej organizacji.

Wymagane minimum 3 lata doświadczenia w roli Data Engineer lub podobnej, znajomość MS SQL Server, SSIS i SQL Server Agent oraz praktyczna znajomość Databricks, Pythona i Apache Spark. Oczekujemy również zaawansowanych umiejętności SQL i zorientowania na procesy ETL/ELT.

Competenze

• min. 3 lata doświadczenia jako Data Engineer lub w pokrewnej roli software engineeringowej.
• min. 1 rok doświadczenia z MS SQL Server, SSIS i SQL Server Agent, w tym wdrażanie nowych funkcjonalności.
• gotowość do wejścia w projekt zorientowany na Databricks na pewnym etapie współpracy.
• biegłość w Pythonie i umiejętność pisania czystego, testowalnego kodu produkcyjnego.
• hands-on doświadczenie z Apache Spark.
• zaawansowane umiejętności SQL (optymalizacja zapytań na dużych zbiorach danych).
• mocne rozumienie zasad projektowania hurtowni danych i modelowania danych.
• praktyczna znajomość procesów ETL/ELT

Conoscenze

Data engineering

Data modeling

Strumenti

MS SQL Server

SSIS

SQL Server Agent

Databricks

Python

Apache Spark

ETL/ELT

SQL

Descrizione del lavoro

XTB w Polsce poszukuje Data Engineera do zespołu Core Data Platform. Będziesz rozwijać skalowalne mechanizmy integracji danych, pracować nad spójną architekturą hurtowni danych i dbać o jakość danych w całej organizacji.

Wymagane minimum 3 lata doświadczenia w roli Data Engineer lub podobnej, znajomość MS SQL Server, SSIS i SQL Server Agent oraz praktyczna znajomość Databricks, Pythona i Apache Spark. Oczekujemy również zaawansowanych umiejętności SQL i zorientowania na procesy ETL/ELT.