Cloud Data Engineer (f/m/x)

Sii Polska; Polska; Remote; PLN 180,000 - 300,000; Full time

Job summary

Sii Polska poszukuje specjalisty ds. danych z co najmniej 4 latami doświadczenia w przetwarzaniu i integracji dużych wolumenów danych. Wymagane są umiejętności SQL, Python oraz znajomość Apache Spark / PySpark.

Doświadczenie z Data Lake/Data Warehouse i ETL/ELT w chmurze Azure jest kluczowe. Wymagana swobodna komunikacja po angielsku i biegła znajomość polskiego. Praca na terenie Polski w środowisku korporacyjnym, z możliwością pracy w projektach migracyjnych do chmury i optymalizacji

Qualifications

• Minimum 4 lata doświadczenia w projektach przetwarzania i integracji dużych wolumenów danych.
• Bardzo dobra znajomość SQL oraz Python
• Doświadczenie z Apache Spark / PySpark
• Projektowanie i budowa Data Lake oraz Data Warehouse
• Budowa i utrzymanie pipeline'ów ETL/ELT oraz narzędzi orkiestracji danych
• Doświadczenie z chmurowymi rozwiązaniami Microsoft Azure (Databricks, ADF, Synapse, Fabric)
• Znajomość przetwarzania danych w środowisku rozproszonym i optymalizacja pipeline'ów
• Komunikacja po angielsku
• Płynna znajomość języka polskiego
• Przebywanie na terenie Polski

Skills

SQL

Python

Data pipeline design

Data Lake / Data Warehouse

ETL/ELT pipelines

Distributed data processing

English communication

Polish language

Tools

Apache Spark

PySpark

Azure Databricks

Azure Data Factory

Synapse

Fabric

Job description

Wymagania:

• - Minimum 4 lata doświadczenia w projektach związanych z przetwarzaniem i integracją dużych wolumenów danych
• - Bardzo dobra znajomość SQL oraz Python
• - Doświadczenie w pracy z frameworkami do przetwarzania danych takimi jak Apache Spark / PySpark
• - Praktyczne doświadczenie w projektowaniu i budowie rozwiązań Data Lake oraz Data Warehouse
• - Umiejętność budowania i utrzymywania pipeline'ów ETL/ELT oraz pracy z narzędziami do orkiestracji i integracji danych
• - Komercyjne doświadczenie w projektach opartych o rozwiązania chmurowe Microsoft Azure w obszarze przetwarzania danych (np. Databricks, Azure Data Factory, Synapse, Fabric)
• - Znajomość koncepcji przetwarzania danych w środowisku rozproszonym oraz optymalizacji pipeline'ów danych
• - Umiejętność swobodnej komunikacji w języku angielskim
• - Wymagana płynna znajomość języka polskiego
• - Wymagane przebywanie na terenie Polski

Nice-to-have requirements

• - Doświadczenie w projektach związanych z migracją danych z on-premise do chmury (bazy danych: Oracle, PostgreSQL, MS SQL)