Data Engineer (m/k)

Polenergia; Warszawa; Hybrid; PLN 180,000 - 300,000; Full time

Benefits offered by this job

LuxMed prywatna opieka medyczna

Karta Multisport

Dofinansowanie kulturalne/wyjścia doTe

Ubezpieczenie na życie

Szkolenia i rozwój

Job summary

Polenergia S.A. poszukuje doświadczonego Data Engineera do pracy nad zaawansowanymi projektami danych. Będziesz projektować i utrzymywać ETL/ELT w Azure, budować pipeline’y w Data Factory i przetwarzać dane na Databricks za pomocą PySpark.

Wymagana jest praktyczna znajomość Delta Lake, Unity Catalog, medallion architecture oraz SQL i Pythona. Oferujemy pracę hybrydową, atrakcyjne wynagrodzenie i możliwości rozwoju.

Qualifications

• Minimum 3 years experience as Data Engineer.
• Praktyczna znajomość Databricks i architektury platformy.
• Znajomość Delta Lake, ACID i time travel.
• Znajomość Unity Catalog, governance i lineage danych.
• Znajomość medallion architecture oraz architektur danych (data lake/wlakehouse).
• Dobra znajomość SQL; Python (PySpark, Pandas).
• Znajomość usług Azure (Data Factory, Functions).
• Umiejętność wykorzystania AI w tworzeniu kodu (GitHub Copilot, Databricks Assistant).
• Dobra znajomość języka angielskiego.

Responsibilities

• Projektowanie, implementacja i utrzymanie procesów ETL/ELT w Azure.
• Budowa i orkiestracja pipeline’ów danych z Azure Data Factory.
• Tworzenie rozwiązań serverless w Azure Functions.
• Przetwarzanie danych w Databricks – PySpark.
• Projektowanie i wdrażanie medallion architecture z Delta Lake.
• Zarządzanie danymi i uprawnieniami z Unity Catalog; governance i lineage.
• Tworzenie Data Products i ich cykl życia; optymalizacja zapytań SQL.

Skills

Databricks

Azure Data Factory

PySpark

SQL

Python

Delta Lake

Unity Catalog

Medallion architecture

Data governance

Data lake / lakehouse

Data products

AI tools in coding

Tools

Databricks

Azure Data Factory

Azure Functions

Delta Lake

Job description

Każda, nawet największa podróż zaczyna się od jednej decyzji, a potem pierwszego kroku. Taką podróżą jest twoja kariera, która daje sens i przestrzeń do rozwoju.

Być może znasz nasze farmy wiatrowe na Morzu Bałtyckim? Może rzuciły Ci się w oczy nasze inwestycje fotowoltaiczne i wiatrowe w całej Polsce? A może zainteresowana Cię jedna z wielu innych inwestycji, które realizujemy w kraju i poza nim?

To właśnie my – Polenergia – w ciągu ostatnich lat wyruszyliśmy w niesamowitą podróż od niewielkiej spółki z wielkimi marzeniami do największej polskiej prywatnej grupy energetycznej.

Jesteśmy obecni na lądzie i na morzu, pozyskujemy energię z wiatru i ze słońca, a nasze inwestycje można znaleźć w każdym zakątku Polski.

Ty też możesz wziąć udział w tej podróży - zapraszamy do naszego Zespołu!

Do naszego zespołu IT poszukujemy osoby na stanowisko Data Engineer. Jeśli masz praktycznie doświadczenie w pracy z Databricks, a środowisko Azure nie ma przed Tobą tajemnic, to jest to idealna rola dla Ciebie!

Co Cię czeka podczas naszej wspólnej drogi?

• Projektowanie, implementacja i utrzymanie procesów ETL/ELT w środowisku Azure
• Budowa i orkiestracja pipeline’ów danych z wykorzystaniem Azure Data Factory
• Tworzenie rozwiązań serverless w oparciu o Azure Functions
• Samodzielna praca na platformie Databricks – przetwarzanie i transformacja danych (PySpark)
• Projektowanie i wdrażanie rozwiązań zgodnych z medallion architecture (warstwy bronze/silver/gold) z wykorzystaniem Delta Lake
• Zarządzanie danymi i uprawnieniami z wykorzystaniem Unity Catalog, w tym dbanie o governance i lineage danych
• Tworzenie i rozwój Data Products oraz zarządzanie ich cyklem życia
• Pisanie wydajnych zapytań SQL oraz optymalizacja procesów przetwarzania danych
• Dbanie o jakość, spójność i bezpieczeństwo danych w ramach budowanych rozwiązań

Co przyda Ci się w drodze do celu?

• Doświadczenie w pracy jako Data Engineer (min. 3 lata)
• Bardzo dobra, praktyczna znajomość Databricks – rozumienie architektury platformy i umiejętność samodzielnej pracy
• Znajomość Delta Lake (formaty danych, ACID, time travel, operacje MERGE/upsert)
• Doświadczenie z Unity Catalog (zarządzanie danymi, uprawnieniami, governance)
• Rozumienie zasad data governance i lineage oraz kontroli dostępu do danych
• Znajomość i praktyczne zastosowanie medallion architecture
• Ogólna znajomość architektur danych (data lake, data warehouse, lakehouse)
• Bardzo dobra znajomość SQL
• Znajomość Pythona oraz bibliotek do przetwarzania danych: PySpark, Pandas, Polars
• Doświadczenie w pracy z usługami Azure, w szczególności Azure Data Factory i Azure Functions
• Umiejętność efektywnego wykorzystania narzędzi AI (np. GitHub Copilot, Databricks Assistant, ChatGPT/Claude) do wspomagania procesu wytwarzania kodu
• Dobra znajomość języka angielskiego

Co zapewnimy Ci podczas tej podróży?

• Zatrudnienie w Polenergia S.A.
• Zaproponujemy Ci konkurencyjne wynagrodzenie na rynku i atrakcyjne warunki premii
• Zadbamy o Twoje Zdrowie - umożliwiając Tobie/Twojej rodzinie korzystanie z prywatnego pakietu medycznego LuxMed
• Urozmaicimy Twój Czas Wolny - spędzony na sportowo (karta Multisport) lub kulturalnie (dofinansowanie biletów do kina/teatru) albo wyjazdowo (dofinansowanie wypoczynku)
• Wzmocnimy Twoje poczucie Bezpieczeństwa- oferując Tobie i Twojej rodzinie preferencyjne warunki ubezpieczenia na życie
• Zainwestujemy w Twój Rozwój - organizując szkolenia, które pomogą Ci w pracy (m.in. językowe, specjalistyczne, rozwój umiejętności)
• Zadbamy o Twój Work-Life Balance - wprowadzając (tam, gdzie jest to możliwe) system pracy zdalnej lub hybrydowej oraz dogodne godziny pracy
• Zbudujemy Twoje poczucie Przynależności do firmy- organizując spotkania integracyjne i angażując Cię w życie naszej organizacji