Data Engineer (m/k)

AmRest Holdings SE; Poland; Remote; PLN 180,000 - 260,000; Full time

Benefits offered by this job

LuxMed

Multisport

Dofinansowanie kultury/kina

Ubezpieczenie na życie

Szkolenia zawodowe

Praca zdalna/hybrydowa (ewentualnie)

Job summary

Polenergia S.A. poszukuje Data Engineer w Warszawie, aby projektować i utrzymywać zaawansowane procesy przetwarzania danych w środowisku Azure.

Do obowiązków należą pipeline’y w Azure Data Factory, implementacja rozwiązań serverless, a także praca z Databricks i PySpark nad jakością danych. Wymagane są praktyczne umiejętności z Delta Lake, Unity Catalog i architekturą medallion, a także solidna znajomość SQL i Python.

Qualifications

• Doświadczenie jako Data Engineer min. 3 lata.
• Bardzo dobra praktyczna znajomość Databricks i architektury platformy.
• Znajomość Delta Lake, ACID i time travel oraz MERGE/upsert.
• Znajomość Unity Catalog, governance i lineage danych.
• Znajomość medallion architecture oraz architektur danych.
• Ogólna wiedza o data lake, data warehouse i lakehouse.
• Bardzo dobra znajomość SQL i języka Python (PySpark, Pandas, Polars).
• Doświadczenie z usługami Azure (Data Factory, Functions) i AI wspomaganiem kodu.

Responsibilities

• Projektowanie, implementacja i utrzymanie procesów ETL/ELT w Azure.
• Budowa i orkiestracja pipeline’ów danych z Azure Data Factory.
• Tworzenie rozwiązań serverless w Azure Functions.
• Praca na Databricks – PySpark do przetwarzania danych.
• Projektowanie rozwiązań z Delta Lake i medallion architecture.
• Zarządzanie danymi i uprawnieniami w Unity Catalog, governance i lineage.
• Tworzenie Data Products i zarządzanie ich cyklem życia.
• Pisanie i optymalizacja zapytań SQL oraz procesów przetwarzania danych.
• Dbałość o jakość, spójność i bezpieczeństwo danych.

Skills

SQL

Python

Angielski dobry

Tools

Databricks

Delta Lake

Unity Catalog

Azure Data Factory

Azure Functions

PySpark

Pandas

Polars

Job description

Zmieniamy świat na lepsze

Słyszałeś już o naszych farmach wiatrowych, fotowoltaicznych czy technologiach wodorowych? Być może sam korzystasz z naszych rozwiązań technologicznych lub stacji ładowania samochodów elektrycznych?

Jesteśmy największą polską prywatną grupą energetyczną – korzystamy z wiatru i słońca, tworząc całkowicie czyste, odnawialne źródła energii. Naszą misją jest tworzenie lepszego świata dla nas i przyszłych pokoleń. Chcemy być liderem tej zmiany w Polsce i w Europie.

Polenergia to wiarygodny i silny Pracodawca. Rozwijamy biznes w zgodzie z najlepszymi praktykami w obszarze ESG. Od 2005 roku jesteśmy notowani na Giełdzie Papierów Wartościowych w Warszawie.

Dołącz do nas i bądź częścią Zielonej Transformacji!

Tworzymy „zieloną” kulturę organizacyjną

Ekologię rozumiemy nie tylko jako dbanie o nasze środowisko, ale również budowanie sprzyjającej i efektywnej atmosfery pracy. Szanujemy wzajemnie swój czas, uwzględniamy dzielące nas różnice, jak również czerpiemy z tego, co nas łączy.

Na co dzień napędza nas biznes, ale jako zespół różnorodnych pracowników, angażujemy się także w działania edukacyjne i dobroczynne.

Miejsce pracy: Warszawa

Twój zakres obowiązków

• Projektowanie, implementacja i utrzymanie procesów ETL/ELT w środowisku Azure
• Budowa i orkiestracja pipeline’ów danych z wykorzystaniem Azure Data Factory
• Tworzenie rozwiązań serverless w oparciu o Azure Functions
• Samodzielna praca na platformie Databricks – przetwarzanie i transformacja danych (PySpark)
• Projektowanie i wdrażanie rozwiązań zgodnych z medallion architecture (warstwy bronze/silver/gold) z wykorzystaniem Delta Lake
• Zarządzanie danymi i uprawnieniami z wykorzystaniem Unity Catalog, w tym dbanie o governance i lineage danych
• Tworzenie i rozwój Data Products oraz zarządzanie ich cyklem życia
• Pisanie wydajnych zapytań SQL oraz optymalizacja procesów przetwarzania danych
• Dbanie o jakość, spójność i bezpieczeństwo danych w ramach budowanych rozwiązań

Nasze wymagania

• Doświadczenie w pracy jako Data Engineer (min. 3 lata)
• Bardzo dobra, praktyczna znajomość Databricks – rozumienie architektury platformy i umiejętność samodzielnej pracy
• Znajomość Delta Lake (formaty danych, ACID, time travel, operacje MERGE/upsert)
• Doświadczenie z Unity Catalog (zarządzanie danymi, uprawnieniami, governance)
• Rozumienie zasad data governance i lineage oraz kontroli dostępu do danych
• Znajomość i praktyczne zastosowanie medallion architecture
• Ogólna znajomość architektur danych (data lake, data warehouse, lakehouse)
• Bardzo dobra znajomość SQL
• Znajomość Pythona oraz bibliotek do przetwarzania danych: PySpark, Pandas, Polars
• Doświadczenie w pracy z usługami Azure, w szczególności Azure Data Factory i Azure Functions
• Umiejętność efektywnego wykorzystania narzędzi AI (np. GitHub Copilot, Databricks Assistant, ChatGPT/Claude) do wspomagania procesu wytwarzania kodu
• Dobra znajomość języka angielskiego
• Zatrudnienie w Polenergia S.A.
• Zaproponujemy Ci konkurencyjne wynagrodzenie na rynku i atrakcyjne warunki premii
• Zadbamy o Twoje Zdrowie - umożliwiając Tobie/Twojej rodzinie korzystanie z prywatnego pakietu medycznego LuxMed
• Urozmaicimy Twój Czas Wolny - spędzony na sportowo (karta Multisport) lub kulturalnie (dofinansowanie biletów do kina/teatru) albo wyjazdowo (dofinansowanie wypoczynku)
• Wzmocnimy Twoje poczucie Bezpieczeństwa- oferując Tobie i Twojej rodzinie preferencyjne warunki ubezpieczenia na życie
• Zainwestujemy w Twój Rozwój - organizując szkolenia, które pomogą Ci w pracy (m.in. językowe, specjalistyczne, rozwój umiejętności)
• Zadbamy o Twój Work-Life Balance - wprowadzając (tam, gdzie jest to możliwe) system pracy zdalnej lub hybrydowej oraz dogodne godziny pracy
• Zbudujemy Twoje poczucie Przynależności do firmy- organizując spotkania integracyjne i angażując Cię w życie naszej organizacji

Chcesz zmieniać świat na lepsze? Dołącz do nas!

Treść obowiązku informacyjnego dla kandydatów biorących udział w rekrutacji

1. Administratorem Pani/Pana danych osobowych jest:

Polenergia S.A. z siedzibą w Warszawie (00-526), przy ul. Kruczej 24/26, wpisana do rejestru przedsiębiorców Krajowego Rejestru Sądowego pod nr KRS: 0000026545, prowadzonego przez Sąd Rejonowy dla m. st. Warszawy w Warszawie, XII Wydział Gospodarczy KRS, o numerze NIP: 5261888932, o wysokości kapitału zakładowego 154 437826, 00 zł. Można się z nami skontaktować:

• listownie: ul. Krucza 24/26, 00-526 Warszawa,

2. Cel, podstawa i okres przetwarzania danych osobowych:

2.1. w przypadku gdy rekrutacja prowadzi do zawarcia umowy o pracę:

Podstawa prawna

Cel przetwarzania

Czas

art. 6 ust. 1 lit. b RODO – wykonanie umowy, której stroną jest osoba, której dane dotyczą lub czynności zmierzające go zawarcia umowy

art. 6 ust. 1 lit. c RODO – wykonanie obowiązku prawnego: dot. danych osobowych wskazanych w art. 22 1 § 1 Kodeksu pracy

art. 6 ust. 1 lit. a RODO – zgoda: dotyczy danych osobowych przekazanych dobrowolnie przez kandydata wykraczających poza zakres wskazany w art. 22 1 § 1 Kodeksu pracy

obsługa zgłoszenia rekrutacyjnego na stanowisko pracy (pozyskanie i selekcja podań o pracę, kontakt celem umówienia rozmowy kwalifikacyjnej, przeprowadzenie rozmów kwalifikacyjnych, weryfikacja i ocena wiedzy oraz umiejętności kandydata).

przez czas niezbędny do prowadzenia rekrutacji, w tym do czasu jej zakończenia.

art. 6 ust. 1 lit. f RODO – prawnie uzasadniony interes

a. przeprowadzenie oceny kandydata która jest niezbędna do ustalenia czy kandydat jest właściwą osobą na stanowisko objęte rekrutacją;

b. zapewnienie bezpieczeństwa

czas niezbędny do realizacji prawnie uzasadnionego interesu Administratora, nie dłużej jednak niż do momentu wyrażenia sprzeciwu co do przetwarzania danych osobowych.

art. 6 ust. 1 lit. f RODO – prawnie uzasadniony interes

ustalenie, dochodzenie oraz obrona przed ewentualnymi roszczeniami

do 3 lat od chwili zakończenia postępowania rekrutacyjnego.

art. 6 ust. 1 lit. a RODO – zgoda

przyszłe rekrutacje prowadzone przez Administratora.

nie dłużej niż przez okres 12 miesięcy od momentu wyrażenia zgody, bądź do czasu jej cofnięcia.

2.2.w przypadku gdy rekrutacja prowadzi do zawarcia umowy innej, niż umowa o pracę:

Podstawa prawna

Cel przetwarzania

Czas

art. 6 ust. 1 lit. b RODO – wykonanie umowy, której stroną jest osoba, której dane dotyczą lub czynności zmierzające go zawarcia umowy

obsługa zgłoszenia rekrutacyjnego na otwarte stanowisko (pozyskanie i selekcja aplikacji, kontakt celem umówienia rozmowy kwalifikacyjnej, przeprowadzenie rozmów kwalifikacyjnych, weryfikacja i ocena wiedzy oraz umiejętności kandydata).

przez czas niezbędny do prowadzenia rekrutacji, w tym do czasu jej zakończenia.

art. 6 ust. 1 lit. f RODO – prawnie uzasadniony interes

a. przeprowadzenie oceny kandyda…

b. zapewnienie bezpieczeństwa

czas niezbędny do realizacji prawnie uzasadnionego interesu Administratora, nie dłużej jednak niż do momentu wyrażenia sprzeciwu co do przetwarzania danych osobowych.

art. 6 ust. 1 lit. f RODO – prawnie uzasadniony interes

ustalenie, dochodzenie oraz obrona przed roszczeniami

do 3 lat od chwili zakończenia postępowania rekrutacyjnego.

art. 6 ust. 1 lit. a RODO – zgoda

przyszłe rekrutacje prowadzone przez Administratora.

nie dłużej niż przez okres 12 miesięcy od momentu wyrażenia zgody, bądź do czasu jej cofnięcia.

3. Zautomatyzowane przetwarzanie

Nie będzie Pani/Pan podlegać decyzji, która opiera się wyłącznie na zautomatyzowanym przetwarzaniu, w tym profilowaniu, i wywołuje wobec Pani/Pana skutki prawne lub w podobny sposób istotnie na nie wpływa.

4. Podanie danych przez kandydata

• gdy rekrutacja prowadzi do zawarcia umowy o pracę - w zakresie określonym w art. 22 1 1 i 2 Kodeksu pracy, jest obowiązkiem ustawowym, a konsekwencją ich niepodania będzie niemożność wzięcia udziału w rekrutacji. W pozostałym zakresie podanie danych jest dobrowolne;
• gdy rekrutacja prowadzi do zawarcia umowy innej, niż umowa o pracę - jest dobrowolne jednak konsekwencją ich niepodania będzie niemożność wzięcia udziału w rekrutacji.

5. Pośrednie pozyskanie danych

Jeżeli Pani/Pana dane osobowe zostały pozyskane od osoby polecającej kandydata, wówczas Administrator informuje, że pozyskał następujące kategorie danych osobowych: identyfikacyjne, kontaktowe, dotyczące wykształcenia, kwalifikacji zawodowych oraz umiejętności kandydata.

6. Odbiorcy danych osobowych

• dostawca aplikacji do prowadzenia rekrutacji,
• agencje headhunterskie/rekrutacyjne,
• uczelnie wyższe (w zakresie rekrutacji praktykantów),
• podmioty świadczące usługi prawne,
• podmioty dostarczające oprogramowanie i narzędzia wykorzystywane przez Administratora,
• podmioty świadczące usługi informatyczne i hostingowe,
• podmiot dostarczający pocztę elektroniczną,
• media społecznościowe (np. LinkedIn).

7. Transfery danych osobowych

Z uwagi na korzystanie z narzędzi dostarczanych przez Microsoft Corporation dochodzi do przetwarzania danych osobowych poza strefą Europejskiego Obszaru Gospodarczego (EOG), w tym do Stanów Zjednoczonych. Jeżeli przekazanie Twoich danych osobowych będzie konieczne, wówczas nastąpi to na podstawie decyzji Komisji Europejskiej z dnia 10.07.2023 r. wydanej na podstawie rozporządzenia Parlamentu Europejskiego i Rady (UE), stwierdzającej odpowiedni stopień ochrony danych osobowych zapewniony w ramach ochrony danych UE-USA.

8. W związku z przetwarzaniem danych osobowych Pani/Panu przysługują następujące prawa:

• dostępu do danych, ich poprawiania, żądania ich usunięcia, a także prawo ograniczenia przetwarzania danych osobowych oraz ich przenoszenia;
• w zakresie, w jakim dane przetwarzane są na podstawie odrębnej zgody – prawo jej wycofania w dowolnym momencie, cofnięcie zgody pozostanie jednak bez wpływu na zgodność z prawem przetwarzania, które miało miejsce przed jej wycofaniem;
• wniesienia sprzeciwu co do przetwarzania danych osobowych;
• wniesienia skargi do organu nadzorczego, którym w Polsce jest Prezes Urzędu Ochrony Danych Osobowych, jeżeli dane są przetwarzane niezgodnie zwymogami prawnymi.