Azure Data Engineer: PySpark & Databricks Pipelines

Astek; Kraków; Hybrid; PLN 176,000 - 230,000; Full time

Benefits offered by this job

Długoterminowa współpraca

Szkolenia techniczne i certyfikaty

Mentoring Competence Center

Jasna ścieżka kariery

Pakiet benefitów (Multisport, prywatna

Job summary

Astek w Krakowie szuka DataEngineera specjalizującego się w Azure Databricks i PySpark. Do obowiązków należy budowa i utrzymanie data pipelines oraz przetwarzanie danych na potrzeby analiz biznesowych. Wymagana jest silna znajomość Pythona, SQL i pracy w Agile.

Praca w modelu hybrydowym; 3 dni w biurze, 2 dni zdalnie. Wynagrodzenie do 1100 PLN netto za dzień, zależne od doświadczenia. Szukamy osoby z doświadczeniem w obszarze danych i współpracy z biznesem, gotowej do długoterminowej współpracy.

Qualifications

• Minimum 4 lata doświadczenia jako Data Engineer.
• Bardzo dobra znajomość Python.
• Praktyczne doświadczenie z PySpark.
• Doświadczenie z Azure.
• Znajomość Azure Databricks.
• Bardzo dobra znajomość SQL.
• Doświadczenie w budowaniu i utrzymywaniu data pipelines.
• Doświadczenie w transformacji i przetwarzaniu danych.
• Znajomość Linux / Shell scripting.
• Doświadczenie z Git / GitLab.
• Znajomość CI/CD oraz DevOps.
• Doświadczenie w pracy w Scrum/Agile.
• Współpraca z użytkownikami biznesowymi.
• Bardzo dobra znajomość języka angielskiego.

Responsibilities

• Przekształcać dane w wartościowe wnioski wspierające decyzje biznesowe.
• Pracować nad platformami danych i stosować techniki analityczne.
• Tworzyć i utrzymywać potoki danych dla pozyskiwania, przetwarzania i dystrybucji danych.
• Dbać o jakość, bezpieczeństwo i zgodność rozwiązań z przepisami.
• Wdrażać mechanizmy obserwowalności i monitorować środowisko produkcyjne.
• Wspierać klientów biznesowych i reagować na incydenty.

Skills

Python

PySpark

Azure

SQL

Data pipelines

Data transformation

Linux

Git

GitLab

CI/CD

Scrum/Agile

English

Tools

Azure Databricks

Job description

Astek w Krakowie szuka DataEngineera specjalizującego się w Azure Databricks i PySpark. Do obowiązków należy budowa i utrzymanie data pipelines oraz przetwarzanie danych na potrzeby analiz biznesowych. Wymagana jest silna znajomość Pythona, SQL i pracy w Agile.

Praca w modelu hybrydowym; 3 dni w biurze, 2 dni zdalnie. Wynagrodzenie do 1100 PLN netto za dzień, zależne od doświadczenia. Szukamy osoby z doświadczeniem w obszarze danych i współpracy z biznesem, gotowej do długoterminowej współpracy.