Data Platform Engineer

AgileEngine; Warszawa, Kraków, Poznań; On-site; PLN 180,000 - 240,000; Full time

Job summary

AgileEngine w Warszawie poszukuje Data Platform Engineera do budowy skalowalnych pipeline'ów ETL/ELT na Databricks i GCP oraz uruchamiania agentowych workflow.

Wymagane 5+ lat doświadczenia z Databricks i PySpark, zaawansowany SQL, doświadczenie z BigQuery i Delta Lake, a także angielski na poziomie upper-intermediate.

Dołączysz do zespołu inżynierów danych, aby rozwijać platformę i wspierać nowoczesne architektury data lake/lakehouse.

Qualifications

• 5+ lat praktycznego doświadczenia z Databricks i PySpark.
• Zaawansowany SQL i umiejętność przetwarzania dużych zbiorów danych.
• Doświadczenie z GCP, w szczególności BigQuery; Delta Lake.
• Znajomość języka angielskiego na poziomie upper-intermediate.

Responsibilities

• Budowa skalowalnych pipeline'ów ETL/ELT na Databricks i GCP.
• Produkcjonowanie agentowych workflow do automatyzacji inżynierii danych.

Skills

Advanced SQL

PySpark

Data processing

English (Upper-Intermediate)

Tools

Databricks

GCP (BigQuery)

Delta Lake

Job description

Stanowisko Data Platform Engineera przy budowie skalowalnych pipeline'ów ETL/ELT na Databricks i GCP oraz produkcjonowaniu agentowych workflow do automatyzacji inżynierii danych. W praktyce: PySpark, SQL, BigQuery, Delta Lake, budowa reużywalnych komponentów, kontrola jakości danych i optymalizacja wydajności. 5+ lat praktycznego doświadczenia z Databricks i PySpark; zaawansowany SQL i umiejętność przetwarzania danych; praktyczne doświadczenie z GCP, w szczególności z BigQuery; doświadczenie z Delta Lake i nowoczesnymi architekturami data lake/lakehouse; znajomość języka angielskiego na poziomie upper-intermediate

Uwaga: ogłoszenie urywa się w połowie zdania ('along with an upp...') — pełny opis wymagań jest niekompletny, warto dopytać o szczegóły. Dla inżyniera danych, który chce rozwijać się w kierunku platformowym i AI.