Lead Data Engineer: Cloud Pipelines + Airflow & Databricks

Scalosoft; Kraków; Hybrid; PLN 193,000 - 289,000; Full time

Benefits offered by this job

Pełna opieka medyczna

Karta MultiSport

Program poleceń

Job summary

Scaloft w Krakowie poszukuje specjalisty Data Engineer do projektowania i utrzymania platform przetwarzania danych w chmurze. Do obowiązków należeć będzie tworzenie pipeline’ów (batch i streaming) oraz integracja danych z różnych źródeł.

Wymagana praktyczna znajomość SQL i jednego z języków Python/Scala, a także doświadczenie z chmurami AWS/GCP/Azure i Apache Airflow. B2+ angielski jest niezbędny, stawka 170 zł/h na B2B zależnie od doświadczenia.

Qualifications

• Wymagane doświadczenie na stanowisku Data Engineer.
• Praktyczna znajomość chmur publicznych (AWS/GCP/Azure).
• Doświadczenie z Apache Airflow i Databricks.

Responsibilities

• Projektowanie i rozwój pipeline’ów danych (batch i streaming).
• Integracja danych z różnych źródeł (systemy, API, hurtownie).
• Optymalizacja ETL/ELT pod kątem wydajności i skalowalności.

Skills

Data Engineering

AWS

GCP

Azure

Apache Airflow

Databricks

SQL

Python

Scala

Tools

Apache Airflow

Databricks

Spark

Job description

Scaloft w Krakowie poszukuje specjalisty Data Engineer do projektowania i utrzymania platform przetwarzania danych w chmurze. Do obowiązków należeć będzie tworzenie pipeline’ów (batch i streaming) oraz integracja danych z różnych źródeł.

Wymagana praktyczna znajomość SQL i jednego z języków Python/Scala, a także doświadczenie z chmurami AWS/GCP/Azure i Apache Airflow. B2+ angielski jest niezbędny, stawka 170 zł/h na B2B zależnie od doświadczenia.