Senior Data Engineer - Remote (Kafka, Spark, Lakehouse)

Scalo; Remote; PLN 120,000 - 180,000; Full time

Job summary

Dynamiczna firma technologiczna poszukuje Senior Data Engineer w Łodzi. Osoba na tym stanowisku będzie odpowiedzialna za projektowanie i implementację pipeline'ów danych, pracę z architekturą data lakehouse oraz CI/CD. Wymagane jest solidne doświadczenie w Apache Kafka, Spark oraz Pythonie. Oferujemy długofalową współpracę w zróżnicowanych projektach oraz kafeteryjny system benefitów. Możliwe również szkolenia w Center of Excellence.

Benefits

Długofalowa współpraca

Możliwość rozwoju kompetencji

Prywatna opieka medyczna – Luxmed

Kafeteryjny system benefitów – Motivizer

Qualifications

• Doświadczenie w projektowaniu i implementacji pipeline’ów danych opartych o Apache Kafka i Spark.
• Solidne doświadczenie w pracy z architekturą data lakehouse (Apache Iceberg, Nessie, MinIO).
• Praktyczne doświadczenie w budowie i utrzymaniu CI/CD.

Responsibilities

• Dostarczanie rozwiązań w obszarze danych bazujących na nowoczesnych technologiach.
• Praca z procesami ETL dla dużych wolumenów danych.
• Współpraca w środowisku cross-funkcyjnym.

Skills

Projektowanie pipeline'ów danych

Apache Kafka

Apache Spark

Python

PySpark

Architektura data lakehouse

ETL dla dużych wolumenów danych

CI/CD

Diagnostyka systemów rozproszonych

Komunikacja w języku angielskim

Tools

Metabase

FastAPI

Dremio

Job description

Dynamiczna firma technologiczna poszukuje Senior Data Engineer w Łodzi. Osoba na tym stanowisku będzie odpowiedzialna za projektowanie i implementację pipeline'ów danych, pracę z architekturą data lakehouse oraz CI/CD. Wymagane jest solidne doświadczenie w Apache Kafka, Spark oraz Pythonie. Oferujemy długofalową współpracę w zróżnicowanych projektach oraz kafeteryjny system benefitów. Możliwe również szkolenia w Center of Excellence.