Remote Data Platform Engineer — Apache Druid & Big Data

RITS Center

Warszawa

Remote

PLN 199,000 - 283,000

Full time

14 days+

A complete application in a minute

Tailored resume and cover letter, ready to send.

Get past ATS filters

Job summary

RITS Group poszukuje Data Platform Engineera ze znajomością Apache Druid do pracy zdalnej na modelu B2B. Projekt obejmuje rozwój i utrzymanie pipeline’ów danych, integrację z zewnętrznymi systemami lookup i przetwarzanie strumieniowe z Flinkiem. Ścisła współpraca z architektami danych i zespołem ds.

platformy danych zapewni skalowalność i bezpieczeństwo środowiska. Wymagane doświadczenie z Druid, Kafka, Flink oraz MySQL, AWS i RBAC.

Qualifications

  • Praktyczne doświadczenie z Apache Druid, w szczególności ingestii danych i tworzenia rozszerzeń.
  • Doświadczenie w budowaniu i utrzymywaniu pipeline'ów danych z Apache Kafka.
  • Znajomość Apache Flink lub podobnych technologii do przetwarzania strumieniowego.
  • Bardzo dobra znajomość MySQL, w tym optymalizacji zapytań i wydajności baz danych przy dużych wolumenach danych.
  • Doświadczenie w implementacji mechanizmów wzbogacania metadanych w platformach danych.
  • Doświadczenie w integracji i utrzymaniu rozwiązań RBAC w różnych systemach przechowywania danych.
  • Praktyczna znajomość AWS, szczególnie S3, Aurora i IAM.
  • Umiejętność rozwiązywania złożonych problemów inżynierskich oraz współpracy z zespołem.

Responsibilities

  • Rozwój i utrzymanie pipeline'ów ingestii danych w Apache Druid oraz tworzenie własnych rozszerzeń (extensions).
  • Integracja Apache Druid z zewnętrznymi systemami lookup.
  • Budowanie i utrzymywanie pipeline'ów danych opartych na Apache Kafka.
  • Udział w rozwoju przetwarzania strumieniowego z wykorzystaniem Apache Flink.
  • Implementacja procesów pre-agregacji i wzbogacania danych.
  • Optymalizacja zapytań MySQL oraz poprawa wydajności baz danych w środowiskach o dużej skali.
  • Projektowanie mechanizmów wzbogacania metadanych w różnych systemach przechowywania danych.
  • Integracja i utrzymanie mechanizmów kontroli dostępu RBAC.
  • Praca z usługami AWS, w szczególności S3, Aurora i IAM.
  • Współpraca z zespołami rozwijającymi platformę danych oraz architekturę Lakehouse.

Skills

Rozwiązywanie złożonych problemów inż̇

Tools

Apache Druid
Apache Kafka
Apache Flink
MySQL
AWS
RBAC

Job description

RITS Group poszukuje Data Platform Engineera ze znajomością Apache Druid do pracy zdalnej na modelu B2B. Projekt obejmuje rozwój i utrzymanie pipeline’ów danych, integrację z zewnętrznymi systemami lookup i przetwarzanie strumieniowe z Flinkiem. Ścisła współpraca z architektami danych i zespołem ds.

platformy danych zapewni skalowalność i bezpieczeństwo środowiska. Wymagane doświadczenie z Druid, Kafka, Flink oraz MySQL, AWS i RBAC.

Get your free, confidential resume review.

or drag and drop your file here.

Similar jobs

Similar jobs worth comparing

Data Platform Engineer (Apache Druid)
Data Platform Engineer (Apache Druid)

RITS Center • Warszawa

Remote
PLN 199,000 - 283,000
Data Platform Engineer (Apache Druid)
Data Platform Engineer (Apache Druid)

RITS • Województwo mazowieckie

Remote
PLN 199,000 - 283,000
Data Platform Engineer (Apache Druid) [M/F]
Data Platform Engineer (Apache Druid) [M/F]

Arche Solutions • Polska

Hybrid
PLN 180,000 - 300,000
Senior Data Platform Engineer (Druid, Kafka, AWS)
Senior Data Platform Engineer (Druid, Kafka, AWS)

Arche Solutions • Polska

Hybrid
PLN 180,000 - 300,000
Senior Data Engineer - AWS Data Platform (Remote)
Senior Data Engineer - AWS Data Platform (Remote)

RITS • Województwo mazowieckie

Remote
PLN 193,000 - 227,000
Data Engineer (with Snowflake & Airflow)
Data Engineer (with Snowflake & Airflow)

TQLO SP. Z O.O. • Województwo mazowieckie

Remote
PLN 180,000 - 240,000
Data Engineer (AWS)
Data Engineer (AWS)

RITS • Województwo mazowieckie

Remote
PLN 193,000 - 227,000
Data Platform Analyst (Kafka) — Remote, Long-Term B2B
Data Platform Analyst (Kafka) — Remote, Long-Term B2B

ITLT • Wrocław

Hybrid
PLN 179,000 - 220,000
Karta MultiSport
Remote Senior Data Engineer: Kafka, Python & Confluent Cloud
Remote Senior Data Engineer: Kafka, Python & Confluent Cloud

1dea • Województwo mazowieckie

Remote
PLN 193,000 - 214,000
Staff Data Engineer — Remote, High-Perf Data Platform
Staff Data Engineer — Remote, High-Perf Data Platform

Next Technology Professionals • Wrocław, Warszawa, Kraków

Remote
PLN 260,000 - 380,000
Umowa B2B
Elastyczna współpraca
Duża autonomia
+1
Top locations