Senior Data Platform Engineer (Druid, Kafka, AWS)

Arche Solutions

Polska

Hybrid

PLN 180,000 - 300,000

Full time

14 days+

A complete application in a minute

Tailored resume and cover letter, ready to send.

Get past ATS filters

Job summary

Arche Solutions poszukuje specjalisty ds. inżynierii danych.

Do obowiązków należeć będzie rozwój i utrzymanie procesów ingestii danych w Apache Druid, budowa pipeline’ów opartych na Kafka oraz implementacja przetwarzania strumieniowego z użyciem Flinka lub podobnych technologii. Wymagane jest doświadczenie w wzbogacaniu danych, optymalizacji zapytań MySQL i integracji mechanizmów RBAC w środowiskach wieloźródłowych.

Qualifications

  • Minimum 5 lat doświadczenia na podobnym stanowisku.
  • Praktyczne doświadczenie z ingestem danych w Apache Druid i tworzeniem rozszerzeń.

Responsibilities

  • Rozwój i utrzymanie procesów ingestii danych w Apache Druid oraz tworzenie extensions.
  • Projektowanie i utrzymanie pipeline’ów danych opartych na Apache Kafka.
  • Rozwój rozwiązań do przetwarzania danych strumieniowych (Flink lub podobne technologie).
  • Implementacja mechanizmów wzbogacania danych (data enrichment).
  • Optymalizacja zapytań MySQL oraz poprawa wydajności baz danych w dużej skali.
  • Projektowanie i wdrażanie mechanizmów RBAC i integracja z AWS (S3, Aurora, IAM).
  • Współpraca z zespołami ds. platformy danych i architektury lakehouse.

Skills

Inżynieria danych
Współpraca zespołowa
Analityczne myślenie

Tools

Apache Druid
Apache Kafka
Apache Flink
MySQL
AWS

Job description

Arche Solutions poszukuje specjalisty ds. inżynierii danych.

Do obowiązków należeć będzie rozwój i utrzymanie procesów ingestii danych w Apache Druid, budowa pipeline’ów opartych na Kafka oraz implementacja przetwarzania strumieniowego z użyciem Flinka lub podobnych technologii. Wymagane jest doświadczenie w wzbogacaniu danych, optymalizacji zapytań MySQL i integracji mechanizmów RBAC w środowiskach wieloźródłowych.

Get your free, confidential resume review.

or drag and drop your file here.

Similar jobs

Similar jobs worth comparing

Data Platform Engineer (Apache Druid) [M/F]
Data Platform Engineer (Apache Druid) [M/F]

Arche Solutions • Polska

Hybrid
PLN 180,000 - 300,000
Remote Data Platform Engineer — Apache Druid & Big Data
Remote Data Platform Engineer — Apache Druid & Big Data

RITS Center • Warszawa

Remote
PLN 199,000 - 283,000
Data Platform Engineer (Apache Druid)
Data Platform Engineer (Apache Druid)

RITS • Województwo mazowieckie

Remote
PLN 199,000 - 283,000
Data Platform Engineer (Apache Druid)
Data Platform Engineer (Apache Druid)

RITS Center • Warszawa

Remote
PLN 199,000 - 283,000
Senior Data Engineer Kafka / Spark (k/m), branża bankowa
Senior Data Engineer Kafka / Spark (k/m), branża bankowa

Ideamotive • Warszawa

On-site
PLN 180,000 - 270,000
Data Platform Developer (k/m/x)
Data Platform Developer (k/m/x)

B2Bnetwork • Wrocław

On-site
PLN 201,000 - 312,000
Senior Data Platform Developer (Kafka) (m/k/n)
Senior Data Platform Developer (Kafka) (m/k/n)

UPVANTA SPÓŁKA Z OGRANICZONĄ ODPOWIEDZIALNOŚCIĄ • Wrocław

On-site
PLN 140,000 - 190,000
Data Engineer (Kafka / Confluent Cloud)
Data Engineer (Kafka / Confluent Cloud)

Upvanta • Polska

Hybrid
PLN 120,000 - 190,000
Senior Data Engineer: Spark/Databricks, Kafka, Azure
Senior Data Engineer: Spark/Databricks, Kafka, Azure

Solid Company • Wrocław

Hybrid
PLN 180,000 - 240,000
Remote Senior Data Engineer: Kafka, Python & Confluent Cloud
Remote Senior Data Engineer: Kafka, Python & Confluent Cloud

1dea • Województwo mazowieckie

Remote
PLN 193,000 - 214,000
Top locations