Remote Senior Data Engineer: Kafka, Python & Confluent Cloud

1dea; Województwo mazowieckie; Remote; PLN 193,000 - 214,000; Full time

Job summary

1dea poszukuje doświadczonego Data Engineera do pracy nad przetwarzaniem danych w czasie rzeczywistym oraz architekturą opartą na zdarzeniach. Praca 100% zdalnie w modelu B2B (outsourcing) z możliwością długoterminowej współpracy.

Zakres obowiązków obejmuje projektowanie i utrzymanie strumieniowych rurociągów danych na Apache Kafka i Confluent Cloud, integrację źródeł danych oraz tworzenie kodu Python i zapytań SQL. Mile widziane doświadczenie z CDC, GCP i MongoDB.

Qualifications

• Confluent Cloud – mile widziany certyfikat, ale nie warunek konieczny.
• Kafka – praktyczna znajomość i doświadczenie komercyjne.
• Bardzo dobra znajomość Pythona.
• Bardzo dobra znajomość SQL.
• Angielski na poziomie swobodnej komunikacji (B2+).

Responsibilities

• Projektowanie, wdrażanie i utrzymanie strumieniowych rurociągów danych (Kafka) i Confluent Cloud.
• Integracja rozproszonych systemów i źródeł danych w podejściu Event-driven Architecture.
• Tworzenie i optymalizacja kodu Python oraz zapytań SQL.
• Konfiguracja CDC Tools i monitorowanie zmian w bazach danych.
• Współpraca przy integracji chmury (GCP) oraz MongoDB.

Skills

Python

SQL

Kafka

Confluent Cloud

English (B2+)

Tools

MongoDB

GCP

CDC Tools

Job description

1dea poszukuje doświadczonego Data Engineera do pracy nad przetwarzaniem danych w czasie rzeczywistym oraz architekturą opartą na zdarzeniach. Praca 100% zdalnie w modelu B2B (outsourcing) z możliwością długoterminowej współpracy.

Zakres obowiązków obejmuje projektowanie i utrzymanie strumieniowych rurociągów danych na Apache Kafka i Confluent Cloud, integrację źródeł danych oraz tworzenie kodu Python i zapytań SQL. Mile widziane doświadczenie z CDC, GCP i MongoDB.