Senior Data Engineer

emagine; Warszawa; Hybrid; PLN 200,000 - 255,000; Part time

Job summary

emagine poszukuje specjalisty do projektowania i rozwoju wysokowydajnych platform danych dla rynku FX, obsługujących analityczne procesy i integracje z systemami finansowymi.

Zakres obejmuje Data Lake/Data Warehouse, archiwizację z wieloletnią retencją oraz zapewnienie HA. Praca hybrydowa w Warszawie (max 2–3 dni w biurze/miesiąc); kontrakt B2B, 12 miesięcy + przedłużenia, stawka 145 PLN netto na godzinę.

Qualifications

• Minimum 5 lat doświadczenia w pracy z PostgreSQL.
• Bardzo dobra znajomość SQL.
• Doświadczenie w modelowaniu danych.
• Znajomość PL/pgSQL (procedury, funkcje, triggery).
• Doświadczenie w optymalizacji wydajności baz danych.
• Praktyczna znajomość integracji ETL.
• Doświadczenie w pracy z dużymi wolumenami danych.
• Wykształcenie wyższe techniczne.
• Znajomość Linux.
• Doświadczenie w branży bankowej.

Responsibilities

• Projektowanie i rozwój platform danych realizujących przetwarzanie setek komunikatów na sekundę.
• Archiwizacja danych z wieloletnią retencją.
• Budowa Data Lake i Data Warehouse.
• Integracje z systemami finansowymi i tradingowymi.
• Tworzenie rozwiązań wysokiej dostępności (HA).
• Rozwój rozwiązań wspierających ryzykiem.

Skills

SQL

Data modeling

PL/pgSQL

Performance tuning

ETL

Big data volumes

Linux

Banking domain

Python

Education

Technical university degree

Tools

Kafka

RabbitMQ

Apache Airflow

CI/CD

Job description

Wymagania

Podsumowanie

Celem tej roli jest projektowanie i rozwój wysokowydajnych platform danych w kontekście rynku finansowego, w celu obsługi procesów analitycznych dla rynku FX.

Obowiązki

• Projektowanie i rozwój platform danych realizujących przetwarzanie setek komunikatów na sekundę.
• Archiwizacja danych z wieloletnią retencją.
• Budowa Data Lake i Data Warehouse.
• Integracje z systemami finansowymi i tradingowymi.
• Tworzenie rozwiązań wysokiej dostępności (HA).
• Rozwój rozwiązań wspierających ryzykiem.

Wymagania

Must Have

• Minimum 5 lat doświadczenia w pracy z PostgreSQL.
• Bardzo dobra znajomość SQL.
• Doświadczenie w modelowaniu danych.
• Znajomość PL/pgSQL (procedury, funkcje, triggery).
• Doświadczenie w optymalizacji wydajności baz danych.
• Praktyczna znajomość integracji ETL.
• Doświadczenie w pracy z dużymi wolumenami danych.
• Wykształcenie wyższe techniczne.
• Znajomość Linux.
• Doświadczenie w branży bankowej.

Nice to Have

• Znajomość Pythona.
• Znajomość Kafka lub RabbitMQ.
• Doświadczenie z Apache Airflow.
• Umiejętności CI/CD.
• Doświadczenie w sektorze bankowym lub finansowym.

Inne szczegóły

• Hybryda: Max 2/3 razy w miesiącu w biurze w Warszawie
• Kontrakt: B2B, 12 miesięcy + możliwe przedłużenia
• Stawka: max 145 PLN netto na godzine + VAT
• Projekt: Współtworzenie platformy klasy enterprise obsługującej 46 par walutowych z przetwarzaniem 40 milionów komunikatów dziennie.
• Współpraca zespołowa: Mentoring młodszych programistów, wsparcie analityków i zespołów biznesowych oraz uczestnictwo w projektach Agile.