Staff Data Engineer - High-Performance Data Systems

Next Technology Professionals; Wrocław, Warszawa, Kraków; A distancia; PLN 260.000 - 380.000; A tiempo parcial

Ventajas ofrecidas por este puesto de trabajo

Umowa B2B

Elastyczna współpraca

Duża autonomia

Prestigious project

Descripción de la vacante

Next Technology Professionals poszukuje Staff Data Engineer do pracy zdalnej nad architekturą danych i infrastrukturą obliczeniową dla enterprise. Rola łączy ownership dużych systemów danych oraz przetwarzanie analityczne na wysokiej wydajności.

Wymagana jest solidna znajomość PostgreSQL, SQL i narzędzi DataFusion/Arrow, a także doświadczenie w tworzeniu silnika obliczeniowego i semantycznych widoków danych. Praca zdalna na kontrakt B2B.

Formación

• Silny doświadczenie w budowie infrastruktury danych i systemów analitycznych.
• Znajomość PostgreSQL, SQL, optymalizacji zapytań i indeksowania.
• Zrozumienie architektury danych, modelowania i migracji schematów.

Responsabilidades

• Projektowanie i rozwój architektury danych platformy oraz modeli danych.
• Definiowanie architektury przetwarzania danych z naciskiem na niskie opóźnienia i skalowalność.
• Optymalizacja PostgreSQL i infrastruktury analitycznej oraz wydajności zapytań.
• Budowa i rozwój silnika obliczeniowego i transformacji danych.
• Tworzenie widoków semantycznych, rozszerzeń SQL i trwałego katalogu definicji danych.
• Projektowanie integracji z zewnętrznymi źródłami danych i systemami AI/ML.
• Ustanawianie standardów poprawności, migracji schematów i audytu danych.

Conocimientos

PostgreSQL

SQL

Rust

Data architecture

Low latency

Herramientas

DataFusion

Arrow

Descripción del empleo

Staff Data Engineer - High-Performance Data Systems

Projekt: Budowa architektury danych oraz infrastruktury obliczeniowej dla nowej platformy klasy enterprise. Rola łączy ownership skalowalnych systemów danych, wysokowydajnego przetwarzania analitycznego oraz tworzenia silnika obliczeniowego.

Stack technologiczny: PostgreSQL, SQL, Apache DataFusion, Apache Arrow, Rust

Model współpracy: Kontrakt B2B - praca zdalna.

Zakres obowiązków:

• Projektowanie i rozwój architektury danych platformy, w tym modelowanie danych, projektowanie schematów, strategii przechowywania oraz obsługa obciążeń transakcyjnych i analitycznych.
• Definiowanie architektury przetwarzania danych – balansowanie między przetwarzaniem wsadowym a w czasie rzeczywistym, zapewnienie niskich opóźnień (low latency) oraz poziomej skalowalności.
• Projektowanie i optymalizacja PostgreSQL oraz analitycznej infrastruktury danych (wydajność zapytań, indeksowanie, optymalizacja pamięci masowej).
• Budowa i rozwój silnika obliczeniowego (w tym niestandardowe wykonywanie zapytań i reużywalne transformacje).
• Tworzenie widoków semantycznych, rozszerzeń SQL oraz trwałego katalogu dla definicji danych i złożonych obliczeń finansowych.
• Projektowanie integracji z zewnętrznymi źródłami danych, aplikacjami firm trzecich oraz systemami AI/ML (w tym pliki CSV/Parquet).
• Ustanawianie standardów w zakresie poprawności numerycznej, wersjonowania danych, migracji schematów, data lineage, audytowalności, obserwowalności i niezawodności produkcyjnej.

Oczekujemy:

• Solidnego doświadczenia w projektowaniu i budowaniu infrastruktury danych, baz danych, platform analitycznych lub wysokowydajnych systemów danych.
• Dosacnej znajomości SQL oraz PostgreSQL (w tym planowanie zapytań, optymalizacja, indeksowanie, spójność transakcji).
• Głębokiego zrozumienia architektury danych, modelowania oraz różnic między przetwarzaniem transakcyjnym a analitycznym.
• Doświadczenia w projektowaniu systemów pod duże wolumeny danych, skomplikowane obliczenia i niskie opóźnienia.
• Biegłości w korzystaniu z asystentów AI do kodowania (AI coding agents) oraz zdolności do dostarczania najwyższej jakości kodu produkcyjnego.
• Gotowości do podejmowania kluczowych decyzji architektonicznych przy jednoczesnym aktywnym pisaniu kodu (rola hands-on).
• Rygorystycznego podejścia do poprawności, niezawodności, testowania i utrzymywalności oprogramowania.
• Znajomości języka Rust (szczególnie w odniesieniu do pojęć tj. współbieżność, programowanie asynchroniczne, zarządzanie pamięcią, optymalizacja wydajności).

Mile widziana znajomość:

• Apache DataFusion, Apache Arrow,
• ClickHouse (lub innych silników kolumnowych/OLAP),
• architektury HTAP/Lakehouse,
• chmur (AWS/GCP/Azure),
• systemów obliczeń finansowych.

Oferujemy:

• Umowę B2B i elastyczną formę współpracy.
• Udział w prestiżowym projekcie tworzonym od podstaw, bez konieczności utrzymywania i naprawiania tzw. legacy code.
• Dużą autonomię i decyzyjność – Twój głos będzie miał kluczowy wpływ na ostateczny kształt architektury i technologii.
• Gwarancję stabilności (niezależne i pewne źródła finansowania), co pozwala na komfortowe skupienie się na innowacjach.

Pracujemy wyłącznie w oparciu o aktualne, konkretne potrzeby klientów. Jeśli Twój profil będzie odpowiadał jednemu z prowadzonych procesów, skontaktujemy się niezwłocznie.

O nas

Next Technology Professionals to wyspecjalizowana agencja rekrutacyjna i firma outsourcingowa o silnym profilu technologicznym. Od ponad 10 lat wspieramy firmy w budowie zespołów IT, AI, Cybersecurity, SAP oraz w rekrutacjach dla finansów, inżynierii i marketingu. Zrealizowaliśmy ponad 1000 skutecznych procesów rekrutacyjnych dla korporacji, scale-upów i dynamicznie rosnących startupów.

Uwaga:

W analizie aplikacji wspieramy się sztuczną inteligencją, jednak Twój profil zawsze weryfikuje rekruter- to człowiek podejmuje ostateczną decyzję.