Senior Data Engineer: Apache NiFi & ETL Lead

Algoteque; Wrocław; Remoto; PLN 180.000 - 260.000; Tempo pieno

Descrizione del lavoro

ALGOTEQUE, firma doradcza IT, poszukuje doświadczonego specjalisty ds. przetwarzania i integracji danych, projektowania baz danych oraz budowy procesów ETL. Kluczowa będzie ekspercka znajomość Apache NiFi i PostgreSQL, a także optymalizacja wydajności przy dużych wolumenach danych.

Do zadań należeć będzie projektowanie REST API, budowa przepływów danych NiFi, oraz analiza wymagań dotyczących API i infrastruktury. Wymagane zaawansowane umiejętności modelowania danych i dobra znajomość Bash/Linux.

Competenze

• Minimum 6 lat doświadczenia w pracy z bazami danych.
• Minimum 5 lat doświadczenia w budowie procesów ETL.
• Minimum 5 lat doświadczenia w optymalizacji baz danych.
• Ekspercka znajomość Apache NiFi, projektowania i implementacji przepływów danych.
• Ekspercka znajomość relacyjnych baz danych, głównie PostgreSQL.
• Zaawansowana umiejętność modelowania danych.
• Ekspercka znajomość ETL i przetwarzania danych.
• Doświadczenie w projektowaniu i implementacji REST API.
• Umiejętność strojenia wydajnościowego baz danych i optymalizacji zapytań SQL.
• Podstawowa znajomość Pythona i Bash/Linux.
• Analityczne myślenie, samodzielność i odpowiedzialność.
• Znajomość angielskiego na poziomie min. B2.

Mansioni

• Projektowanie i rozwój relacyjnych baz danych (PostgreSQL).
• Projektowanie i implementacja REST API we współpracy z Frontend.
• Projektowanie i rozwój przepływów danych z wykorzystaniem Apache NiFi.
• Budowa i rozwój procesów ETL oraz integracja danych.
• Optymalizacja baz danych i zapytań SQL dla dużych wolumenów danych.
• Analiza i definiowanie wymagań dotyczących API, infrastruktury i baz danych.

Conoscenze

Analityczne myślenie

Samodzielność

Odpowiedzialność

Znajomość języka angielskiego (B2)

Strumenti

Apache NiFi

PostgreSQL

REST API

SQL tuning

Python

Linux Bash

Descrizione del lavoro

ALGOTEQUE, firma doradcza IT, poszukuje doświadczonego specjalisty ds. przetwarzania i integracji danych, projektowania baz danych oraz budowy procesów ETL. Kluczowa będzie ekspercka znajomość Apache NiFi i PostgreSQL, a także optymalizacja wydajności przy dużych wolumenach danych.

Do zadań należeć będzie projektowanie REST API, budowa przepływów danych NiFi, oraz analiza wymagań dotyczących API i infrastruktury. Wymagane zaawansowane umiejętności modelowania danych i dobra znajomość Bash/Linux.