Remote Data Engineer | Azure & OpenAPI Pipelines

1dea; Województwo mazowieckie; Remote; PLN 207,000 - 220,000; Full time

Job summary

1dea poszukuje doświadczonego Data Engineera / Architekta Danych do budowy i optymalizacji rurociągów danych w środowisku Azure, z naciskiem na przetwarzanie dużych zbiorów tekstowych i integrację poprzez OpenAPI.

Praca zdalna w modelu B2B, start ASAP, długoterminowo (12+ miesięcy). Wymagane są umiejętności Python, Azure i OpenAPI, a także doświadczenie z bazami wiedzy i przetwarzaniem dużych wolumenów tekstu. Angielski na dobrym poziomie mile widziany.

Qualifications

• Bardzo dobra znajomość Pythona i umiejętność pisania wydajnego kodu do przetwarzania danych.
• Praktyczne doświadczenie w pracy z usługami danych w Microsoft Azure.
• OpenAPI/Swagger w kontekście integracji rurociągów danych, endpointów i dokumentowania API.
• Projektowanie, utrzymanie lub integracja baz wiedzy, baz wektorowych i zaawansowanych struktur przechowywania danych.
• Praca z dużymi wolumenami danych tekstowych, optymalizacja odczytu/zapisu i przetwarzanie tekstu.
• Dobra znajomość języka angielskiego w codziennej pracy projektowej.

Responsibilities

• Budowanie i optymalizacja rurociągów danych w chmurze Azure.
• Przetwarzanie, parsowanie i strukturyzacja dużych zbiorów danych tekstowych.
• Rozwój i utrzymanie baz wiedzy oraz baz wektorowych dla analiz i AI/ML.
• Projektowanie, integracja i udostępnianie interfejsów API w standardzie OpenAPI.
• Dokumentowanie kontraktów danych i punktów styku API (OpenAPI).
• Współpraca z zespołem analityków i inżynierów przy projektowaniu architektury danych.

Skills

Python

Azure

OpenAPI/Swagger

Bazy wiedzy

Wolumeny danych tekstowych

Angielski

Tools

Azure Data Factory

Azure DevOps

Job description

1dea poszukuje doświadczonego Data Engineera / Architekta Danych do budowy i optymalizacji rurociągów danych w środowisku Azure, z naciskiem na przetwarzanie dużych zbiorów tekstowych i integrację poprzez OpenAPI.

Praca zdalna w modelu B2B, start ASAP, długoterminowo (12+ miesięcy). Wymagane są umiejętności Python, Azure i OpenAPI, a także doświadczenie z bazami wiedzy i przetwarzaniem dużych wolumenów tekstu. Angielski na dobrym poziomie mile widziany.