Data Engineer (Openapi | Azure | Python)

Solid Company; Polska; Hybrid; PLN 207,000 - 220,000; Full time

Job summary

Solid Company zdalnie rekrutuje specjalistę ds. przetwarzania danych i AI. Pozycja obejmuje budowę i utrzymanie wydajnych rurociągów danych w Azure, przetwarzanie dużych wolumenów tekstu oraz rozwój baz wiedzy i interfejsów API zgodnych z OpenAPI.

Wymagana jest biegła znajomość Pythona, doświadczenie z Azure oraz umiejętność pracy z dużymi zestawami danych i komunikacją w języku angielskim.

Qualifications

• Bardzo dobra znajomość Pythona i pisanie wydajnego kodu do przetwarzania danych.
• Doświadczenie w chmurze Azure i usługach danych.
• Znajomość OpenAPI/REST API w kontekście integracji.
• Doświadczenie z bazami wiedzy, bazami wektorowymi i strukturami danych.
• Praca z dużymi wolumenami danych tekstowych.
• Dobre umiejętności komunikacyjne i angielski w codziennej pracy.

Responsibilities

• Budowanie, utrzymanie i optymalizacja rurociągów danych w chmurze Azure.
• Przetwarzanie, parsowanie i czyszczenie dużych wolumenów danych tekstowych.
• Rozwój baz wiedzy i struktur przechowywania danych na potrzeby analityki oraz AI/ML.
• Projektowanie i udostępnianie interfejsów API w OpenAPI (Swagger).
• Dokumentacja kontraktów danych i punktów styku (API-first).
• Współpraca z analitykami, architektami i inżynierami przy projektowaniu architektury danych.

Skills

Python

Azure Cloud

OpenAPI / REST API

Bazy wiedzy / Wektory

Duże wolumeny danych tekstowych

Komunikacja / Angielski

Tools

Azure Data Factory

Azure DevOps

Swagger/OpenAPI

Job description

Obszar: Consulting IT

Lokalizacja:100% zdalnie

Delegacje: nie

Start: ASAP (akceptujemy kandydatury z max 1msc dostępnością do startu)

Stawka (ustalana indywidualnie):150 - 160 PLN netto + VAT / h

Zaangażowanie: B2B (outsourcing z 1dea), full-time, długofalowo (12msc+)

Proces rekrutacyjny (100% zdalnie):

• Krótka rozmowa telefoniczna informacyjno-zapoznawcza z rekruterem 1dea (~10 min)
• Weryfikacja techniczno-projektowa z Klientem (~1 – 1.5 h)
• Rozmowa zapoznawcza z przedstawicielem projektu u Klienta końcowego (~30 min)
• Decyzja o podjęciu współpracy

Zakres obowiązków

• Budowanie, optymalizacja i utrzymanie wydajnych rurociągów danych (Data Pipelines) w chmurze Azure
• Przetwarzanie, parsowanie, czyszczenie i strukturyzacja dużych wolumenów danych tekstowych
• Rozwój i utrzymanie baz wiedzy (w tym baz wektorowych / struktur przechowywania danych) na potrzeby analityczne oraz rozwiązań AI/ML
• Projektowanie, integracja i udostępnianie interfejsów API w standardzie OpenAPI (Swagger) na potrzeby zasilania i wystawiania danych z pipeline'ów dla innych systemów
• Tworzenie spójnej dokumentacji kontraktów danych i punktów styku (API-first) w standardzie OpenAPI
• Współpraca z zespołem analityków, architektów oraz inżynierów przy projektowaniu kompleksowej architektury danych

Kogo poszukujemy?

• Python – bardzo dobra znajomość języka oraz umiejętność pisania wydajnego, czystego kodu nakierowanego na przetwarzanie i analizę danych.
• Chmura Azure – praktyczne, komercyjne doświadczenie w pracy z kluczowymi usługami danych w środowisku Microsoft Azure.
• OpenAPI / REST API – praktyczna znajomość standardu OpenAPI (Swagger) w kontekście integracji rurociągów danych, dostarczania endpointów i dokumentowania specyfikacji API.
• Bazy wiedzy – doświadczenie w projektowaniu, utrzymaniu lub integracji baz wiedzy, baz wektorowych oraz zaawansowanych struktur przechowywania danych.
• Duże wolumeny danych tekstowych – doświadczenie w pracy z plikami tekstowymi o dużej objętości (optymalizacja odczytu/zapisu, wydajne przetwarzanie).
• Komunikatywność / Język angielski – wysoko rozwinięte umiejętności interpersonalne oraz sprawna komunikacja w języku angielskim w codziennej pracy projektowej.

Mile widziane:

• Doświadczenie z narzędziami do orkiestracji danych i CI/CD w Azure (np. Azure Data Factory, Azure DevOps).
• Doświadczenie w integracji pipeline'ów z modelami LLM / RAG.