Data Lake Engineer: PySpark, ETL/ELT & AI (LLM)

UNIQA; Warszawa; On-site; PLN 180,000 - 240,000; Full time

Job summary

UNIQA w Warszawie poszukuje doświadczonego inżyniera danych / Pythona developera, który będzie projektować i rozwijać procesy pozyskiwania, przetwarzania i udostępniania danych na potrzeby rozwiązań AI w środowisku Databricks. Główny zakres obejmuje budowę komponentów w Pythonie (PySpark) integrujących dane z modelami językowymi i systemami biznesowymi.

Wymagane co najmniej 3 lata doświadczenia jako Data Engineer lub Python Developer, doświadczenie w ETL/ELT, REST API oraz pracy z danymi

Qualifications

• Minimum 3 lata doświadczenia jako Data Engineer, Python Developer lub podobne stanowisko.
• Doświadczenie w budowaniu procesów ETL/ELT oraz integracji danych z wielu źródeł.
• Doświadczenie w projektowaniu i wykorzystywaniu REST API.
• Praca z danymi ustrukturyzowanymi i nieustrukturyzowanymi.
• Doświadczenie z aplikacjami wykorzystującymi modele językowe LLM.
• Komunikatywna znajomość języka angielskiego.

Skills

Data engineering

Python development

ETL/ELT design

REST API design

Structured & unstructured data

LLM applications

English communication

Tools

Databricks

PySpark

Job description

UNIQA w Warszawie poszukuje doświadczonego inżyniera danych / Pythona developera, który będzie projektować i rozwijać procesy pozyskiwania, przetwarzania i udostępniania danych na potrzeby rozwiązań AI w środowisku Databricks. Główny zakres obejmuje budowę komponentów w Pythonie (PySpark) integrujących dane z modelami językowymi i systemami biznesowymi.

Wymagane co najmniej 3 lata doświadczenia jako Data Engineer lub Python Developer, doświadczenie w ETL/ELT, REST API oraz pracy z danymi