LLM Data Engineer: Scalable Pipelines & Lineage

IQVIA

Województwo mazowieckie

In loco

PLN 142.000 - 264.000

Tempo pieno

14 giorni+

Aumenta le possibilità di ricevere una risposta da questo datore di lavoro

Il tuo curriculum e una lettera di presentazione personalizzati, che corrispondono esattamente a ciò che sta cercando.

Supera i filtri ATS

Descrizione del lavoro

IQVIA w Polsce poszukuje Inżyniera Danych, który będzie budował i utrzymywał skalowalne potoki danych, zapewni pochodzenie danych oraz integracje potrzebne do trenowania i ewaluacji modeli ML/AI w obszarze ochrony zdrowia.

Do zadań należeć będzie projektowanie procesów transformacji danych w Snowflake i AWS, udostępnianie danych zespołom modelowania, śledzenie danych i wspieranie cyklu życia modeli, przy pracy z zespołami MLOps i infrastrukturą.

Competenze

Bogate doświadczenie w inżynierii Big Data i przetwarzaniu rozproszonym.
Praktyczna znajomość Snowflake/Snowpark, usług AWS oraz pracy z dużymi zbiorami danych.
Doświadczenie we wspieraniu środowisk ML/AI, w tym potoków danych do trenowania i oceny modeli.

Mansioni

Wspieranie działań inżynierii danych dla inicjatyw LLM, w tym transformacja dużych zbiorów danych medycznych.
Projektowanie i ewaluacja procesów transformacji danych w Snowflake i AWS, ocena wydajności.
Zapewnianie dostępności danych i migracji do środowisk wysokiej wydajności, versioning.
Wdrażanie data lineage, versioning i zarządzanie referencjami do zestawów danych.
Współpraca z zespołami modelling, MLOps i infrastruktury w zakresie cyklu życia modeli.
Koordynacja z interesariuszami w definiowaniu wymagań danych i harmonogramów.