Senior Data Engineer: Spark, Azure & Enterprise Search

EPAM Systems (Poland) sp. z o.o.; Kraków; Hybrid; PLN 160,000 - 230,000; Full time

Benefits offered by this job

Ubezpieczenie zdrowotne

Karta Multisport

Vouchery zakupowe

Możliwość pracy za granicą do 60 dni w

Relocation opportunities

Job summary

EPAM Systems (Poland) sp. z o.o. poszukuje inżyniera danych do zaprojektowania i implementacji skalowalnego silnika wyszukiwania dla przedsiębiorstwa.

Kluczowe będą projektowanie, budowa i optymalizacja platformy umożliwiającej intuicyjne przeszukiwanie danych firmy. Wymagane co najmniej 3 lata doświadczenia w Data Engineering, silne umiejętności SQL, Python i Spark oraz znajomość usług Azure (Databricks, Data Lake, Data Factory).

Qualifications

• Minimum 3 lata doświadczenia jako Data Engineer, w tym praca w środowiskach Big Data
• Dobra znajomość SQL i systemów baz danych (relacyjnych i NoSQL), w tym optymalizacja zapytań i projektowanie schematów
• Silne umiejętności programowania w Pythonie i Spark
• Doświadczenie z usługami Azure (Azure Databricks, Data Lake, Data Factory) będzie atutem
• Doskonała komunikacja i umiejętność przekładania potrzeb biznesowych na rozwiązania techniczne

Responsibilities

• Projektowanie, budowa i optymalizacja wewnętrznego silnika wyszukiwania danych
• Analiza zestawów danych i metadanych w celu poprawy wyszukiwalności, indeksowania i trafności
• Gromadzenie i doprecyzowanie wymagań dotyczących wyszukiwania z interesariuszami biznesowymi i IT
• Tłumaczenie potrzeb biznesowych na specyfikacje techniczne i wspieranie Agile
• Zapewnienie integracji z szerszym ekosystemem danych (data, platforma, analytics)
• Wspieranie testów, monitorowanie wydajności wyszukiwania, trafności i użyteczności
• Przygotowywanie raportów analitycznych o dostępności danych i skuteczności wyszukiwania

Skills

Data engineering

SQL

Python

Spark

Azure

Stakeholder management

Job description

EPAM Systems (Poland) sp. z o.o. poszukuje inżyniera danych do zaprojektowania i implementacji skalowalnego silnika wyszukiwania dla przedsiębiorstwa.

Kluczowe będą projektowanie, budowa i optymalizacja platformy umożliwiającej intuicyjne przeszukiwanie danych firmy. Wymagane co najmniej 3 lata doświadczenia w Data Engineering, silne umiejętności SQL, Python i Spark oraz znajomość usług Azure (Databricks, Data Lake, Data Factory).