Data QA Engineer: Databricks Testing & Data Quality

Experis ManpowerGroup Sp. z o.o.; Warszawa; Hybrid; PLN 120,000 - 180,000; Full time

Benefits offered by this job

Prywatna opieka medyczna (Medicover)

Ubezpieczenie na życie

Platforma benefitowa

Dostęp do szkoleń i certyfikacji

Job summary

Experis ManpowerGroup Sp. z o.o. poszukuje Data QA Engineer/Data Test Automation Engineer do pracy w międzynarodowym projekcie dla sektora Investment Banking.

Rola obejmuje zapewnianie jakości danych na platformach Databricks, Azure i Spark, wykorzystywanych w analityce, zarządzaniu ryzykiem i raportowaniu regulacyjnym. Biura dostępne w Warszawie i innych miastach; praca hybrydowa, 40% czasu spędzonego w biurze.

Qualifications

• Doświadczenie w Data QA, Data Testing lub Test Automation.
• Praktyczne doświadczenie z Databricks.
• Bardzo dobra znajomość SQL.
• Doświadczenie w testowaniu procesów ETL/ELT i walidacji danych.
• Znajomość narzędzi takich jak Xray, Jira lub Azure DevOps.
• Doświadczenie z CI/CD.

Responsibilities

• Projektowanie i realizacja testów dla platform danych oraz procesów ETL/ELT.
• Walidacja pipeline'ów danych opartych o Databricks.
• Weryfikacja poprawności transformacji, agregacji i jakości danych.
• Analiza oraz uzgadnianie danych pomiędzy systemami źródłowymi i docelowymi.
• Testowanie logiki biznesowej oraz procesów związanych z obszarem ryzyka i raportowania.
• Identyfikacja, raportowanie i monitorowanie błędów jakości danych.
• Współpraca z Data Engineerami przy analizie i rozwiązywaniu problemów.
• Udział w testach regresyjnych oraz UAT.
• Tworzenie dokumentacji testowej i raportów jakości danych

Skills

Data QA / Data Testing / Test Autom

Databricks

SQL

ETL/ELT data validation

Xray / Jira / Azure DevOps

CI/CD

Tools

Databricks

Jira

Azure DevOps

PySpark

Job description

Experis ManpowerGroup Sp. z o.o. poszukuje Data QA Engineer/Data Test Automation Engineer do pracy w międzynarodowym projekcie dla sektora Investment Banking.

Rola obejmuje zapewnianie jakości danych na platformach Databricks, Azure i Spark, wykorzystywanych w analityce, zarządzaniu ryzykiem i raportowaniu regulacyjnym. Biura dostępne w Warszawie i innych miastach; praca hybrydowa, 40% czasu spędzonego w biurze.