Azure Data Engineer: Lakehouse, Databricks & CI/CD

act digital

Województwo mazowieckie

On-site

PLN 120,000 - 180,000

Full time

7 days ago

Be an early applicant

Get a reply from this employer

Your resume and cover letter, tailored to exactly what they’re hiring for.

Get past ATS filters

Job summary

act digital poszukuje Data Engineera do projektowania, rozwijania i utrzymywania rozwiązań do przetwarzania danych w Azure z użyciem Data Factory i Databricks. Praca w zespołach interdyscyplinarnych nad projektami międzynarodowych klientów.

Wymagana jest biegła znajomość SQL i PySpark, umiejętność modelowania danych oraz doświadczenie w CI/CD i Azure DevOps. Wymagany jest poziom angielskiego co najmniej B2; zalecane doświadczenie w Data Lakehouse oraz Unity Catalog, MLflow i pipelines.

Qualifications

Praktyczne doświadczenie w rozwiązaniach opartych na architekturze Data Lake
Doświadczenie w przetwarzaniu i przepływie danych z Databricks oraz Azure Data Factory
Doświadczenie w projektowaniu i wdrażaniu rozwiązań w chmurze Azure
Biegła znajomość SQL i PySpark
Umiejętność modelowania danych oraz projektowania procesów ETL/ELT
Praktyczna wiedza o zaawansowanych funkcjach Databricks: Unity Catalog, MLflow, Jobs i Pipelines
Doświadczenie w CI/CD i DevOps, w tym Git oraz Azure DevOps
Język angielski na poziomie minimum B2

Responsibilities

Projektowanie, rozwijanie i utrzymywanie rozwiązań do przetwarzania danych w Azure
Praca w interdyscyplinarnych zespołach przy projektach międzynarodowych klientów
Projektowanie i wdrażanie rozwiązań Data Lakehouse z Databricks i Data Factory oraz integracja z Power BI