Azure Data Engineer

act digital; Województwo mazowieckie; Sur place; PLN 120 000 - 180 000; Plein temps

Résumé du poste

act digital poszukuje Data Engineera do projektowania, rozwijania i utrzymywania rozwiązań do przetwarzania danych w Azure z użyciem Data Factory i Databricks. Praca w zespołach interdyscyplinarnych nad projektami międzynarodowych klientów.

Wymagana jest biegła znajomość SQL i PySpark, umiejętność modelowania danych oraz doświadczenie w CI/CD i Azure DevOps. Wymagany jest poziom angielskiego co najmniej B2; zalecane doświadczenie w Data Lakehouse oraz Unity Catalog, MLflow i pipelines.

Qualifications

• Praktyczne doświadczenie w rozwiązaniach opartych na architekturze Data Lake
• Doświadczenie w przetwarzaniu i przepływie danych z Databricks oraz Azure Data Factory
• Doświadczenie w projektowaniu i wdrażaniu rozwiązań w chmurze Azure
• Biegła znajomość SQL i PySpark
• Umiejętność modelowania danych oraz projektowania procesów ETL/ELT
• Praktyczna wiedza o zaawansowanych funkcjach Databricks: Unity Catalog, MLflow, Jobs i Pipelines
• Doświadczenie w CI/CD i DevOps, w tym Git oraz Azure DevOps
• Język angielski na poziomie minimum B2

Responsabilités

• Projektowanie, rozwijanie i utrzymywanie rozwiązań do przetwarzania danych w Azure
• Praca w interdyscyplinarnych zespołach przy projektach międzynarodowych klientów
• Projektowanie i wdrażanie rozwiązań Data Lakehouse z Databricks i Data Factory oraz integracja z Power BI

Connaissances

SQL

PySpark

Azure Data Factory

Databricks

Data Lakehouse

CI/CD

DevOps

Git

Azure DevOps

English B2

Outils

Unity Catalog

MLflow

Pipelines

Description du poste

Będziesz projektować, rozwijać i utrzymywać rozwiązania do przetwarzania danych w Azure: pipeline'y integrujące dane z baz, API i strumieni, procesy ETL/ELT w Azure Data Factory i Databricks oraz integrację z Power BI. Praca w zespołach interdyscyplinarnych przy projektach międzynarodowych klientów. To oferta dla data engineera z praktyką w Data Lakehouse i Databricks, który zna CI/CD i DevOps. Szczera uwaga: zwrot „Rozpocznij swoją przygodę z act digital!” to emocjonalny slogan rekrutacyjny, który może maskować rotację lub niepewność co do konkretnego projektu — warto dopytać o przypisanie do projektu.

• praktyczne doświadczenie w rozwiązaniach opartych na architekturze Data Lake
• doświadczenie w przetwarzaniu i przepływie danych z Databricks oraz Azure Data Factory
• doświadczenie w projektowaniu i wdrażaniu rozwiązań w chmurze Azure
• biegła znajomość SQL i PySpark
• umiejętność modelowania danych oraz projektowania procesów ETL/ELT
• praktyczna wiedza o zaawansowanych funkcjach Databricks: Unity Catalog, MLflow, Jobs i Pipelines
• doświadczenie w CI/CD i DevOps, w tym Git oraz Azure DevOps
• język angielski na poziomie minimum B2