Remote Azure Databricks Engineer - Data Platform & Pipelines

Experis; Warszawa; Hybrid; PLN 110,000 - 190,000; Full time

Benefits offered by this job

Medicover healthcare

Multisport card

Group life insurance

Job summary

Experis poszukuje doświadczonego inżyniera Azure Databricks do budowy i optymalizacji nowoczesnych platform danych w chmurze Azure. Główne zadania obejmują tworzenie skalowalnych rozwiązań przetwarzania danych i potoków integrujących dane z wielu źródeł.

Wymagane jest doświadczenie z Azure Databricks, Azure Data Factory i architekturą Lakehouse. Praca zdalna w pełnym wymiarze czasu na kontrakcie B2B poprzez Experis; oferujemy pakiet medyczny i kartę Multisport.

Qualifications

• Doświadczenie z Azure Databricks i Azure Data Factory.
• Znajomość SQL, PySpark, Python i ETL/ELT.
• Projektowanie architektur Lakehouse i Medallion.

Responsibilities

• Tworzenie skalowalnych rozwiązań przetwarzania danych w chmurze Azure.
• Projektowanie i utrzymanie potoków danych integrujących źródła danych.
• Transformacja dużych zestawów danych (strukturalnych i niestrukturalnych).
• Współpraca z inżynierami danych, architektami i interesariuszami biznesowymi.

Skills

Azure Databricks

Azure Data Factory

Azure Cloud

SQL

PySpark

Python

ETL/ELT

Data modeling

Unity Catalog

MLflow

Jobs & Pipelines

Git

Azure DevOps

CI/CD

Power BI

Lakehouse

Medallion Architecture

Tools

Git

Azure DevOps

CI/CD

Power BI

Job description

Experis poszukuje doświadczonego inżyniera Azure Databricks do budowy i optymalizacji nowoczesnych platform danych w chmurze Azure. Główne zadania obejmują tworzenie skalowalnych rozwiązań przetwarzania danych i potoków integrujących dane z wielu źródeł.

Wymagane jest doświadczenie z Azure Databricks, Azure Data Factory i architekturą Lakehouse. Praca zdalna w pełnym wymiarze czasu na kontrakcie B2B poprzez Experis; oferujemy pakiet medyczny i kartę Multisport.