Data Engineer

Primaris Services Sp. z o.o.

Warszawa

Remote

PLN 190,000 - 270,000

Full time

2 days ago
Be an early applicant

A complete application in a minute

Tailored resume and cover letter, ready to send.

Get past ATS filters

Job summary

Primaris Services Sp. z o.o. poszukuje inżyniera danych do projektowania i budowy procesów ETL/ELT z wykorzystaniem PySpark i Databricks. Doświadczenie w Delta Lake i architekturze medallion Bronze/Silver/Gold będzie dodatkowym atutem.

Wymagana min. 4 lata komercyjnego doświadczenia, dobra znajomość SQL i Pythona, praca z przetwarzaniem batch i streaming oraz CDC. Szukamy osób samodzielnych, nastawionych na optymalizację wydajności.

Qualifications

  • Minimum 4 years of commercial experience in data engineering.
  • Very good command of SQL and Python.
  • Experience with PySpark and Databricks.
  • Knowledge of Delta Lake and medallion architecture Bronze/Silver/Gold.
  • Experience in designing and building ETL/ELT processes.
  • Experience with batch and streaming data processing and CDC.
  • Ability to optimize data processing performance.

Skills

SQL
Python
ETL/ELT design
Performance tuning

Tools

Databricks
Delta Lake
Medallion architecture

Job description

Projekt dotyczy pozyskiwania, integracji, przetwarzania i udostępniania danych: budowy pipeline'ów i warstw danych oraz wdrażania mechanizmów jakości, lineage i obserwowalności. Będziesz pracować w oparciu o Databricks, Delta Lake i architekturę medallion, z przetwarzaniem batch i streaming oraz CDC.

Uwaga: oferta deklaruje pracę zdalną, ale z 'uzgodnionymi spotkaniami projektowymi w zależności od potrzeb' — realna elastyczność może być mniejsza niż sugerowana.

Dla inżynierów danych z min. 4-letnim doświadczeniem, którzy lubią samodzielnie projektować procesy ETL/ELT.

  • min. 4 lata komercyjnego doświadczenia
  • bardzo dobra znajomość SQL i Python
  • doświadczenie w pracy z PySpark i Databricks
  • znajomość Delta Lake oraz architektury medallion (Bronze/Silver/Gold)
  • doświadczenie w projektowaniu i budowaniu procesów ETL/ELT
  • znajomość przetwarzania danych w trybie batch i streaming oraz mechanizmów CDC
  • umiejętność optymalizacji wydajności procesów przetwarzania danych (performance tuning)
Get your free, confidential resume review.

or drag and drop your file here.

Similar jobs

Similar jobs worth comparing

Data Engineer
Data Engineer

Bergman Engineering Sp. z o.o. • Rzeszów

Hybrid
PLN 180,000 - 280,000
Data Engineer (Databricks, Azure)
Data Engineer (Databricks, Azure)

MW Consulting • Wrocław, Kraków

On-site
PLN 180,000 - 250,000
Data Engineer
Data Engineer

AgileEngine, LLC. • Warszawa, Kraków, Poznań

On-site
PLN 180,000 - 260,000
Senior Data Engineer (Databricks) (#6046)
Senior Data Engineer (Databricks) (#6046)

N-iX LTD • Kraków

On-site
PLN 180,000 - 280,000
Remote Senior Data Engineer — Databricks, Delta Lake & Medallion
Remote Senior Data Engineer — Databricks, Delta Lake & Medallion

Primaris Services Sp. z o.o. • Warszawa

Remote
PLN 190,000 - 270,000
Data Engineer
Data Engineer

Connectis_ • Województwo mazowieckie

Remote
PLN 180,000 - 240,000
AIR Rekruter
W pełni zdalnie
Elastyczny B2B
+4
Programistka/Programista Data Lake
Programistka/Programista Data Lake

UNIQA • Warszawa

On-site
PLN 180,000 - 240,000
Data Engineer
Data Engineer

AtlantisJobs • Warszawa

Remote
PLN 180,000 - 280,000
Data Engineer Databricks Developer
Data Engineer Databricks Developer

RITS • Województwo mazowieckie

Remote
PLN 165,000 - 207,000
Senior Data Integration Engineer (Databricks/Snowflake)
Senior Data Integration Engineer (Databricks/Snowflake)

EPAM Systems (Poland) sp. z o.o. • Wrocław

On-site
PLN 180,000 - 300,000
Top locations