Big Data Engineer/ Engineerka

Sorigo; Województwo mazowieckie; Remote; PLN 180,000 - 280,000; Full time

Benefits offered by this job

Opieka medyczna

Ubezpieczenie

Karta sportowa

Job summary

Sorigo specjalizuje się w wdrażaniu nowoczesnych rozwiązań IT. Szukamy Big Data Engineer/Engineerki do pracy zdalnej, z co najmniej 5 latami doświadczenia w ETL, Spark, Airflow, Python/SQL i ekosystemie Big Data.

Praca obejmuje migracje, orkiestrację procesów i badania nad nowymi technologiami, z pakietem socjalnym oraz konkurencyjnym wynagrodzeniem. Oczekujemy również znajomości Kubernetes/OpenShift i doświadczenia z hurtowniami danych, a także możliwości pracy z grafowymi bazami danych i

Qualifications

• Minimum 5 lat doświadczenia w Big Data Engineering.
• Doświadczenie w rozwoju i optymalizacji procesów ETL.
• Znajomość Apache Spark i Apache Airflow.
• Doświadczenie z Pythonem/Scalą i SQL.
• Znajomość Hadoop/Hive/Snowflake/Trino.
• Praca z bazami danych i hurtowniami danych.
• Doświadczenie z Kubernetes/OpenShift.

Responsibilities

• Rozwój i optymalizacja procesów ETL oraz aplikacji opartych na Apache Spark.
• Projektowanie i wdrażanie rozwiązań Big Data.
• Udział w migracjach platform danych.
• Orkiestracja procesów przetwarzania danych z Apache Airflow.
• Testowanie nowych technologii i realizacja projektów POC.
• Prace badawczo‑rozwojowe nad grafowymi bazami danych.
• Współtworzenie chatbota umożliwiającego pytania do hurtowni danych.

Skills

Apache Spark

Apache Airflow

Python

SQL

Hadoop

Hive

Snowflake

Trino

Kubernetes

OpenShift

Neo4j

Elasticsearch

Kibana

Azure

Tools

Docker

Job description

W Sorigo zajmujemy się wdrażaniem innowacyjnych rozwiązań w obszarze IT. Mamy kilkunastoletnie doświadczenie we współpracy partnerskiej z dużymi klientami. Wierzymy także, że praca powinna dawać ludziom satysfakcję, a nie być tylko obowiązkiem. Choć czasami znalezienie odpowiedniego dla siebie miejsca wymaga czasu i dobrego ukierunkowania przez bardziej doświadczonych kolegów. Każdy pracownik przychodzi do nas po to aby się rozwinąć. Interesuje nas Twój rozwój, bo z tego czerpiemy satysfakcję, a nasi klienci korzyści.

Big Data Engineer / Engineerka

Lokalizacja: Zdalnie

Jeżeli:

• masz minimum 5 lat doświadczenia w obszarze Big Data Engineering,
• masz doświadczenie w rozwoju i optymalizacji procesów ETL oraz aplikacji do przetwarzania danych,
• znasz Apache Spark i Apache Airflow,
• masz doświadczenie w pracy z Pythonem lub Scalą oraz SQL,
• znasz rozwiązania z obszaru Big Data, takie jak Hadoop, Hive, Snowflake lub Trino,
• masz doświadczenie w pracy z bazami danych i hurtowniami danych,
• znasz rozwiązania do konteneryzacji i wdrażania aplikacji, takie jak Kubernetes lub OpenShift,
• potrafisz analizować złożone problemy techniczne i dobierać odpowiednie rozwiązania technologiczne.

A może dodatkowo:

• masz doświadczenie z Neo4j lub innymi grafowymi bazami danych,
• znasz Elasticsearch i Kibana,
• pracowałeś z rozwiązaniami chmurowymi, np. Azure,
• brałeś udział w migracji platform danych lub realizacji POC związanych z nowymi technologiami,
• masz doświadczenie w rozwiązaniach wykorzystujących AI, np. chatbotach umożliwiających zadawanie pytań do hurtowni danych w języku naturalnym.

Pomyśl, czy:

• lubisz pracować w przyjaznej atmosferze?
• chcesz czerpać satysfakcję z pracy w inspirujących projektach tworzonych przez ludzi z pasją?
• nie boisz się złożonych zagadnień, mając świadomość, że one napędzają Twój rozwój?
• chcesz być doceniany nie tylko za wyniki, ale i za swoje zaangażowanie?

Opowiedz twierdząco na większość pytań? Zapraszamy!

Co u nas na Ciebie czeka?

• Rozwój i optymalizacja procesów ETL oraz aplikacji opartych na Apache Spark.
• Projektowanie i wdrażanie rozwiązań z obszaru Big Data.
• Udział w migracji platformy danych.
• Orkiestracja procesów przetwarzania danych z wykorzystaniem Apache Airflow.
• Testowanie nowych technologii i realizacja projektów POC.
• Prace badawczo-rozwojowe nad wykorzystaniem grafowych baz danych.
• Współtworzenie chatbota umożliwiającego zadawanie pytań do hurtowni danych w języku naturalnym.
• pakiet socjalny: opieka medyczna, ubezpieczenie, karta sportowa;
• praca z najnowszymi technologiami i trendami rynku;
• konkurencyjne wynagrodzenie;
• bezkonkurencyjna atmosfera w pracy.