Senior Big Data Engineer: Spark/Java on Azure

Connectis_

Warszawa

On-site

PLN 180,000 - 260,000

Full time

8 days ago

Application generator

Stand out for this role — generate a tailored resume and cover letter in about a minute.

Get past ATS filters

Benefits offered by this job

Polecenie znajomych

Job summary

Connectis_ wraz z partnerem z branży bankowej poszukuje doświadczonego Big Data Engineer. Główne zadania obejmują projektowanie i wdrażanie rozwiązań do przetwarzania dużych danych z wykorzystaniem Spark, Java, Hive i SQL, oraz mapowanie danych przy użyciu Spark/Scala.

Wymagana praktyczna znajomość narzędzi takich jak Git i Airflow, doświadczenie z DevOps/CI/CD oraz biegła angielszczyzna. Praca w środowisku bankowym z migracją do Azure, elastyczne formy współpracy B2B i możliwość okazjonalnych

Qualifications

Minimum 4–5 lat doświadczenia w rozwoju oprogramowania lub pokrewnych obszarach Big Data.

Responsibilities

Projektowanie i wdrażanie rozwiązań do zbierania, transformacji i przetwarzania dużych zbiorów danych z użyciem Spark, Java, Hive i SQL.
Praca nad job'y przetwarzania i mapowania danych z użyciem Spark/Scala.
Analiza danych z wielu źródeł i opracowywanie specyfikacji technicznych.
Rekomendacje dotyczące architektury Big Data i poprawy niezawodności.
Wspieranie aplikacji i usuwanie problemów produkcyjnych.
Współpraca w modelu projektowym na etapy i deliverables.
Modernizacja platformy danych i migracja do Azure.
Udział w spotkaniach projektowych w Warszawie.