Senior Big Data Engineer – Remote, Spark & Hadoop

Billennium; Polska; Hybrid; PLN 180,000 - 270,000; Full time

Benefits offered by this job

Udemy for Business

Private medical care

Multisport card

Veterinary package

Language lessons

Shopping vouchers

Job summary

Billennium poszukuje doświadczonego Big Data Developera, który doskonale czuje się w świecie rozproszonych systemów danych i pracuje nad rozwiązaniami opartymi o Spark, Hive, HDFS oraz HBase. Wymagane minimum 5 lat doświadczenia w Scala/Python i pracy z ekosystemem Hadoop.

Oferujemy elastyczność pracy w modelu hybrydowym, rozwój kariery dzięki szkoleniom i certyfikacjom oraz dostęp do międzynarodowych partnerów IT.

Qualifications

• Minimum 5 lat doświadczenia w programowaniu Scala/Python.
• Komercyjne doświadczenie z rozproszonymi systemami i ekosystemem Hadoop.
• Minimum 5 lat doświadczenia w rozwiązaniach Big Data (Spark, Hive, HDFS, HBase).
• Znajomość baz NoSQL (np. MongoDB, Cassandra lub HBase).
• Bardzo dobra znajomość SQL oraz doświadczenie z RDBMS.
• Doświadczenie w integracji systemów oraz usług REST/SOAP/ESB.

Responsibilities

• Tworzenie i optymalizacja rozwiązań w Scala/Python.
• Praca z ekosystemem Hadoop (Cloudera), m.in. Spark, Hive, HDFS i HBase.
• Projektowanie i rozwijanie rozwiązań Big Data.
• Wspieranie testów jednostkowych, integracyjnych i UAT.
• Analizowanie i optymalizowanie wydajności Hadoop/Spark.
• Dokumentowanie kodu i przepływów danych.

Skills

Scala

Python

NoSQL databases

SQL

REST/SOAP/ESB integration

Tools

Spark

Hive

HDFS

HBase

MongoDB

Cassandra

Job description

Billennium poszukuje doświadczonego Big Data Developera, który doskonale czuje się w świecie rozproszonych systemów danych i pracuje nad rozwiązaniami opartymi o Spark, Hive, HDFS oraz HBase. Wymagane minimum 5 lat doświadczenia w Scala/Python i pracy z ekosystemem Hadoop.

Oferujemy elastyczność pracy w modelu hybrydowym, rozwój kariery dzięki szkoleniom i certyfikacjom oraz dostęp do międzynarodowych partnerów IT.