Data Engineer

AVENGA (Agencja Pracy, nr KRAZ: 8448); Warszawa, Gdynia; On-site; PLN 120,000 - 180,000; Full time

Job summary

AVENGA w Warszawie poszukuje specjalisty ds. danych do projektów ETL i integracji danych. Zadania obejmują projektowanie i budowę procesów ETL oraz tworzenie potoków danych pomiędzy systemami.

Wymagane jest doświadczenie z SQL Serverem i modelowaniem danych, a także znajomość Kafki i API. Mile widziane są umiejętności DB2, Snowflake i przechowywania na S3. Praca wymaga współpracy z zespołem inżynierów i biznesu.

Qualifications

• Wymagane doświadczenie z SQL Server, SQL/PLSQL/TSQL i projektowaniem danych.
• Znajomość modelowania danych i integracji danych.
• Znajomość Kafka i API mile widiana.

Responsibilities

• Projektowanie i budowa procesów ETL oraz potoków danych.
• Zapewnienie niezawodnego udostępniania danych między aplikacjami.
• Zapewnienie jakości, spójności i dostępności danych.
• Monitorowanie i optymalizacja wydajności potoków.
• Współpraca z zespołem inżynierii i biznesowym w zakresie wymagań danych.

Skills

SQL Server

SQL

PL/SQL

Data modeling

Kafka

APIs

Tools

DB2

Snowflake

S3 storage

Job description

Wymagania:

• Data storages (SQL Server - must)- SQL, PL/SQL or TSQL or any database programming SQL- Data modeling- Kafka- APIs

Nice to have:

• DB2- Snowflake and S3 storage- Person who has been building some ETL/Pipelines and understands different techs- The person who understand the Data and Data Landscape.

Codzienne zadania:

• Design and build ETL processes and data pipelines for integrating data across systems


• Enable reliable data sharing between applications


• Ensure data quality, consistency, and availability


• Monitor and optimize pipeline performance


• Collaborate with engineering and business teams on data requirements