Data engineer in FX

emagine; Warszawa; Hybrid; PLN 179,000 - 248,000; Full time

Job summary

emagine приглашает специалистов по данным для проектирования и разработки высокопроизводительных платформ данных в финансовой области. Ваша задача — строить Data Lake/Data Warehouse, интегрироваться с торговыми системами и обеспечивать высокую доступность систем.

Требуется более 5 лет опыта работы с PostgreSQL, глубокие знания SQL и моделирования данных; приветствуется знание Python, Kafka/Airflow и CI/CD, опыт в банковской отрасли.

Qualifications

• Требуется опыт работы с PostgreSQL не менее 5 лет.
• Надежное знание SQL и моделирования данных.
• Опыт оптимизации производительности БД и интеграций ETL.
• Опыт работы в банковской или финансовой отрасли.

Responsibilities

• Проектирование и разработка высокопроизводительных платформ данных для финансового рынка.
• Архивирование данных с многолетним хранением.
• Создание Data Lake и Data Warehouse.
• Интеграция с банковскими и торговыми системами.
• Разработка HA-решений и обеспечение доступности.
• Наставничество младших разработчиков и работа в Agile.

Skills

SQL

Data modeling

Linux

Banking industry

ETL

CI/CD

Python

Kafka

Airflow

Education

Высшее техническое образование

Tools

PostgreSQL

Airflow

Kafka

RabbitMQ

Job description

Описание:

The purpose of this role is to design and develop high-performance data platforms for the financial market, supporting analytical processes for the FX market.

Задачи:

• Designing and developing data platforms that process hundreds of messages per second.
• Archiving data with multi-year retention.
• Building a Data Lake and Data Warehouse.
• Integrating with financial and trading systems.
• Creating high-availability (HA) solutions.
• Developing solutions that support risk management.
• Mentoring junior developers, supporting analysts and business teams, and participating in Agile projects.

Требования:

• At least 5 years of experience working with PostgreSQL.
• Very good knowledge of SQL.
• Experience in data modeling.
• Knowledge of PL/pgSQL (procedures, functions, triggers).
• Experience in database performance optimization.
• Practical knowledge of ETL integrations.
• Experience working with large volumes of data.
• A higher technical education.
• Knowledge of Linux.
• Experience in the banking industry.
• Будет плюсом: Knowledge of Python;
• Knowledge of Kafka or RabbitMQ;
• Experience with Apache Airflow;
• CI/CD skills;
• Experience in the banking or financial sector

Условия:

• Hybrid: at most 2–3 times per month at the office in Warsaw.
• Contract: B2B, 12 months + possible extensions.
• Rate: max. 145 PLN net per hour + VAT.