Fintech Data Engineer: Real-Time PostgreSQL & Big Data (Remote)

ALTEN; United States; Remote; USD 46,000 - 62,000; Full time

Benefits offered by this job

Medicover medical care

Medicover dental care

Medicover Benefits platform

Medicover sports card

Referral programme

Pension programme

Group life insurance

Relocation between ALTEN Polska’s офис

Job summary

ALTEN Polska ищет опытного специалиста по PostgreSQL для разработки и поддержки высокопроизводительной платформы данных в финансовом секторе. Ваша работа будет сосредоточена на обработке данных в реальном времени и оптимизации запросов, а также на интеграции источников и ETL-процессов.

Требуется не менее 5 лет опыта с PostgreSQL, знание архитектуры СУБД и умение работать в Linux. Возможна удаленная работа в рамках Польши, с опцией relocate между офисами ALTEN Polska.

Qualifications

• Опыт работы с PostgreSQL не менее 5 лет
• Отличное знание SQL и PL/pgSQL (процедуры, функции, триггеры)
• Опыт проектирования и моделирования данных (реляционное моделирование, нормализация и денормализация)
• Практический опыт оптимизации производительности БД и SQL-запросов
• Умение анализировать планы выполнения запросов и настраивать индексы
• Знание архитектуры PostgreSQL, шардинг таблиц и индексы B-Tree, Hash, GIN, GiST, BRIN
• Опыт работы с Materialized Views, VACUUM, ANALYZE, autovacuum и мониторингом производительности БД
• Практические знания ETL-процессов и интеграций
• Опыт работы с большими данными и средами Big Data
• Знание Linux
• Умение проектировать масштабируемые и высокодоступные платформы данных
• Будет плюсом: Python; Kafka или RabbitMQ; Apache Airflow; Знание CI/CD; Опыт в банковском/финансовом секторе

Responsibilities

• Проектирование, разработка и поддержка высокопроизводительной платформы данных для финансового рынка (FX)
• Создание решений на базе PostgreSQL для обработки данных в реальном времени
• Моделирование и проектирование структур данных
• Оптимизация производительности баз данных и SQL-запросов
• Создание и поддержка процедур, функций и триггеров на PL/pgSQL
• Интеграция источников данных и ETL-процессов
• Обработка больших объемов данных (около 40 млн сообщений в день)
• Участие во внедрении платформы с RabbitMQ и другими технологиями потоковой передачи
• Мониторинг производительности окружения PostgreSQL
• Обеспечение высокой доступности, масштабируемости и устойчивости платформы данных
• Поддержка бизнес-команд, которым нужен доступ к данным почти в реальном времени

Skills

PostgreSQL

SQL/PLpgSQL

Data modelling

Query optimization

Linux

ETL

Big Data

RabbitMQ

Kafka

Python (плюс)

CI/CD

Tools

Materialized Views

VACUUM/ANALYZE/autovacuum

Job description

ALTEN Polska ищет опытного специалиста по PostgreSQL для разработки и поддержки высокопроизводительной платформы данных в финансовом секторе. Ваша работа будет сосредоточена на обработке данных в реальном времени и оптимизации запросов, а также на интеграции источников и ETL-процессов.

Требуется не менее 5 лет опыта с PostgreSQL, знание архитектуры СУБД и умение работать в Linux. Возможна удаленная работа в рамках Польши, с опцией relocate между офисами ALTEN Polska.