data engineer

СИНЕРГИЯ; United States; Remote; USD 85,000 - 125,000; Full time

Benefits offered by this job

Социальные гарантии

Комфортные кафе и столовые

Корпоративный фитнес

Наставничество и адаптация

Job summary

СИНЕРГИЯ ищет специалиста по разработке API и обработке данных для внутренних сервисов. Ваша работа будет включать создание пайплайнов, работу с SQL-базами и различными API, а также рефакторинг инструментов тестирования SQL-кода.

Требуется опыт работы с брокерами сообщений (RabbitMQ, Kafka, NATS), знание Git и контейнеризации (Docker/Docker Compose). Официальное трудоустройство и поддержка сотрудников.

Qualifications

• Опыт работы с SQL и Python для ETL/ELT проектов.
• Умение разрабатывать и интегрировать API.
• Опыт работы с брокерами сообщений (RabbitMQ, Kafka, NATS).
• Владение Git и системами контроля версий.

Responsibilities

• Разработка API для получения данных из витрин отчетности.
• Рефакторинг утилиты по тестированию SQL кода.
• Работа с хранилищами данных: MS SQL, MySQL, PostgreSQL.
• Работа с неструктурированными данными и интеграция с внешними сервисами.
• Создание пайплайнов для анализа данных и автоматизации процессов.

Skills

SQL

Python

API development

ETL/ELT

Git

Data processing

Tools

RabbitMQ

Kafka

NATS

Docker

Docker Compose

GitLab

Job description

Описание:

Описания нет

Задачи:

Разработка API для получения данных из витрин отчетности Рефакторинг утилиты по тестирования SQL кода Работа с хранилищами данных (MS SQL, MySQL, PostgeSQL) Работа с неструктурированными данными Разработка API для интеграции с внутренними и внешними сервисами с использованием языка python Создание пайплайнов для обработки и анализа данных Сбор и анализ требований Работа с системой контроля версий (GitLab) Подготовка документации Работа с брокерами сообщений Автоматизация и оптимизация бизнес процессов Создание, поддержка, рефакторинг ETL\ELT процессов Создание процессов автоматического тестирования и валидация данных.

Требования:

Будет плюсом: Умение и понимание работы с SQL; опыт работы с базами данных из python (в контексте любых проектов, но желательно ETL/ELT); опыт работы с различными API (отправка запросов, обработка ответов); опыт работы с брокерами (любыми: RabbitMQ/Kafka/NATS) на уровне чтения/записи; опыт разработки API как преимущество; отслеживание версионности: git; управление окружениями: anaconda3(miniconda3) / uv; docker/docker-compose на уровне написания сборки простых контейнеров (как преимущество)

Условия:

Официальное трудоустройство: оформление с полным пакетом социальных гарантий, включая отпуск и больничные Комфортные кафе и столовые: уютные пространства для общения с коллегами за чашкой кофе, обсуждения совместных проектов и последних корпоративных новостей Уникальная атмосфера в команде: разнообразие поколений и культур, способствующее созданию вдохновляющей рабочей среды Инвестиции в ваше будущее: повышение компетенций и внедрение лучших мировых практик для вашего профессионального роста Возможность посещения бизнес-мероприятий: участие в мероприятиях, способствующих расширению профессиональных связей и знаний Корпоративные фитнес-услуги: на площадке корпорации доступны фитнес-залы, залы для занятий йогой, SPA-центры и массажные кабинеты с персональной скидкой для сотрудников Поддержка на этапе адаптации: вас будет сопровождать наставник и руководитель, которые помогут вам бережно интегрироваться в коллектив.