Data Engineer - AI-Powered B2B GTM Platform

Bain & Company; Warszawa; On-site; PLN 90,000 - 130,000; Full time

Job summary

Enfint в Варшаве ищет опытного Python-разработчика для разработки и поддержки пакетной и потоковой обработки данных в корпоративной среде. Вы будете создавать библиотеки, интегрировать внешние API и внутренние сервисы, обеспечивать качество кода и надёжность пайплайнов.

Требуется глубокое владение Python, опыт работы с ETL/ELT, SQL и облачными сервисами, знание инструментов тестирования и CI/CD, а также умение объяснять компромиссы в архитектуре как техническим, так и бизнес-слушателям.

Qualifications

• 2–4+ лет опыта разработки на Python в продакшн-окружениях и построения ETL/ELT пайплайнов

Responsibilities

• Разрабатывать, собирать и поддерживать пакетные и стриминговые пайплайны на Python
• Писать повторно используемые библиотеки и внутренние пакеты для инженеров и аналитиков
• Разрабатывать Python-сервисы и API для доступа к данным
• Писать тесты и поддерживать CI/CD покрытия
• Профилировать и оптимизировать код и задачи обработки данных
• Развертывать и поддерживать код в облаке с использованием контейнеров и IaC
• Обеспечивать контроль доступа и защиту чувствительных данных
• Идентифицировать и устранять узкие места по производительности и стоимости
• Рефакторить код и пайплайны для упрощения дизайна
• Заменять скрипты ноутбуков на протестированный код

Skills

Python

ETL/ELT pipelines

Pandas/Polars

PyArrow

DuckDB

PySpark

Airflow

Testing with pytest

SQL

Education

Bachelor's degree or equivalent

Tools

Pydantic

AWS SDK

Docker

Kubernetes

dbt

Terraform

GitHub Actions

Job description

Enfint в Варшаве ищет опытного Python-разработчика для разработки и поддержки пакетной и потоковой обработки данных в корпоративной среде. Вы будете создавать библиотеки, интегрировать внешние API и внутренние сервисы, обеспечивать качество кода и надёжность пайплайнов.

Требуется глубокое владение Python, опыт работы с ETL/ELT, SQL и облачными сервисами, знание инструментов тестирования и CI/CD, а также умение объяснять компромиссы в архитектуре как техническим, так и бизнес-слушателям.