data engineer for the data platform

Nexters; United States; Remote; USD 120,000 - 180,000; Full time

Benefits offered by this job

Medical care program

Paid vacation and sick leave

Relocation package

Online English courses

Job summary

Nexters — международная компания по разработке игр, ищет инженера данных для проектирования и разработки пакетных и потоковых пайплайнов. Важна сильная экспертиза SQL и Python, опыт работы с Spark/PySpark и Kafka, а также владение инструментами Airflow. Условия включают развитие data lake/warehouse и обеспечение качества данных.

Кандидат будет взаимодействовать с аналитиками, маркетингом, платформой и бэкендом, работать над улучшением производственных пайплайнов и наблюдаемостью данных.

Qualifications

• Сильные навыки SQL и Python.
• Опыт создания ETL/ELT конвейеров.
• Практический опыт Spark/PySpark, особенно в потоковой обработке.
• Понимание распределённых систем обработки и хранения.
• Опыт с архитектурами data lake и data warehouse.
• Опыт с Delta-таблицами, Parquet и S3.
• Опыт с инструментами оркестрации типа Airflow.
• Опыт работы с Kafka и потоковыми конвейерами.
• Опыт поддержки и улучшения production-пайплайнов.
• Опыт мониторинга и обеспечения качества данных.

Responsibilities

• Проектирование и разработка пакетных и потоковых конвейеров данных.
• Построение и поддержка ввода данных из внутренних и внешних источников.
• Разработка и развитие моделей data lake и data warehouse.
• Оптимизация Spark‑задач обработки данных.
• Разработка и сопровождение моделей dbt и контрактов данных.
• Внедрение и поддержка мониторинга, observability и проверок качества.
• Работа с потоковыми конвейерами на базе Kafka.
• Сотрудничество с аналитикой, маркетингом, платформой и бэкендом.

Skills

SQL

Python

ETL/ELT

Spark/PySpark

Distributed data processing

Data lake/Data warehouse

Delta tables/Parquet/S3

Airflow

Kafka

Observability/Quality data

Tools

Airflow

Kafka

Delta Lake

Parquet

S3

Spark

PySpark

Job description

Описание

Nexters is an international game development company.

Задачи

• Design and develop batch and streaming data pipelines
• Build and maintain data ingestion from internal and external sources
• Develop and evolve data lake and data warehouse models
• Optimize Spark-based data processing jobs
• Develop and maintain dbt models and data contracts
• Implement and support monitoring, observability, and data quality checks
• Work with Kafka-based streaming pipelines
• Collaborate with analytics, marketing, platform, and backend teams

Требования

• Strong SQL and Python skills
• Production experience building ETL/ELT pipelines
• Hands-on experience with Spark/PySpark, especially in streaming scenarios
• Understanding of distributed data processing and storage systems
• Experience with data lake and data warehouse architectures
• Practical experience with Delta tables, Parquet, and S3
• Experience with orchestration tools such as Airflow or similar
• Experience with Kafka and streaming pipelines
• Experience maintaining and improving production-grade data pipelines
• Experience with observability, monitoring, and data quality practices

Условия

• Medical care program, including dental service, or medical care compensation, available wherever you work
• Paid vacation days and sick leave
• Relocation package available for official locations
• Online English language courses available