Data engineer of recommender systems

Zalando; Berlin; On-site; EUR 75,000 - 110,000; Full time

Benefits offered by this job

Employee shares

Fashion discounts 40%

Lounge discount 30%

Partner discounts

Volunteer days

27 days leave

Relocation support

Family services

Wellbeing options

Mental health support

Biannual reviews

Job summary

Lounge by Zalando ищет инженера по данным для разработки и поддержки крупных конвейеров ETL, потоковой и пакетной обработки, чтобы улучшать персонализацию и рекомендации на глобальном уровне. В команде вы будете работать рядом с backend-инженерами, data scientists и аналитиками над созданием высокопроизводительной инфраструктуры машинного обучения, управлением качеством данных и ускорением инноваций.

Требуется 3+ года опыта в данных, знание Spark/Hadoop/Flink, Python или Java, умение

Qualifications

• Опыт применения инженерных принципов к управлению данными.
• Умение строить масштабируемую инфраструктуру на качественном коде, а не только SQL.
• 3+ года опыта в проектах по данным.
• Понимание распределённых механизмов обработки данных.
• Умение диагностировать и оптимизировать медленно работающие пайплайны.
• Опыт пакетной и/или потоковой обработки на больших данных (Spark, Hadoop, Flink, Storm, Beam, Kafka).
• Умение программировать на Python или Java.
• Плюсом: распределённые БД (DynamoDB, Cassandra, Redis).

Responsibilities

• Разрабатывать, строить и оптимизировать крупномасштабные ETL, стрим и пакетные конвейеры.
• Реализовывать и поддерживать высокопроизводительные хранилища данных для реальных рекомендаций.
• Внедрять и улучшать механизмы управления данными для обеспечения качества и надёжности.
• Ускорять инновации, создавая ML-инфраструктуру, включая фреймворки обучения и эвалюции, эксперименты.
• Сотрудничать с менеджерами продукта, учёными данными, инженерами и аналитиками Zalando.
• Помогать формулировать цели команды.
• Постоянно улучшать самоуправление команды.

Skills

Data engineering

Distributed systems

Python or Java

Batch/stream processing

Data pipeline troubleshooting

Tools

Spark

Hadoop

Flink

Kafka

DynamoDB

Cassandra

Redis

Job description

Описание:

Lounge by Zalando is a rapidly growing part of Zalando, now turning over billions of euros each year. That said, there is so much untapped potential with respect to personalization and recommendation. You will be a data engineer, working alongside backend engineers and data scientists to build large-scale recommender systems. As the largest online fashion retailer in Europe, we require a skilled engineer who can design, build, and maintain Machine Learning pipelines at a global scale.

Задачи:

• Design, build, and optimize large-scale ETL, stream, and batch processing pipelines.
• Implement and maintain high-throughput/low-latency data stores (e.g., for real-time recommendations).
• Implement and improve data governance mechanisms to ensure data quality and reliability.
• Accelerate the pace of innovation by building and improving ML infrastructure, such as training and evaluation frameworks, experimentation frameworks.
• Collaborate with brilliant Product Managers, Data Scientists, Engineers, and Analysts across Zalando to create positive customer impact together.
• Help define our team's objectives.
• Continuously improve the self-organization of the team.

Требования:

• Strong experience applying software engineering principles to data management systems.
• You should be proficient in building robust, scalable data infrastructure using high-quality code — not just SQL.
• 3+ years of experience in data engineering projects.
• Good understanding of distributed data processing mechanisms.
• You should be able to diagnose and optimize a slow-running data pipeline.
• Experience with large-scale batch processing and/or stream processing (e.g. Spark, Hadoop, Flink, Storm, Apache Beam, Kafka.)
• Proficient in either Python or Java.
• Будет плюсом: A strong understanding of distributed databases, especially high-throughput/low-latency data stores (e.g. DynamoDB, Cassandra, or Redis), is highly valued

Условия:

• Employee shares program 40% off fashion and beauty products sold and shipped by Zalando
• 30% off Zalando Lounge
• discounts from external partners
• 2 paid volunteering days a year
• 27 days of vacation a year to start
• Relocation assistance available (subject to prior agreement)
• Family services, including counseling and support
• Health and wellbeing options (including Gympass)
• Mental health support and coaching available
• Drive your development through our training platform and biannual peer-to-peer review