DS-инженер репутационной системы

Авито; United States; Remote; USD 22,000 - 37,000; Full time

Benefits offered by this job

ДМС

Страхование жизни

Онкострахование

Психологическая поддержка

Спортивные занятия

Льготы и скидки Авито

Удалённый формат работы

Конкурентная зарплата

Бюджет на обучение

Job summary

Авито приглашает DS-инженера для разработки и поддержки пайплайнов и моделей скоринга коммуникаций, борьбы со спамом и нарушениями на платформе. Ваша задача — полный цикл: анализ данных, обучение моделей, инференс, мониторинг в продакшене, работа в условиях больших нагрузок.

Требуется опыт построения NLP-моделей, владение Python и DS-стеком, работа с DL-фреймворками (PyTorch), умение организовать разметку краудсорсингом и LLM, а также опыт эксплуатации моделей в реальном времени и близком к нему

Qualifications

• Опыт разработки NLP-моделей для классификационных задач.
• Уверенное владение Python и DS-стеком, работа DL-фреймворками (PyTorch).
• Опыт полного цикла ML: данные, модель, продакшен, мониторинг и валидация влияния на бизнес.

Responsibilities

• Проектировать, обучать и внедрять NLP-модели и LLM-пайплайны для детекции подозрительных интентов и паттернов в коммуникациях.
• Экспериментировать с современными методами ML и настраивать разметку данных через краудсорсинг и LLM.
• Встраивать модели в сервисы скоринга, обеспечивать продакшен-исполнение и мониторинг пайплайнов и моделей.
• Проводить A/B-тесты и оценивать влияние решений на бизнес-метрики.

Skills

NLP-модели

Python

DS-стек

DL-фреймворки(PyTorch)

ML lifecycle

краудсорсинг

LLM

prodакшен/мониторинг

MLOps (Kubeflow)

Kubernetes (K8s)

Tools

PyTorch

MLflow

Job description

Описание: Наша команда разрабатывает и поддерживает пайплайны и модели скоринга коммуникаций для определения разных интентов, борьбы со спамом и другими нарушениями, которые влияют на опыт покупателей и продавцов на Авито. Ищем DS-инженера, который будет разрабатывать решения полного цикла: от анализа данных и обучения моделей до инференса и мониторинга в нагруженных продакшен-системах.

Задачи:

проектировать, обучать и внедрять NLP-модели и LLM-пайплайны для детекции подозрительных и нежелательных интентов и паттернов в коммуникациях: от переходов в другие каналы связи до намеренных обфускаций текста в обход проверок Авито экспериментировать с современными методами машинного обучения настраивать сбор разметки и контролировать её качество с помощью асессоров и LLM встраивать модели в сервисы для скоринга, выводить их в продакшен, следить за стабильностью пайплайнов и моделей проводить A/B-тесты, оценивать влияние решений на продуктовые и бизнес-метрики

Требования:

имаете большой опыт в построении NLP-моделей для классификационных задач уверенно владеете Python и DS-стеком, работаете с DL-фреймворками, например PyTorch умеете проводить полный цикл ML-разработки: от работы с данными и моделью до продакшена, мониторинга и проверки влияния работали с разметкой и понимаете, как получить качественные датасеты с помощью краудсорсинга и LLM имеете опыт продакшен-эксплуатации моделей в режиме реального времени и режиме, близком к реальному времени оперируете не только ML-метриками, но и оцениваете влияние разработанного решения на бизнес-метрики, за которые отвечает команда Будет плюсом: имеете опыт применения и тюнинга LLM в прикладных задачах; настраивали LLM-as-a-Judge для оценки качества; проводили A/B-тесты для оценки влияния моделей на бизнес; знакомы с практиками MLOps: Kubeflow, K8s, feature store, MLflow

Условия:

возможность реализовать идеи в проекте с многомиллионной аудиторией масштабный инженерный процесс, где можно участвовать во всех этапах разработки решения интересные развивающие задачи и влияние на продуктовые и бизнес-метрики культура взаимопомощи и обмена опытом прозрачный карьерный трек и инструменты для роста: семинары, менторство, митапы мощное железо, дополнительные мониторы, AI-инструменты и всё, что нужно для продуктивной работы прозрачная система премий и конкурентная зарплата — размер обсудим на собеседовании личный бюджет на обучение, который можно использовать для AI-инструментов, книг, курсов и конференций расширенная забота о здоровье: ДМС, страхование жизни, онкострахование сервис психологической поддержки, а также финансовые, юридические и ЗОЖ-консультации для вас и ваших близких корпоративный спорт: групповые тренировки, велбиинг-приложение спецпредложения от партнёров и скидки на сервисы Авито: бронирование жилья, услуги продвижения, ипотечное страхование компенсация питания удалённый формат работы и комфортный офис рядом с метро «Белорусская»