Data scientist in support automation

Авито; United States; Remote; USD 120,000 - 190,000; Full time

Benefits offered by this job

ДМС

Страхование жизни

Онкострахование

Психологическая поддержка

Менторство и семинары

Корпоративный спорт

Скидки на сервисы Авито

Job summary

Авито ищет специалиста в команду Support Automation для разработки и развёртывания масштабируемых RAG‑сетей и мульти‑агентных решений. Ваша роль — строить и улучшать системы обработки обращений, настраивать промпты и инференс моделей, обеспечивать надежность и снижение ошибок в продакшене.

Требуется опыт работы с NLP в продакшене, знание PyTorch, Docker и агентных библиотек. Ожидается участие в A/B тестировании и анализе бизнес‑метрик.

Qualifications

• Не менее 2 лет работали в Data Science в NLP-домене и оценивали качество систем в продакшене.
• Опыт построения AI-агентных систем и работы с NLP-задачами в продакшене.
• Пишете поддерживаемый, тестируемый и масштабируемый код на Python.
• Знаете PyTorch, pandas, NumPy и Docker.
• Работали с агентными библиотеками: ADK, LangGraph, PydanticAI или аналогами.
• Опыт работы с self-hosted LLM 8B+ в продакшен-задачах.
• Понимаете ML-алгоритмы и архитектуры нейронных сетей; умеете организовать разметку при необходимости.
• Знания SQL и способности извлекать данные для анализа.

Responsibilities

• Развивать и поддерживать RAG‑систему поддержки: retrieval и generation.
• Обеспечивать безопасность процессов: гардрейлы, надёжность и снижение галлюцинаций.
• Разрабатывать мультиагентные системы и оптимизировать промпты и инференс.
• Анализировать эффективность решений по историческим данным и офлайн-метрикам.
• Экспериментировать с SOTA методами ML там, где это обосновано бизнесом.
• Разрабатывать и внедрять модели тематики обращений: 500+ интентов, расширение и объединение.
• Поддерживать и улучшать модели и эвристики для классификаций и онлайн-инференса LLM.
• Проектировать сквозные ML-решения и проводить A/B тесты совместно с аналитиками.
• Отслеживать деградации метрик в продакшене и реагировать на изменения.

Skills

NLP

Python

ML/DL

Pytorch

Pandas

NumPy

SQL

RAG-системы

LLM-агенты

Агентная разработка

Education

Высшее образование в области прикладной математики/статистики/ML

Tools

ADK

LangGraph

PydanticAI

Self-hosted LLM 8B+

Docker

Job description

Описание:

О команде: Юнит Support Automation разрабатывает и развивает внутренние сервисы и инструменты, которые помогают автоматизировать работу с пользовательскими обращениями в поддержку. Команда отвечает за метрики эффективности систем автоматизации и удовлетворённости пользователей в автоматизированной части потока.Юнит состоит из кросс-функциональных команд, которые работают с разными этапами обработки обращений: первичной классификацией, RAG-системами, LLM-агентами и оценкой автоматизированных сценариев.

Задачи:

строить и улучшать RAG-систему поддержки: retrieval- и generation-части настраивать и поддерживать безопасность процесса: создавать гардрейлы, обеспечивать надёжность работы и снижать риск галлюцинаций разрабатывать мультиагентные системы, которые помогают пользователям решать вопросы по определённой теме обращения, оптимизировать промпты и инференс моделей анализировать эффективность решений на исторических данных и в продакшене с учётом офлайн-метрик качества решения ML-задач и бизнес-метрик экспериментировать с SOTA-методами машинного обучения, когда их применение оправдано задачей разрабатывать и внедрять модели для определения тематики обращений пользователей: более 500 интентов, которые постоянно расширяются новыми и объединяются друг с другом поддерживать и улучшать существующие модели и эвристики для разных классификаций обращений: от простых правил и эвристик до ML-систем с онлайн-инференсом LLM-моделей проектировать и внедрять сквозные ML-решения, а также готовить дизайн и запускать A/B-тесты совместно с аналитиками отслеживать деградации и изменения метрик в продакшене

Требования:

не менее 2 лет работали в Data Science в NLP-домене строили RAG-системы и оценивали их качество в продакшене понимаете принципы построения AI-агентных систем имеете опыт работы с NLP-задачами в продакшене внедряли ML-модели в продакшен пишете поддерживаемый, тестируемый и масштабируемый код на Python владеете стеком PyTorch, pandas, NumPy, Docker работали с агентными библиотеками: ADK, LangGraph, PydanticAI или аналогами работали с self-hosted LLM 8B+ в продакшен-задачах понимаете ML-алгоритмы: классические подходы и основные архитектуры нейронных сетей используете агентную разработку в рабочих задачах или пет-проектах знаете, как при необходимости организовать разметку, в том числе с помощью LLM Будет плюсом: работали с разными модальностями данных и понимаете, какие методы ML/DL применимы в конкретных бизнес-задачах; получили высшее образование в области прикладной математики, статистики, ML или в смежных областях; уверенно владеете SQL и умеете извлекать необходимые данные для анализа и обучения моделей; умеете оценивать качество моделей при запуске нового проекта и отслеживать его изменение во времени; при запуске модели учитываете не только ML-метрики, но и влияние решения на бизнес-метрики, за которые отвечает команда; имеете опыт автоматизации поддержки или похожих бизнес-процессов

Условия:

возможность влиять на пользовательский опыт и развивать ML-продукты Авито исследовательские и инженерные задачи в продуктах Support Automation культура взаимопомощи и обмена опытом в DS-сообществе прозрачный карьерный трек и инструменты для роста: семинары, менторство, митапы мощное оборудование, AI-инструменты и всё, что нужно для продуктивной работы расширенная забота о здоровье: ДМС, страхование жизни, онкострахование сервис психологической поддержки, а также финансовые, юридические и ЗОЖ-консультации для вас и ваших близких корпоративный спорт: групповые тренировки, велбиинг-приложение спецпредложения от партнёров и скидки на сервисы Авито: бронирование жилья, услуги продвижения, ипотечное страхование компенсация питания