Python ML Engineer: LLMs, RL & SFT Research

Centicore Group; United States; Hybrid; USD 150,000 - 190,000; Full time

Job summary

Centicore ищет инженера по исследованиям с фокусом на обучении больших языковых моделей. Вам предстоит проводить SFT, дообучение и адаптацию моделей, экспериментировать с RL и GRPO, подготавливать данные и оценивать результаты.

Также будет работать над адаптацией моделей под русский язык и задачам text-to-SQL и reasoning-SQL. Требуется знание архитектуры трансформеров, практический опыт Python/PyTorch, умение работать с репозиториями и воспроизводимыми экспериментами.

Qualifications

• Понимать архитектуру трансформеров и механику обучения.
• Иметь практический опыт SFT и RL для LLM, понимать сигналы вознаграждения и ограничения методов.
• Уметь обосновывать настройки LoRA и сравнивать подходы (DPO, PPO, GRPO).
• Уметь читать и разбирать научные статьи, воспроизводить подходы.

Responsibilities

• Проводить SFT, дообучение и адаптацию моделей с помощью адаптеров.
• Проводить эксперименты с RL, включая GRPO, и оценивать результаты.
• Подготавливать данные, делать абляции и разбирать ошибки.
• Адаптировать модели к русскому языку и RL-задачам в text-to-SQL и reasoning-SQL.
• Выравнивать модели для вызова инструментов на MCP-серверах.

Skills

Transformers

RL for LLM

Experiment design

Reading papers

Tools

Python

PyTorch

LoRA

Job description

Centicore ищет инженера по исследованиям с фокусом на обучении больших языковых моделей. Вам предстоит проводить SFT, дообучение и адаптацию моделей, экспериментировать с RL и GRPO, подготавливать данные и оценивать результаты.

Также будет работать над адаптацией моделей под русский язык и задачам text-to-SQL и reasoning-SQL. Требуется знание архитектуры трансформеров, практический опыт Python/PyTorch, умение работать с репозиториями и воспроизводимыми экспериментами.