Задачи:
— Разрабатывать post-training эксперименты с SFT и RL для открытых языковых моделей;
— Создавать reward-функции и верификаторы для сложных юридических задач;
— Отлаживать распределённое обучение и оценивать качество моделей перед выпуском.
Требования:
— Практический опыт post-training LLM с SFT, RL и оптимизацией предпочтений;
— Глубокое понимание ML и опыт надёжного распределённого обучения;
— Сильный Python и опыт разработки production-кода;
— Исследовательский опыт RL для языковых моделей или reward modeling.