Описание
Команда развивает способности Alice AI LLM и обучает модели решать сложные задачи. Она работает над сценариями рассуждений, написания кода и использования инструментов, чтобы сделать Алису экспертным ассистентом.
Задачи
•Развивать рассуждающую модель
•Собирать и поддерживать конвейеры генерации сред для RL
•Стабилизировать RL-обучение модели на траекториях из сотен вызовов инструментов
•Разбирать ошибки модели на сложных фактических запросах и преобразовывать результаты анализа в сигнал для обучения
•Проводить эксперименты по настройке рассуждающих моделей: формулировать гипотезы, анализировать результаты и выбирать дальнейшие шаги
•Взаимодействовать с аналитиками для построения стабильных измерений
•Искать возможности для развития инфраструктуры
•Экспериментировать с перспективными идеями и выбирать масштабируемые подходы для достижения целей
Требования
•Уверенно программировать на Python и иметь опыт внедрения исследовательских конвейеров в промышленную среду
•Хорошо разбираться в LLM и иметь опыт работы в NLP/DL
•Уметь формулировать гипотезы и выстраивать эксперименты для их проверки
•Быть готовым работать в условиях неопределённости и выбирать приоритетные направления
Будет плюсом
•Файн-тюнинг или RL больших языковых моделей
•Опыт глубоких исследований в AI или количественных исследованиях
•Создание сложных тестов для языковых моделей
•Публикации по языковым моделям и/или RL
Условия
Условий в вакансии нет