Сбер

rl engineer для VLM

Коротко

Роль RL-инженера в команде GigaChat Vision, занимающейся полным циклом обучения VLM-моделей: разработка RL-подходов (RLHF, GRPO, PPO), проектирование reward-функций, работа с данными для RL и развитие системы оценки качества reasoning. Компания — крупный банк (Сбер) с собственной командой DS&AI. Требуется глубокий практический опыт RL для LLM/VLM, распределённого обучения (DeepSpeed, FSDP) и умение работать в условиях неопределённости на уровне senior. Формат — удалённая работа по РФ.

Описание
GigaChat Vision — команда, которая занимается полным циклом обучения VLM-моделей.
Задачи
•Разрабатывать и улучшать RL-подходы для обучения VLM/LLM-моделей: выбирать алгоритмы, ставить эксперименты и анализировать результаты
•Проектировать reward-функции и пайплайны обучения, выстраивать стратегии масштабирования под разные домены и сценарии, влиять на метрики качества
•Определять требования к данным для RL, участвовать в создании пайплайнов сбора, фильтрации и подготовки датасетов
•Развивать систему оценки качества reasoning: внедрять и улучшать метрики в существующем eval-фреймворке, предлагать новые способы измерения качества
•Работать на стыке с Pretrain, SFT и Infra, обеспечивать согласованность решений и перенос экспериментов в производственный пайплайн
•Следить за развитием области и переводить идеи из статей в проверяемые эксперименты и инженерные решения
•Разбирать технические задачи, отлаживать эксперименты и аномалии в обучении, находить узкие места и доводить решения до результата
•Делиться экспертизой с командой, участвовать в проверке кода и помогать улучшать качество решений и подходы к экспериментам
•Развивать инфраструктуру для RL
Требования
•Глубокое понимание RL для LLM/VLM и практический опыт с RLHF, GRPO и PPO
•Понимание полного цикла обучения VLM/LLM: pretrain, SFT и RL, а также влияния решений на каждом этапе на итоговые метрики
•Опыт распределённого обучения с DeepSpeed и FSDP, а также с фреймворками inference
•Практический опыт постановки, проведения и анализа RL-экспериментов
•Умение самостоятельно решать сложные технические задачи в условиях неопределённости
•Умение выстраивать процессы в условиях неопределённости
•Опыт взаимодействия со смежными командами и заинтересованными сторонами
•Системное мышление: способность видеть весь цикл от данных и проектирования reward до оценки и производственных метрик
Будет плюсом
•Опыт менторинга или технического лидерства в отдельных проектах
•Публикации или вклад в открытые проекты по RL/LLM/VLM
•Опыт вывода моделей, обученных с RL, в производство и поддержки их качества
Условия
•Доступ к сообществу DS&AI, объединяющему более 600 специалистов банка
•Дайджест последних разработок в DS&AI и отчёты с крупнейших конференций мира
•Возможность быть соавтором научно-исследовательских работ и статей для международных конференций
•Ежегодный пересмотр зарплаты и годовая премия
•Корпоративный спортзал и зоны отдыха
•Более 400 образовательных программ СберУниверситета для профессионального и карьерного развития
•Расширенная ДМС, льготное страхование для семьи и корпоративная пенсионная программа
•Ипотека на более выгодных условиях — до 7%
•Бесплатная подписка СберПрайм+, скидки на продукты компаний-партнёров
•Вознаграждение за рекомендацию друзей в команду Сбера

Хватит откликаться.
Получите рекомендацию.

$10 стартовых кредитов

Всего 60 секунд, полностью на автопилоте — AI-агенты Eraldt читают ваше резюме, определяют подходящие роли, находят живые вакансии и людей, которые могут вас порекомендовать, пишут им личные письма и добиваются рекомендации.

Это не отклик на вакансию: резюме не уходит в компанию, а рекомендацию именно по этой роли мы не обещаем.

Посмотрите, кто ещё получает интервью на автопилоте