Описание
Команда обучает мультимодальные модели понимать визуальный контекст, следовать инструкциям и работать на уровне продуктового качества.
Задачи
•Развивать RL и RLHF для мультимодальных моделей
•Внедрять решения в пайплайн RLHF, чтобы поведение модели было предсказуемым, полезным и безопасным
•Учить модели рассуждать над сложным визуальным контекстом: разбирать документы, таблицы, графики и интерфейсы, распознавать текст и следовать многошаговым инструкциям
•Собирать данные для рассуждений и экспериментировать с данными UG и обратной связью от ИИ
•Ускорять генерацию во время обучения и профилировать узкие места
•Ускорять проведение экспериментов и обеспечивать эффективное использование GPU
Требования
•Отлично знать классические методы машинного обучения, NLP и компьютерное зрение
•Понимать устройство современных LLM или VLM и иметь опыт решения прикладных задач с их помощью либо соответствующий исследовательский опыт
•Иметь опыт работы с RL или RLHF, постобучением или мультимодальными рассуждениями либо быть готовым быстро освоить эти направления
•Следить за тенденциями в области LLM и VLM, отличать работающие практики от хайпа и быстро реализовывать новые идеи
Будет плюсом
•Опыт работы с задачами на рассуждение, постобучением или RLHF/alignment
•Опыт работы с OCR и пониманием документов, таблиц и графиков
•Обучение больших моделей или масштабных систем машинного обучения
•Понимание ограничений современных VLM и интерес к тенденциям мультимодальных рассуждений
Условия
•Компенсация от 100М токенов для экспериментов и оптимизации рутины
•Доступ к передовым моделям для ежедневной работы
•Расширенная медицинская страховка с первого месяца работы
•Оплачиваемый больничный: 30 дней в году с полной зарплатой
•Медицинская страховка для детей и супругов по системе 80/20: работодатель оплачивает 80% стоимости
