Описание
Яндекс Образование создаёт образовательные продукты для школьников, родителей и учителей, а также инструменты для образовательного сообщества. Оно разрабатывает технологичные решения, включая ИИ-инструменты, которые помогают детям осваивать IT-навыки и учиться эффективнее, а взрослым — сопровождать этот процесс.
Задачи
•Разрабатывать инструменты оценки качества моделей
•Выстраивать систему оценки моделей на разных классах задач, адаптировать открытые бенчмарки, разрабатывать собственные и организовывать разметку данных с помощью внешних исполнителей
•Анализировать качество моделей и решений конкурентов
•Проектировать и внедрять метрики для оценки технологий и сравнения моделей в реальных сценариях использования
•Создавать качественные сигналы для обучения вместе с экспертами-разметчиками
•Ускорять и масштабировать разметку с помощью LLM
•Отслеживать и анализировать новые бенчмарки, наборы данных и подходы к сбору данных
•Выбирать перспективные идеи и внедрять их в практику команды
Требования
•Уверенно работать с Python и SQL, знать основные аналитические библиотеки
•Понимать основы статистики и применять их на практике
•Уметь проектировать процессы разметки для удалённых исполнителей
•Понимать, как оценивать сложные агентные ML-пайплайны
•Быть самостоятельным, внимательным к деталям и доводить задачи до результата
Будет плюсом: опыт работы с Толокой или другими краудсорсинговыми платформами, выстраивания процессов разметки с внешними исполнителями и управления командой ML-аналитиков
Условия
•Компенсация от 100М токенов для экспериментов и оптимизации рутины
•Доступ к передовым моделям для ежедневной работы
•Расширенная медицинская страховка с первого месяца работы
•Плановая и неотложная помощь за рубежом, страхование от несчастных случаев и лечение критических заболеваний
•Врачи в клиниках по ДМС, онлайн-консультации с психологами и психотерапия в офисах с соответствующим кабинетом
•Ежегодные медицинские обследования и вакцинация по ДМС
•30 оплачиваемых дней больничного в году с сохранением полной зарплаты
•Плановая стоматология, профессиональная чистка и экстренная помощь за рубежом
•После года работы ДМС покрывает коррекцию зрения и хирургическое лечение косоглазия
•Кабинеты терапевтов есть во всех крупных офисах Яндекса
•Оплата ведения беременности и родов для сотрудниц и жён сотрудников со стажем более двух лет
•Страховка для детей и супругов по системе 80/20: работодатель оплачивает 80% стоимости ДМС
