О проекте
Яндекс Образование занимается разработкой и предоставлением образовательных ресурсов и программ и активно внедряет ИИ в свои продукты. Нейросеть объясняет темы, подбирает задания, проверяет ответы, помогает увидеть пробелы и выстраивает дальнейшую подготовку. Чтобы эта работа была корректной и действительно полезной, её качество проверяет команда разметки.
Ищем шеф-редактора — лида ИИ-тренеров по русскому языку. Вы будете отвечать за ИИ-контент для школьников 5–11-х классов. Это не про уроки, а про предметную экспертизу. Большая часть задач связана с контролем качества ИИ-контента и работы команды. Нужно уметь посмотреть на спорное задание, принять решение, объяснить его разметчику и понять, единичная это проблема, или правило в инструкции нужно уточнить для всей команды.
Задачи
Проведение ревью разметки ИИ-контента по русскому языку и поиск системных ошибок
Вы будете проверять задания, объяснения, ответы модели и обратную связь, которую она даёт ученику. Надо принимать решения в спорных случаях, когда задание выглядит нормальным, но на самом деле неоднозначно, не проверяет заявленный навык или допускает несколько ответов. Также нужно будет выявлять повторяющиеся проблемы и передавать их команде продукта и ML. Предстоит улучшать критерии оценки, когда на реальных примерах оказывается, что существующего правила недостаточно.
Отслеживание соответствия материалов школьной программе и экзаменационным форматам
Одна из ваших задач — проверять, что материалы корректно готовят ученика к ОГЭ и ЕГЭ: условие, правильный ответ, критерии, объяснение и соответствие проверяемому умению. Нужно работать с заданиями в экзаменационном формате, тренировочными заданиями по темам, объяснениями правил, разборами ошибок ученика и проверкой рукописных работ по фото.
Проведение калибровки разметчиков и разбор расхождений
Вы будете помогать команде одинаково применять критерии оценки: разбирать расхождения между разметчиками и ревьюерами, собирать сложные и пограничные случаи и превращать их в понятные правила и примеры для инструкции.
Управление командой
Нужно будет распределять нагрузку, следить за соответствием компетенции исполнителей назначаемым заданиям, а также мониторить качество и скорость разметки, работать над её улучшением.
Экспертиза и ревью
Вам предстоит смотреть на материал сразу с двух сторон: корректен ли русский язык и помогает ли это конкретной учебной задаче ребёнка. Вы будете принимать решения, объяснять их разметчикам и влиять на качество продукта в целом.
Ожидаем, что вы
•Работали методистом, преподавателем или редактором образовательного контента
•Отлично знаете русский язык и школьную программу 5–11-го классов
•Понимаете формат ОГЭ и ЕГЭ по русскому языку
•Имеете опыт разметки данных, ревью разметки или контроля качества
•Умеете замечать неоднозначное в заданиях и формулировках
•Готовы принимать решения в спорных случаях и аргументировать их
•Способны объяснять свои решения разметчикам понятно и без конфликтов
•Умеете видеть системные проблемы и превращать их в правила и инструкции
•Внимательны к деталям, но при этом не теряете общую картину
•Готовы работать с большим объёмом контента и соблюдать сроки
Будет плюсом
•Работали с ИИ-контентом
•Готовили школьников к экзаменам по русскому языку
•Составляли или проверяли экзаменационные задания
Условия
•Официальное трудоустройство по ТК РФ
•Полностью удалённая работа из любого региона РФ, график 5/2 с 10 до 19 часов (мск) с перерывом на обед
•Реальная возможность влиять на продукт: вы будете не просто выполнять задачи, а участвовать в развитии образовательных ИИ-продуктов для десятков тысяч школьников
•Команда, с которой интересно, — мы не про формальности, а про результат. Если у вас есть идея, как улучшить процесс, — её услышат и обсудят
