Описание
В Поиске Яндекса есть тематические блоки: картинки, видео, ответы нейросети Алисы, калькулятор и курс валют. Команда развивает офлайн-метрику на основе LLM-разметки релевантности тематических блоков и создаёт инструменты оценки качества генеративного поиска.
Задачи
•Улучшать офлайн-метрику ранжирования тематических блоков
•Исследовать и формулировать проблемы метрики и итогового ранжирования, оцифровывать их и реализовывать способы исправления
•Собирать бенчмарк ранжирования и формировать эталонные оценки
•Строить и поддерживать аналитические модели для оценки качества Поиска
•Принимать новые ML-модели ранжирования
•Собирать наборы запросов для оценки качества поиска
•Создавать дашборды мониторинга качества и выявлять проблемные зоны
•Решать продуктовые и аналитические вопросы и вести сложные проекты
•Внедрять офлайн-сигналы компонентов выдачи в единую офлайн-метрику и улучшать сигналы и процессы вокруг них
Требования
•Опыт руководства или менторства в аналитике
•Умение выстраивать стабильные и прозрачные рабочие процессы
•Глубокие знания математики
Будет плюсом:
•Знание машинного обучения и опыт внедрения моделей
•Участие и победы в олимпиадах по математике, физике или программированию
•Чтение и понимание профильных текстов на английском языке
Условия
Условий в вакансии нет