Описание
Команда метрик Рекламы Яндекса развивает ключевые метрики рекламного продукта, включая приёмочную метрику A/B-экспериментов, и поддерживает более 6000 метрик. Она работает с высоконагруженной распределённой системой, обрабатывает несколько петабайт данных в день и создаёт инструменты для оценки эффективности AI-инструментов разработки.
Задачи
•Разрабатывать метрики для объективной оценки пользы AI-технологий на разных этапах создания новых функций
•Анализировать метрики, чтобы оценивать выгоду от внедрения технологий и находить инсайты
•Создать удобный и быстрый дашборд для оценки эффективности разработки
Требования
•Писать быстрый и надёжный код на Python
•Владеть YQL и оптимизировать запросы под большие объёмы данных
•Хорошо знать математику и статистику
•Корректно оценивать эффекты и понимать физический смысл метрик
•Уметь исследовать и проверять гипотезы на данных: формулировать, рассчитывать и делать выводы
•Интересоваться современными AI-инструментами разработки и понимать, что в них нужно измерять
•Будет плюсом: опыт работы с большими данными и высоконагруженными системами, проектирования и сопровождения метрик, включая дашборды и мониторинги, а также ML/DS-бэкграунд и умение оценивать модели и метрики и понимать источники смещений
Условия
•Расширенная медицинская страховка с первого месяца работы
•Оплачиваемый больничный — 30 дней в году
•Доступ к передовым моделям для ежедневной работы
•Компенсация от 100М токенов для экспериментов и оптимизации рутины
•Оплата ведения беременности и родов для сотрудниц и жён сотрудников, работающих более двух лет
•ДМС для детей и супругов по системе 80/20
