О компании
MEDvidi — американская платформа ментального здравоохранения на базе ИИ, которая помогает пациентам в более чем 30 штатах получать лечение СДВГ, тревожности, депрессии и других психических расстройств.
Мы ищем AI Product Analyst, который поможет нам оценивать, мониторить и улучшать голосовых ИИ-агентов, которые напрямую взаимодействуют с пациентами и автоматизируют ключевые этапы пути пациента.
Эта роль находится на стыке Product, AI, Engineering и Operations. Вы будете исследовать, как ИИ ведёт себя в продакшене, выявлять паттерны сбоев, измерять качество ИИ и помогать командам принимать более обоснованные продуктовые решения на основе реальных данных.
Чем вы будете заниматься
•Аналитика голосовых ИИ-агентов и систем разговорного ИИ
•Расследование галлюцинаций, несогласованностей, «тихих» сбоев и деградации качества
•Анализ транскриптов звонков, логов диалогов, выходных данных ИИ и операционных датасетов
•Оценка качества ИИ и измерение надёжности
•Построение фреймворков мониторинга и дашбордов для производительности ИИ
•Выявление сдвигов качества, аномалий и новых типов сбоев
•Измерение влияния ИИ на опыт пациентов, операции и бизнес-результаты
•Сотрудничество с командами Product, Engineering, QA и Operations
Что мы ожидаем
•3+ года опыта в Product Analytics, Data Analytics или Operational Analytics
•Уверенное владение SQL
•Python для аналитических расследований и работы с крупномасштабными текстовыми датасетами
•Опыт работы с ML-пайплайнами или продуктами на базе ИИ
•Понимание ограничений LLM, галлюцинаций, чувствительности к промптам и типов сбоев ИИ
•Опыт построения систем мониторинга, аналитических фреймворков или дашбордов
•Сильные коммуникативные навыки и умение переводить инсайты в продуктовые решения
•Свободный русский и английский B2+
•Рабочие часы с пересечением с CET
Будет плюсом
•Опыт работы с разговорным ИИ или ИИ-агентами
•Опыт оценки выходных данных LLM
•Опыт работы с метриками качества ИИ и фреймворками оценки
Почему MEDvidi
•Работа над одним из самых заметных ИИ-продуктов в компании
•Анализ реальных голосовых ИИ-систем, которыми пациенты пользуются каждый день
•Участие в формировании будущего ИИ в здравоохранении
•Высокая автономия и прямое влияние на продуктовые решения
•Полностью удалённое долгосрочное B2B-сотрудничество
•Медицинская страховка, компенсация wellness, оплачиваемый отпуск и больничный
•Индивидуальные уроки английского через Preply
