Tripadvisor

Менеджер программы обеспечения качества ИИ

Коротко

Менеджер программы обеспечения качества ИИ в Tripadvisor гарантирует надежную и точную работу ИИ-систем в туристических продуктах компании: создает рамки тестирования, аудирует результаты ИИ, отслеживает метрики и отчитывается перед руководством. Требуется 4–6 лет опыта в техническом управлении программами, QA или операциях с продуктами ИИ/ML, а также глубокая экспертиза в оценке ИИ/LLM и способность превращать данные в инсайты для бизнеса. Роль предполагает тесное взаимодействие с командами Data Science, AI Engineering, Product и CX. Работа в гибридном формате с присутствием в офисе Лондона 2-3 дня в неделю.

О компании Tripadvisor
Группа Tripadvisor соединяет людей с впечатлениями, которыми стоит поделиться, и стремится стать самым надежным источником информации о путешествиях и впечатлениях в мире. Мы используем наши бренды, технологии и возможности, чтобы связывать нашу глобальную аудиторию с партнерами через насыщенный контент, рекомендации по путешествиям и двусторонние торговые площадки для впечатлений, проживания, ресторанов и других категорий путешествий. Дочерние компании Tripadvisor, Inc. (Nasdaq: TRIP) включают портфель туристических брендов и бизнесов, включая Tripadvisor, Viator и TheFork.
Менеджер программы обеспечения качества ИИ гарантирует, что все системы искусственного интеллекта в рамках туристических впечатлений Tripadvisor работают надежно, точно и в соответствии с бизнес-целями. Занимая позицию на пересечении производительности ИИ, удовлетворенности путешественников и разработки продукта, вы будете создавать тестовые рамки, проводить аудит результатов ИИ и превращать выводы по качеству в практические операционные инсайты. Вы будете управлять отслеживанием производительности, устранять препятствия для межфункциональных команд и регулярно отчитываться перед руководством о точности ИИ, показателях успеха и планах улучшений.
Место работы: гибридный формат
Эта роль предполагает гибридный формат работы с необходимостью присутствия 2-3 дня в неделю/месяц в нашем офисе в Лондоне.
Основные обязанности
•Определение стратегии качества в эпоху ИИ: создание комплексной системы качества от начала до конца, охватывающей как человеческих агентов, так и ИИ-агентов, развитие QA от традиционного выборочного аудита к непрерывному управлению качеством с использованием ИИ.
•Создание рамок качества и тестирования ИИ: проектирование и поддержка комплексных эталонов оценки, протоколов тестирования и рабочих процессов с участием человека (HITL) для проверки корректной работы ИИ-агентов, ботов поддержки и рекомендательных систем.
•Аудит результатов ИИ и взаимодействий с путешественниками: постоянная оценка результатов, сгенерированных ИИ (например, автоматические чаты поддержки, точность рекомендаций туров и обновления бронирований) на предмет выполнения намерений, безопасности, тона и предотвращения галлюцинаций.
•Обеспечение бизнес-обновлений и инсайтов: подготовка отчетов для руководства, которые переводят сложные данные оценки QA, показатели точности моделей и тенденции ошибок в стратегические рекомендации для бизнес-лидеров.
•Руководство межфункциональными улучшениями ИИ: тесное сотрудничество с командами Data Science, AI Engineering, Product и CX для оперативного внедрения улучшений, тонкой настройки моделей и обновления базы знаний на основе результатов QA.
•Поддержание темпа релизов: отслеживание сроков проектов по внедрению новых ИИ, управление графиками регрессионного тестирования QA и обеспечение соблюдения техническими командами стандартов качества перед полномасштабным запуском для путешественников.
Требования
•Опыт: 4–6 лет в техническом управлении программами, управлении QA или операциях с продуктами ИИ/машинного обучения с фокусом на надежность систем и оценку.
•Экспертиза в оценке ИИ: глубокие знания методологий тестирования ИИ/LLM, оценки подсказок, точности распознавания намерений и мер безопасности ИИ.
•Доставка инсайтов на основе данных: подтвержденная способность анализировать логи ИИ, использовать аналитические инструменты и превращать метрики качества в понятные презентации и дашборды для руководства.
•Межфункциональное сотрудничество: отличный опыт взаимодействия технических команд ИИ с бизнес-стейкхолдерами и операциями поддержки путешественников на передовой.
•Понимание отрасли: глубокий интерес к онлайн-туризму, поведению путешественников и поддержанию высокого уровня доверия в взаимодействиях с потребительским ИИ.
Желательные квалификации
•Практический опыт работы с современными инструментами оценки LLM, платформами аннотирования или инструментами ИИ для обслуживания клиентов (например, Zendesk AI, Intercom, Salesforce).
•Опыт работы в туристических технологиях, торговых площадках электронной коммерции или быстрорастущих потребительских платформах.
Что мы предлагаем
•Конкурентоспособные пакеты вознаграждения (регулярно сравниваемые с последними отраслевыми данными), включая базовую зарплату и ежегодные бонусы
•«Работайте по-своему» с гибкостью, соответствующей вашему образу жизни. Группа Tripadvisor придерживается удаленного подхода к сотрудничеству в глобальной команде с возможностью приходить в офис так часто, как вы хотите или как требует ваша команда.
•Гибкий график. Баланс между работой и личной жизнью заложен в нашей культуре по замыслу. Доверие и ответственность делают это возможным.
•Сопоставление пожертвований. Мы ежегодно сопоставляем квалифицированные благотворительные пожертвования.
•Помощь в обучении. Ежегодная поддержка для квалифицированных программ.
•Лайфстайл-бенефит. Ежегодное пособие для личных расходов — на путешествия, здоровье или что угодно по вашему выбору.
•Путешественнические привилегии: скидки и другие бонусы.
•Программа поддержки сотрудников с ресурсами и программами, помогающими справляться с жизненными трудностями.
•Медицинское страхование с отличным покрытием и конкурентоспособными страховыми взносами.
•Щедрая программа рекомендаций с вознаграждениями за успешные рекомендации кандидатов.
Наши культурные столпы
Путешественник прежде всего — мы существуем, чтобы создавать ценность для нашего клиента — путешественника. Мы помогаем нашим поставщикам и партнерам раскрывать эту ценность. Их коллективное поведение и инсайты движут нами.
Исполнение — наше преимущество — мы действуем быстро, экспериментируем, учимся на ошибках, итеративно улучшаем решения завтрашнего дня во всех аспектах нашего бизнеса. Наше исполнение гибкое, основанное на данных, приоритетное и масштабируемое. Мы не считаем, что какая-либо проблема — это проблема другого, и завершаем то, что можно сделать сегодня, зная, что завтра принесет новые вызовы.
Мы добиваемся успеха вместе — лучшие результаты достигаются благодаря эмпатичным, скромным и разнообразным экспертам, работающим над общими целями. Мы неустанно сотрудничаем, ставим под сомнение предположения, даем конструктивную обратную связь и создаем условия для успеха через уполномоченные команды с четким мандатом. Мы открыто берем на себя ответственность за наш рост, как индивидуально, так и в команде. Мы празднуем качество наших усилий, наши уроки и коллективные достижения.

Хватит откликаться.
Получите рекомендацию.

$10 стартовых кредитов

Всего 60 секунд, полностью на автопилоте — AI-агенты Eraldt читают ваше резюме, определяют подходящие роли, находят живые вакансии и людей, которые могут вас порекомендовать, пишут им личные письма и добиваются рекомендации.

Это не отклик на вакансию: резюме не уходит в компанию, а рекомендацию именно по этой роли мы не обещаем.

Посмотрите, кто ещё получает интервью на автопилоте