О роли
Более 20 лет Smartsheet помогает командам эффективно управлять работой и масштабировать решения умнее. Сейчас, в нашей самой амбициозной главе, мы объединяем человеческие команды с AI-агентами. Организуя работу, которую агенты выполняют лучше всего, автоматизируя ручные задачи и выявляя инсайты в масштабах, мы создаём пространство для людей, чтобы сосредоточиться на том, что действительно важно: суждениях, креативности и масштабном мышлении.
Smartsheet создаёт следующее поколение стратегического планирования и агентов исполнения работы с поддержкой AI через SmartAssist, нашу платформу интеллектуальных агентов. Вы будете тесно сотрудничать с командами инженерии и AI-платформы, работая в команде, занимающейся критически важной областью и строящей зрелый жизненный цикл разработки агентов (Agent Development Lifecycle, ADLC).
Вы будете проектировать, как мы разрабатываем, строим и внедряем AI-решения, которые трансформируют исполнение работы на уровне предприятий.
Вы будете:
•Проектировать и создавать производственные агенты и рабочие процессы на базе больших языковых моделей (LLM) внутри Smartsheet, включая архитектурные решения по системному дизайну, потокам данных и стратегиям развертывания
•Разрабатывать и оптимизировать подсказки, RAG-пайплайны и шаблоны рассуждений агентов; создавать фреймворки оценки для измерения точности, частоты галлюцинаций и производительности разных версий моделей
•Реализовывать и управлять сквозными AI-системами на облачной инфраструктуре (AWS, GCP или Azure), включая мониторинг, оптимизацию и реагирование на инциденты
•Сотрудничать с инженерными, продуктовыми и кросс-функциональными командами для преобразования бизнес-требований в технические AI-решения, приносящие реальный эффект
•Наставлять и направлять других инженеров по лучшим практикам прикладного машинного обучения, современным паттернам разработки AI и производственным аспектам
•Устанавливать лучшие практики и стандарты разработки AI, управления моделями и ответственного AI внутри организации
•Следить за быстро меняющимся ландшафтом AI/LLM и оценивать новые инструменты, фреймворки и техники для нужд Smartsheet
•Вносить вклад в full stack приложение — как в наследуемое, так и в новое
У вас есть:
•8+ лет опыта в разработке программного обеспечения, из которых минимум 2 года — непосредственная работа с LLM в продакшене
•Глубокий практический опыт в инженерии подсказок и контекстной инженерии, вы понимаете, как поведение модели меняется в зависимости от формулировки, структуры и дизайна входных данных
•Хорошее знание архитектур RAG: стратегии разбиения на части, модели встраивания, оценка поиска и диагностика сбоев
•Опыт создания или расширения фреймворков оценки LLM, вы проектировали скореры, работали с эталонными наборами данных и тщательно продумывали, что значит «хорошо»
•Свободное владение дизайном систем агентов, вам не обязательно владеть архитектурой, но вы можете участвовать как равный в обсуждении архитектурных компромиссов, влияющих на качество
•Сильные навыки Python; комфортная работа в средах с большими данными (Databricks, Delta tables или эквиваленты)
•Умение ясно и понятно доносить сложные выводы о качестве (письменно и устно) как техническим, так и нетехническим заинтересованным сторонам, вы можете объяснить, что сломано, почему это важно и что нужно делать дальше, не теряя аудиторию
•Сильное межфункциональное суждение, вы знаете, когда эскалировать, когда решать самостоятельно и как строить доверие между инженерией, продуктом и командами AI-платформы
•Склонность к ясности в неоднозначных ситуациях, когда режимы сбоев неясны, а компромиссы реальны, вы приносите структуру и чёткую точку зрения, а не ждёте консенсуса
•Право на легальную работу в США на постоянной основе
•Степень бакалавра или магистра в области компьютерных наук, смежной области или эквивалентный опыт в индустрии
Желательно:
•Опыт работы с MLflow или аналогичными платформами для отслеживания экспериментов
•Знакомство с пайплайнами оценки, интегрированными в CI
•Опыт работы с фреймворками оркестрации мультиагентов
•Предыдущий опыт работы в прикладном AI или LLMOps в продуктовой компании
Что означает успех:
•Достигнуто измеримое, подтверждённое улучшение качества хотя бы одного агента SmartAssist по нашим определённым параметрам качества
•Расширено покрытие оценки для устранения самых значимых слепых зон в текущем фреймворке
•Установлена повторяемая методология улучшения качества, которую может применять вся команда
Текущие преимущества и льготы в США:
•Медицинское, офтальмологическое и стоматологическое страхование с субсидией работодателя для штатных сотрудников
•Соответствие 401k для помощи в накоплениях на будущее (50% от вашего взноса до первых 6% от вашей заработной платы)
•Ежемесячное пособие для поддержки вашей работы и продуктивности
•Гибкая программа отпусков, а также оплачиваемые больничные
•Сотрудники в США автоматически покрываются страхованием жизни, краткосрочной и долгосрочной нетрудоспособности, спонсируемым Smartsheet
•12 оплачиваемых праздничных дней в году для сотрудников в США
•До 24 недель отпуска по уходу за ребёнком
•Личный оплачиваемый день волонтёрства для поддержки нашего сообщества
•Возможности профессионального роста и развития, включая доступ к онлайн-курсам Udemy
•Корпоративные льготы, включая членство в службе консультирования, скидки в местных магазинах и личный аккаунт Smartsheet
•Возможности удалённой работы из любого зарегистрированного места в США (зависит от роли)
Smartsheet предлагает конкурентоспособный базовый диапазон зарплат для ролей, которые могут быть наняты в разных географических регионах, где мы лицензированы вести бизнес. Фактическая компенсация определяется несколькими факторами, включая, но не ограничиваясь, уровнем профессионального и образовательного опыта, навыками и конкретным местоположением кандидата. Кроме того, эта роль будет иметь право на рыночные стимулирующие выплаты.
Диапазон базовой зарплаты в США: $175,000—$245,000 USD
