Описание
Команда разрабатывает Enterprise Agent Development Platform — продакшн-грейд, cloud-native экосистему, которая позволяет инженерным командам определять, оркестрировать, развёртывать и наблюдать за AI-агентами в масштабе. Платформа стандартизирует разработку агентов в организации с использованием LangGraph и Strands Agents на AWS AgentCore Runtime, сокращая время разработки и обеспечивая соблюдение единых стандартов безопасности, качества и управления.
Задачи
•Построение представлений поведенческого мониторинга и сигналов аудируемости по всему парку агентов
•Разработка поведенческих дашбордов и условий алертинга с использованием New Relic и NRQL
•Проектирование сигналов поведенческого мониторинга для обнаружения аномалий, дрифта, сигналов безопасности и отказов политик
•Создание представлений аудируемости, предоставляющих данные для governance-стейкхолдеров
•Поддержание разделения между техническим мониторингом (CloudWatch/New Relic) и доказательствами аудита (отдельные хранилища evidence/SIEM)
•Валидация алертов и проверка точности данных дашбордов на всей платформе
•Реализация эмиссии и валидации метрик с помощью Python
•Взаимодействие с инженерными командами для согласования поведенческого мониторинга с требованиями governance агентов
Требования
•Не менее 3 лет опыта в observability engineering
•Практический опыт построения поведенческого мониторинга или сигналов аудируемости для AI-агентов в продакшене, например: anomaly/drift detection на телеметрии агентов, вывод событий отказа политик Cedar как входных данных для мониторинга, или дашборды audit-evidence для governance агентов
•Опыт работы с поведенческим и anomaly мониторингом, включая настройку алертов на продакшн-телеметрии
•Опыт работы в средах с формальными требованиями аудита и compliance evidence
•Владение New Relic и NRQL для построения поведенческих дашбордов и условий алертинга
•Навыки Python для эмиссии и валидации метрик
Условия
Условий в вакансии нет