Описание
Команда разрабатывает внутреннюю платформу для создания AI-агентов и автоматизаций, которой смогут пользоваться продуктовые команды Ozon. Платформа включает SDK, Tool Hub, механизмы оркестрации и сервисы оценки качества AI. Автоматизация тестирования встроена в развитие платформы: тестовые инструменты, проверки качества и CI развиваются вместе с продуктом.
Задачи
•Разрабатывать автоматические тесты для платформенных сервисов
•Создавать инструменты для проверки качества AI-функций и автоматизаций
•Развивать тестовую инфраструктуру и CI-пайплайны
•Проверять интеграции SDK, Tool Hub и платформенных компонентов
•Улучшать качество платформы вместе с разработчиками
•Создавать набор автотестов для SDK и платформенных API
•Автоматизировать проверку AI-сценариев и агентных пайплайнов
•Настраивать quality gates в CI
•Разрабатывать инструменты для анализа качества ответов и стабильности автоматизаций
Требования
•Опыт автоматизации тестирования бэкенд-систем
•Владение Playwright и JavaScript или TypeScript либо опыт автоматизации на бэкенд-языках
•Опыт разработки тестовой инфраструктуры
•Понимание CI/CD
•Интерес к AI-инструментам и современным средствам автоматизации
Будет плюсом: опыт тестирования AI-продуктов (Evals), работы с LLM API или MCP, разработки собственных инструментов автоматизации.
Условия
Условий в вакансии нет.