Devquality

QA engineer (auto) на Python для тестирования LLM

Коротко

Позиция QA-инженера (автоматизация) на Python для тестирования веб-фронтенда, бэкенда и мобильного приложения, включая специфику тестирования LLM-систем (RAG, промпт-инъекции, LLM-as-a-judge, галлюцинации). Компания более 10 лет работает в сфере тестирования ИТ-продуктов. Требуется от 4 лет опыта, уверенное знание Python/pytest, опыт с микросервисной архитектурой, Git, CI/CD, а также желателен опыт нагрузочного тестирования и работы с брокерами сообщений Kafka/RabbitMQ. Полная удалённая работа по РФ с гражданством и локацией в РФ.

Описание
Компания работает в ИТ-области более 10 лет, занимается разными видами тестирования и помогает руководителям проектов выпускать релизы.
Задачи
•Автоматизировать тестирование веб-фронтенда
•Автоматизировать тестирование бэкенда и мобильного приложения
Требования
•Гражданство и локация РФ
•Опыт работы от 4 лет
•Опыт работы с клиент-серверной микросервисной архитектурой
•Уверенное знание Python и pytest
•Отличное понимание pytest и фикстур
•Опыт работы с Git
•Понимание принципов SOLID и DDD
•Понимание различий между QA-инженером и специалистом, который занимается исключительно автоматизацией тестирования
•Опыт работы с pytest-xdist
•Опыт написания пайплайнов
•Понимание принципов работы и применения моков
•Понимание роли системного промпта и его влияния на ответы LLM
•Открытость, заинтересованность, способность самостоятельно решать проблемы и готовность разбираться в сложных задачах
•Готовность работать с метриками качества, логами, базами данных и процессами тестирования
•Понимание архитектуры RAG-систем
•Знание видов промпт-инъекций
•Понимание подходов к тестированию LLM, в частности LLM-as-a-judge
•Понимание галлюцинаций в ответах LLM и способов их выявления
•Опыт нагрузочного тестирования с JMeter или Locust
•Опыт настройки CI/CD
•Опыт автоматизированного тестирования брокеров сообщений Kafka или RabbitMQ
•Опыт автоматизации тестирования бэкенда и мобильных приложений
Условия
•Удалёнка
•До 220 000 ₽ на руки

Хватит откликаться.
Получите рекомендацию.

$10 стартовых кредитов

Всего 60 секунд, полностью на автопилоте — AI-агенты Eraldt читают ваше резюме, определяют подходящие роли, находят живые вакансии и людей, которые могут вас порекомендовать, пишут им личные письма и добиваются рекомендации.

Это не отклик на вакансию: резюме не уходит в компанию, а рекомендацию именно по этой роли мы не обещаем.

Посмотрите, кто ещё получает интервью на автопилоте