Тестировщик (QA) AI-продуктов (удаленная работа)

Вакансия: Тестировщик (QA) AI-продуктов

Описание вакансии

Обязанности:
Ручное тестирование UI, API, промтов на всех продуктах линейки (веб-платформ и RAG-агентов)
Тестирование REST API (создание коллекций тест-кейсов, расширение и поддержка)
Проверка качества и корректности контента, сгенерированного LLM: соответствие входным данным и первоисточникам, поиск некорректных/выдуманных фактов, проверка edge-кейсов промптов
Регрессионное тестирование
Составление тест-кейсов, чек-листов и понятных баг-репортов
Приоритизация найденных багов по критичности, взаимодействие с разработчиком по фиксам

Требования:
Коммерческий опыт ручного тестирования от 1 года в тестировании веб-сервисов (API, UI)
Тестирование API : глубокое знание REST, HTTP, авторизации; инструменты Postman/Swagger;
Тестирование AI агентов :
- Понимание LLM, RAG, векторных БД, промпт инжиниринга.
- Оценка качества ответов: релевантность, отсутствие галлюцинаций, безопасность, adversarial-тесты (prompt injection).
- Умение тестировать недетерминированное поведение и память агентов.
Тест-дизайн и документация : уверенное применение классов эквивалентности, граничных значений, сценарных проверок; составление тест-планов, чек-листов, баг-репортов.
Самостоятельность, ответственность за результат, умение взаимодействовать с командой, умение в многозадачность

Будет плюсом
Опыт/знакомство со сферой охраны труда и промбезопасности
Нагрузочное тестирование AI сервисов
Опыт A/B тестирования промптов и моделей.
Опыт автоматизации тестирования (Playwright/pytest) сейчас не требуется, но это точка роста в команде

Условия
Полностью удалённо
Частичная занятость, 20 часов в неделю, гибкий график
Оформление самозанятость