Junior / Middle AI QA Engineer (LLM / AI Agents) в Aspirity Solutions удалённо

- Тестирование работы в шумной среде.

- Проверка логики и сценариев

- Чтение и анализ NSL (Jinja2) скриптов.

- Выявление логических циклов и тупиков.

- Проверка корректных переходов состояний (например: бронирование создано → подтверждение отправлено).

- Контроль галлюцинаций

- Выявление отклонений от инструкций и некорректной генерации фактов.

- Формирование и поддержка Golden Datasets для регрессионного тестирования.

- Интеграционное тестирование

- Проверка корректного вызова внешних сервисов (CRM, API и др.).

- Анализ поведения агента при ошибках API.

- Проверка корректной обработки исключений.

Требования

- Техническая грамотность

- Умение читать код (Jinja2, JSON, Python).

- Уверенная работа с JSON-пейлоадами.

- Знание Voice AI

- Понимание принципов STT (Speech-to-Text).

- Понимание TTS (Text-to-Speech).

- Понимание VAD (Voice Activity Detection).

- Осознание важности корректной обработки пауз и тишины.

- QA-мышление

Языки

Русский — родной / свободный.

Английский — от B2 (свободная устная коммуникация).

Будет преимуществом

- Опыт работы с LLM (prompt engineering).

- Опыт тестирования голосовых ассистентов (Alexa, Google Assistant и др.).

- Понимание метрик качества AI-систем.

Мы предлагаем:

Удалённый формат работы. Возможность развиваться в QA-направлении для систем с LLM и AI-агентами. Оплата по квалификации: от 20 USD/час.