AI Test Automation Engineer в ОнТаргет ЛАБС удалённо

Ищем backend-инженера по автоматизации тестирования для проверки систем с AI-функциями: тестирование API, интеграций с AI-сервисами, внедрение AI-оценок в CI/CD для непрерывного контроля качества моделей.

Задачи:

• Писать и поддерживать автоматические тесты для backend-сервисов и API
• Тестировать AI-функции и сервисы, включая проверку выходных данных и поведения
• Добавлять AI-оценки в CI/CD пайплайны для отслеживания качества AI
• Тестировать асинхронные и событийно-ориентированные процессы
• Проверять пайплайны данных, смешивающие структурированные данные с текстом или документами
• Покрывать нефункциональные требования: производительность, масштабируемость, надежность
• Тесно работать с backend-инженерами и продуктом для согласования критериев качества
• Вносить вклад в CI-проверки, качественные гейты и отчетность по тестированию

Требования:

• Опыт автоматизации тестирования backend от 3 лет
• Уверенное знание Python и JavaScript/TypeScript
• Опыт работы с тестовыми фреймворками (pytest, unittest или аналоги)
• Опыт тестирования API с помощью Postman, Requests/HTTPX или аналогичных инструментов
• Уверенная работа с Docker
• Знание SQL для валидации данных
• Опыт тестирования backend-систем с AI/ML/LLM компонентами
• Опыт работы с инструментами оценки LLM (DeepEval, Ragas, LangSmith или аналоги)
• Опыт тестирования нефункциональных аспектов: производительность и масштабируемость
• Опыт работы в облачной среде (AWS, GCP, Azure и т.д.)
• Свободный английский

Условия:

• Конкурентная зарплата по результатам собеседования
• Полная удаленная работа
• Возможности профессионального роста и командировки за границу

Навыки:

• Python
• JavaScript
• TypeScript
• pytest
• unittest
• Postman
• Requests
• HTTPX
• Docker
• SQL
• DeepEval
• Ragas
• LangSmith
• AWS
• GCP
• Azure
• Pact
• CloudWatch
• Kibana
• Grafana
• OWASP