ML инженер в платформу оценки агентных систем в Компания скрыта удалённо

ML-инженер в платформу оценки агентных систем крупного банка. Задача — определять и рассчитывать метрики качества, автономности, скорости и стоимости агентных систем, подключать их к платформе оценки и настраивать регулярные воспроизводимые прогоны.

Задачи:

• Определять метрики качества, автономности, скорости и стоимости и реализовывать их расчёт
• Подключать агентные системы к платформе оценки
• Настраивать регулярные воспроизводимые прогоны
• Вместе с командами собирать наборы задач и требования к результатам