ML-аналитик в команду Вселенной ассистентов в Т Банк Москва

Ищем ML-аналитика для работы над AI-ассистентами на базе LLM. Нужно оценивать качество продуктов и переводить его в бизнес-метрики.

Задачи:

• Создавать и развивать систему оценки Ассистента — от разработки корзин с запросами и метрик до анализа результатов и продвижения фич в продукт
• Организовывать разметку качества силами краудсорсеров и строить автоматизированные пайплайны на базе LLM-as-a-Judge
• Рассчитывать продуктовые метрики и выстраивать отчетность, понятную команде и бизнесу
• Искать инсайты в пользовательских диалогах, проектировать и дизайнить эксперименты, предлагать улучшения продукта на основе данных
• Собирать и готовить данные для алайнмента наших языковых моделей под задачи ассистентов
• Работать в тесной связке с продактами, NLP-командой, командами монетизации и партнерских интеграций

Требования:

• Опыт работы на стыке продуктовой аналитики и Data Science: с чат-ботами, поисковыми, рекомендательными системами, рекламными аукционами, генеративными технологиями
• Уверенное владение SQL и Python, в приоритете — Pandas
• Умение писать чистый и надежный аналитический код, который живет в продакшене
• Желание работать с текстовыми данными в LLM-продуктах
• Активное использование LLM в работе и повседневной жизни
• Способность видеть картину целиком, предлагать стратегии аналитического трека и влиять на продуктовые решения

Условия:

• Гибридный график и офис у метро «Белорусская»
• Возможность работы в аккредитованной ИТ-компании
• ДМС со стоматологией, страховка от несчастных случаев
• Рост по карьерному треку: курсы, менторство, матрица компетенций
• Сильное комьюнити, конференции, митапы
• Онлайн-консультации с психологами, юристами, финансистами
• Компенсация спортивных абонементов
• Завтраки и обеды в Т-Кафе
• 3 дополнительных дня к отпуску
• Специальные тарифы на продукты Т-Банка и скидки от партнеров
• Достойная зарплата — обсудим на собеседовании

Навыки:

• SQL
• Python
• Pandas
• LLM
• NLP