Middle/Senior Vision ML Engineer в ПАО Сбербанк Москва

В CV-команду Сбера ищут Middle/Senior ML-инженера для полного цикла обучения и деплоя OCR-продукта на базе VLM. Задачи включают исследование SOTA-подходов, обучение и дообучение моделей, сбор и разметку данных, а также интеграцию моделей в клиентский сервис внутри банка.

Задачи:

• Изучать SOTA-подходы к OCR: чтение свежих пейперов в сфере e2e OCR, адаптация подходов data mining, SFT/RL, гипотезы
• Ставить эксперименты по обучению VLM-моделей: проверка гипотез на multi-node сетапе, замер метрик на внешних и внутренних бенчмарках
• Дорабатывать пайплайн обучения: улучшение репозитория на текущем стеке (accelerate, TRL) — ускорение обучения, добавление аугментаций, адаптация под новые модели
• Собирать обучающие данные: агрегация существующих и новых данных в требуемом формате MarkDown, поиск новых доменов, написание скриптов по загрузке
• Размечать датасеты: запуск процесса разметки для вновь собранных или существующих данных при помощи кастомного agentic harness сборщика разметки (а также его улучшение), или внутренней платформы разметки асессорами
• Адаптировать сервис: интеграция обученных моделей в сервис на основе vLLM для сёрвинга клиентам внутри банка

Требования:

• Высшее образование: математика, информатика или профильный data science
• 3+ лет в ML, из них не меньше года с LLM/VLM в проде
• Английский для чтения статей и документации
• Fine-tuning: SFT, LoRA/QLoRA, RL (DPO, GRPO)
• Современные движки инференса: vLLM, sgLang, triton
• Опыт работы с VLM: понимание принципов работы, дообучения, основных ограничений
• Агентные пайплайны: вызовы моделей, обработка исключений, ограничение стоимости
• Опыт в разметке датасетов асессорами или автоматическими инструментами
• Python: пишете код, который уходит в прод. Тесты, ревью, код-стайл
• Специфика банка: много контрагентов, с ними нужно иногда коммуницировать

Условия:

• Комфортный современный офис — м. Кутузовская
• Гибридный формат работы
• Ежегодный пересмотр зарплаты, годовой бонус
• Корпоративный спортзал и зоны отдыха
• Более 400 образовательных программ СберУниверситета для профессионального и карьерного развития
• Расширенный ДМС, льготное страхование для семьи и корпоративная пенсионная программа
• Гибкий дисконт по ипотечному кредиту, равный 1/3 ключевой ставки ЦБ
• Подписка Прайм с возможностью совместного использования на трёх близких
• Вознаграждение за рекомендацию друзей в команду Сбера
• Корпоративная пенсионная программа

Навыки:

• Python
• VLM
• OCR
• LLM
• SFT
• LoRA
• QLoRA
• RL
• DPO
• GRPO
• vLLM
• sgLang
• triton
• accelerate
• TRL
• FastAPI
• PostgreSQL
• векторные хранилища
• MarkDown