ML-разработчик в команду гуманоидных роботов в Яндекс Москва

ML-инженер в команду робототехники Яндекса. Развитие post-training и fine-tuning VLA-политик для гуманоидных роботов: повышение success rate, стабильности и обобщающей способности моделей.

Задачи:

• Разрабатывать post-training-пайплайны для VLA: дообучение на данных роботов, симуляции и демонстрациях
• Повышать success rate, стабильность и обобщающую способность моделей
• Внедрять offline и online reinforcement learning для улучшения VLA-политик после предобучения и supervised fine-tuning
• Развивать ML-часть обучения роботов на ошибках: DAgger, Human-Gated DAgger, Learning from Human Interventions, corrective demonstrations, dataset aggregation
• Улучшать качество моделей в сложных сценариях: анализ failure modes, OOD robustness, uncertainty-aware и recovery-oriented learning, работа с long-tail-данными

Требования:

• Уверенное владение Python
• Опыт работы с PyTorch
• Сильная база в deep learning и reinforcement learning
• Понимание основных подходов RL
• Знание behavior cloning, covariate shift и dataset aggregation

Условия:

• Работа в офисе в Москве
• Комьюнити Яндекс: спортивные клубы, книжный клуб, киберспортивное сообщество и другие бонусы

Навыки:

• Python
• PyTorch
• Deep Learning
• Reinforcement Learning
• VLA
• DAgger
• Behavior Cloning
• Dataset Aggregation
• OOD robustness