Обучение с подкреплением увеличило скорость робопса Spot в 3 раза

Обучение с подкреплением увеличило скорость робопса Spot в 3 раза.
Инженеры из Института робототехники и искусственного интеллекта (RAI Institute) разработали новый метод управления для робота Spot.
Теперь он может бегать со скоростью 5,2 м/с, что в 3 раза превышает его стандартные показатели.
Для этого исследователи применили обучение с подкреплением.
Этот метод позволяет роботу тестировать разные способы передвижения в симуляции и получать вознаграждение за наиболее эффективные варианты.
После тысяч попыток алгоритм выбирает оптимальный способ бега, а затем этот опыт передаётся реальному роботу.
Обычная версия Spot от Boston Dynamics использует управление с прогнозирующими моделями (MPC).
Этот метод создаёт программную модель движений, но накладывает ограничения.
MPC не позволяет роботу адаптироваться к условиям и находить новые способы передвижения.