Человекоподобный робот Figure 02 освоил естественную походку благодаря обучению с подкреплением

Компания по производству гуманоидных роботов представила новое видео с человекоподобным роботом Figure 02, демонстрирующим свою новую естественную походку. Этого результата удалось достигнуть с помощью обучения с подкреплением (RL), а точнее, способа, при котором ИИ учится методом проб и ошибок в симулированной среде.

Чем этот подход отличается от простого наблюдения робота за реальными людьми? RL позволил инженерам Figure сжать годы данных о ходьбе до нескольких часов тренировки, органично сочетая физические симуляции с данными о движениях реальных людей. В результате человекоподобный робот двигается более плавно, без той жесткой, механической походки, которую обычно ожидаешь увидеть.

Походка Figure 02 стала более естественной, но, как видно, еще есть что улучшать. Обучение основано на сквозной нейронной сети, что означает — система учится всему с нуля, оптимизируя каждое движение для имитации естественной ходьбы.