MotionBricks от NVIDIA генерирует движения для игр и роботов со скоростью 15 000 кадров в секунду

NVIDIA вместе с группой исследователей из ETH Zürich, Университета Саймона Фрейзера и Техасского университета в Остине представила MotionBricks, генеративную систему движения для анимации и робототехники. Работа будет опубликована в журнале ACM Transactions on Graphics и показана на конференции SIGGRAPH 2026.

В основе лежит модульный латентный генеративный бэкбон, заточенный под устойчивую генерацию движений в реальном времени. Одна нейросеть охватывает датасет из более чем 350 000 моушн-клипов, выдавая 15 000 кадров в секунду при задержке в 2 миллисекунды.

Поверх бэкбона работают так называемые smart primitives (умные примитивы), единый интерфейс для авторской настройки навигации и взаимодействия с объектами. По задумке создателей, приложения собираются из них по принципу детских кубиков, без специальных знаний в анимации.

Заметная особенность системы в её zero-shot применении. MotionBricks справляется с новыми задачами без дообучения и без расстановки тегов под каждый сценарий, что делает её пригодной для подключения по принципу вставил-и-играй.

Возможности подсистемы навигации, умного передвижения, сводятся к единому интерфейсу для команд по скорости, направлению и стилю. Среди примеров отдельных стилей раненая походка, движения зомби, прыжки и стрейф, причём всё это получается из одного промпта без переобучения.

Стили можно смешивать на лету. Пользователь меняет скорость, направление и тип походки в реальном времени, а переходы между ними остаются непрерывными.

Сцены и взаимодействия с объектами описываются через умные объекты, гибкий набор прокси-кейфреймов. Подход, контакт и отыгрыш после действия бэкбон достраивает сам, естественно варьируя движения от запуска к запуску.

Авторы демонстрируют рабочий процесс прямо внутри Unreal Engine 5, где умные объекты настраиваются без графов анимации и не требуют узкоспециальных знаний.

В подтверждение возможностей команда выложила непрерывный демо-ролик в Unreal Engine 5 длительностью 2 минуты 40 секунд. По её утверждению, каждое движение в нём сгенерировано нейросетью, без блокировок стоп, блендинга, проверки коллизий и заранее прописанных переходов.

Энтузиаст показал, как GTA 5 могла бы выглядеть с NVIDIA DLSS 5

Новый драйвер NVIDIA добавил первичную поддержку DLSS 5

MotionBricks вошёл в инициативу NVIDIA GR00T Whole-Body Control и отвечает там за слой генерации движений. Первый превью-релиз кода уже опубликован в репозитории GR00T-WholeBodyControl/motionbricks.

В доступе два компонента, интерактивное демо с роботом G1 под управлением облегчённой версии MotionBricks и автономный синтетический пайплайн обучения с инструкциями по подключению датасета BONES-SEED. Полноценный релиз с моделью, встроенной в робототехническую формулировку GR00T, и полным пайплайном обучения команда обещает примерно через месяц.