ИИ Sora от OpenAI уже может генерировать видеоигры

Премьера генератора видео Sora от OpenAI потрясла мир своей тревожной реалистичностью, однако модель, похоже, ещё лучше справляется с созданием игровых миров. Как следует из технической статьи OpenAI, опубликованной вчера, у Sora есть удивительная способность воссоздавать Minecraft и "моделировать цифровые миры".

Sora также может моделировать искусственные процессы, например видеоигры. Sora способна одновременно управлять игроком в Minecraft по базовым правилам, при этом рендеря мир и его динамику с высокой достоверностью. Эти возможности можно получить без дополнительного обучения просто указав Sora в подсказке "Minecraft".

Перспективная модель Sora от OpenAI потенциально может перевернуть мир видеоигр. Причина в том, что она принципиально отличается от других ИИ-генераторов видео — так считает старший научный сотрудник Nvidia доктор Джим Фэн. По его словам, Sora больше похожа на "управляемый данными физический движок", нежели генератор изображений. Sora выполняет тысячи расчётов, предсказывая взаимодействие объекта с окружением. Это создаёт "модель мира", которая идеально подходит для генерации видеоигр.

OpenAI отмечает, что пока это лишь первые тесты, но они демонстрируют большие перспективы ИИ-симуляторов реальных и виртуальных миров. Компания перечисляет несколько ограничений, в частности Sora пока не способна точно моделировать физику базовых взаимодействий, что иногда приводит к очень странным результатам. Эти недостатки нужно будет исправить до создания полноценных игр.

Однако по сравнению с другими генераторами видео Sora уже решила несколько проблем. Она продемонстрировала успешное "восприятие постоянства объекта" — объект может покинуть кадр и вернуться на то же место. Также у Sora лучше получается динамичное движение камеры.

Кто-то предположил, что Sora от OpenAI обучалась на игровом движке, а именно Unreal Engine 5 от Epic Games. Хотя для создания видео Sora почти наверняка не использует готовый движок, возможно, цифровые миры применялись в процессе обучения базовой модели. OpenAI не подтвердила эти слухи, но UE5 использовался в таких играх как Fortnite, Remnant 2 и Tekken 8. Некоторые демо-ролики Sora действительно напоминают существующие игровые локации.

Остаётся вопрос: на чём обучалась Sora и какова ситуация с авторскими правами в данном случае?

Sora может принести бедствие для разработчиков видеоигр, но также значительно снизить барьер для входа в индустрию. Тем более, что разработчиков продолжают массово увольнять и по сей день.