Разработчик превратил 26-летнюю PS2 в рабочую витубер-станцию с отслеживанием движений

Независимый разработчик создал Витубер-софт, который рендерит движущийся 3D-аватар нативно на PlayStation 2, с планами со временем добавить самодельное отслеживание всего тела.

Витуберы обычно используют камеры и софт для захвата движений, чтобы анимировать цифровой аватар для видео и стримов. Разработчик под ником Serenity, теперь пытается перенести эту технологию на 26-летнюю консоль Sony.

В видео, Serenity продемонстрировал ранний билд под названием "Serenity VTuber Rig V1", работающий на PS2, подключенной к ЭЛТ-телевизору.

Демонстрация показывает вращающуюся каркасную модель, реагирующую на изменение значений положения в реальном времени. Serenity рассказал, что софт создан с помощью PS2SDK, набора библиотек с открытым исходным кодом для разработки приложений под консоль Sony.

Нынешний прототип пока не полностью автономная система захвата движений на PS2. Serenity пояснил, что он подключается к Python-скрипту, запущенному на ПК. Этот скрипт вычисляет данные о положении пользователя, после чего каждый кадр отправляет их на PS2 по сети.

Однако сам аватар рендерится именно PS2, а не ПК:

Никаких трюков! Никакой эмуляции! Никакой имитации!

Софт работает через процессор консоли Emotion Engine, главный CPU PS2. По данным Sony, чип состоял из восьми отдельных блоков, каждый из которых отвечал за свою функцию.

Пока что, по словам Serenity, софт просто отображает модель, которую можно захватить через программы вроде OBS. На вопрос, может ли аватар появиться внутри игры для PS2, разработчик ответил:

Акцент на слове "пока".

Со временем разработка может стать чем-то большим, чем инструмент для витуберов. Serenity рассказал, что одной из изначальных идей было использовать софт для анимации видео о создании игр для PS2, с планами также превратить его в общее ПО для анимации.

Serenity также рассматривает использование камеры EyeToy от PS2 для версии отслеживания лица, полностью обрабатываемого консолью, хотя разработчик описал аксессуар как "просто ужасную камеру".

Запланировано и отслеживание всего тела через самодельное оборудование. Serenity раскрыла, что софт построен на слое аппаратной абстракции, что потенциально позволит портировать его на другие консоли того же поколения.

Дата релиза не объявлена, но Serenity отметил, что сделать софт удобным для пользователя станет приоритетом.