ИИ GPT-6 Astra добыл алмаз в Minecraft за ночь, напрямую управляя компьютером

Разработчик Уян Чжоу поставил GPT-6 Astra задачу добыть алмаз в Minecraft, включил запись и лёг спать. Утром алмаз лежал в инвентаре, а тулкит, через который всё работало, авторы выложили в открытый доступ.

Ключевая деталь в том, как именно агент играет. Никакого мода, обращения к памяти игры или программного интерфейса нет, модель просто смотрит на экран, двигает мышь и жмёт клавиши.

Тулкит Codex-Minecraft-Gameplay представляет собой набор для Windows, который умеет только три вещи. Он передаёт агенту скриншоты, отправляет в игру события ввода с клавиатуры и мыши и позволяет опционально проверять результат визуально.

В описании прямо указано, что в комплект не входят ни сама модель, ни клиент игры, ни сохранение мира, ни интерфейс к внутренней памяти Minecraft. Всё взаимодействие идёт исключительно через видимый игровой интерфейс.

Настройка занимает несколько шагов. Папку нужно открыть как локальный Codex-проект на том же компьютере с Windows, где запущена игра, войти в мир, оставить окно Minecraft видимым и передать агенту репозиторий вместе с игровой целью.

Отдельно Чжоу уточнил, что никаких предварительных знаний об игре в тулкит не заложено. Все навыки агент выстроил на ходу уже после получения задачи, а открыли исходники именно для того, чтобы упростить будущие прогоны.

Конкретных указаний вроде "копай штреки" тоже не давали. Штрековую добычу, то есть копание длинных параллельных тоннелей, Astra выбрала сама, получив на входе только цель.

В другом прогоне с тем же сидом мира модель нашла решение поинтереснее. После двух смертельных падений она поставила лодку, чтобы погасить урон от падения, и добралась до дна пещеры живой.

Скепсиса в комментариях набралось не меньше, чем восторга:

• Прогон шёл в мирном режиме, где не спавнятся мобы и не тратится голод, так что задача свелась к банальному поиску

• На третьей минуте записи агент прошёл мимо алмазной руды, не заметив её – хотя человек тоже может так пропустить, шанс всё же значительно ниже

• Экран отладки F3 модель включала и выключала многократно без видимой причины

• Верстак Astra ломала киркой вместо топора

• Факелы расставлялись там, где освещение не требовалось

Расход токенов не указан, а сам Чжоу публично попросил сотрудника OpenAI обнулить ему лимит ради более длинных сессий. Следующим шагом команда планирует дистиллировать полученные действия в локальную модель Qwen на 27 миллиардов параметров.

Собрал тулкит Чжоу вместе с Тяньюй Вэем. Репозиторий распространяется по лицензии Apache 2.0 и доступен тут.

Сам сценарий с алмазом давно служит в качестве теста. Среда Minecraft Diamond на базе MineRL строится вокруг двенадцати последовательных этапов, ведущих к добыче алмаза, и требует прохождения по дереву технологий с более чем 379 рецептами крафта.

Управление компьютером стало основным направлением GPT-6 Astra, вышедшей 3 сентября 2026 года. На симуляциях с задержками в бенчмарке OSWorld 2.0 модель показывает 72,6% против 65,7% у предыдущей GPT-5.6 Sol, тратя на задачу около 40 минут вместо 75.