ИИ генерирует геймплей Minecraft — возможно, это будущее игровой индустрии

Но одним промптом описать целый мир вряд ли получится.

Кстати, на сайте читать удобнее

15 февраля стартап OpenAI показал модель Sora, генерирующую короткие высококачественные ролики по текстовому описанию. В более подробном описании модели есть два интересных примера генерации, связанных с игровой индустрией.

Sora удалось правдоподобно воспроизвести геймплей Minecraft, популярной игры-песочницы студии Mojang. Как объясняют в OpenAI, для генерации таких роликов не пришлось прикладывать особые усилия: в промптах просто упомянули Minecraft.

Модель, отмечают разработчики, способна моделировать как реальные, так и вымышленные миры. Обратите внимание: в сгенерированном геймплее Minecraft объекты более-менее сохраняют позиции при смене кадров и ракурсов — фактически ИИ проводит экскурсию по виртуальному миру.

Внимательный наблюдатель заметит несколько проблем: в одном из роликов внезапно исчезает свинья, иногда пропорции объектов выглядят странновато. Зато Sora без проблем отрисовала характерный пиксельный интерфейс и смогла перерисовывать тени в реальном времени.

Важный момент: модель, показанная OpenAI, ничего не знает об устройстве Minecraft. Sora обучалась на роликах (включая геймплейные), описания к которым составлялись с помощью другой модели — по всей видимости, вручную размеченные данные вообще не использовались.

В OpenAI полагают, что в какой-то момент модели, подобные Sora, дадут возможность создавать высококачественные симуляторы цифровых миров, населенные животные и людьми, наполненные разнообразными объектами.

Возможно, в этом случае разработчикам игр пришлось бы не создавать ассеты и миры вручную, а оперировать обширными наборами промптов, описывающих локации, персонажей и их взаимодействие друг с другом.

В OpenAI пока не стали детально раскрывать принципы работы модели; ясно лишь, что на обучение Sora было потрачено очень много процессорного времени — в 16 раз больше, чем для ранних моделей такого типа.

Сейчас Sora доступна только специально отобранным пользователям и тестерам. Представители OpenAI не готовы сказать, когда модель откроют для всех желающих и попадет ли она вообще в открытый доступ.