ИИ генерирует геймплей Minecraft — возможно, это будущее игровой индустрии

Но одним промптом описать целый мир вряд ли получится.

15 февраля стартап OpenAI показал модель Sora, генерирующую короткие высококачественные ролики по текстовому описанию. В более подробном описании модели есть два интересных примера генерации, связанных с игровой индустрией.

Sora удалось правдоподобно воспроизвести геймплей Minecraft, популярной игры-песочницы студии Mojang. Как объясняют в OpenAI, для генерации таких роликов не пришлось прикладывать особые усилия: в промптах просто упомянули Minecraft.

Модель, отмечают разработчики, способна моделировать как реальные, так и вымышленные миры. Обратите внимание: в сгенерированном геймплее Minecraft объекты более-менее сохраняют позиции при смене кадров и ракурсов — фактически ИИ проводит экскурсию по виртуальному миру.

Внимательный наблюдатель заметит несколько проблем: в одном из роликов внезапно исчезает свинья, иногда пропорции объектов выглядят странновато. Зато Sora без проблем отрисовала характерный пиксельный интерфейс и смогла перерисовывать тени в реальном времени.

Важный момент: модель, показанная OpenAI, ничего не знает об устройстве Minecraft. Sora обучалась на роликах (включая геймплейные), описания к которым составлялись с помощью другой модели — по всей видимости, вручную размеченные данные вообще не использовались.

В OpenAI полагают, что в какой-то момент модели, подобные Sora, дадут возможность создавать высококачественные симуляторы цифровых миров, населенные животные и людьми, наполненные разнообразными объектами.

Возможно, в этом случае разработчикам игр пришлось бы не создавать ассеты и миры вручную, а оперировать обширными наборами промптов, описывающих локации, персонажей и их взаимодействие друг с другом.

В OpenAI пока не стали детально раскрывать принципы работы модели; ясно лишь, что на обучение Sora было потрачено очень много процессорного времени — в 16 раз больше, чем для ранних моделей такого типа.

Сейчас Sora доступна только специально отобранным пользователям и тестерам. Представители OpenAI не готовы сказать, когда модель откроют для всех желающих и попадет ли она вообще в открытый доступ.