Все новости
Это интересно
Сейчас читают
Minecraft
Аватар Evernews Evernews

Мир Minecraft оживили нейросетью во время игры: видео

1
0
Поделиться
Телеграфировать

Осталось что-то придумать с интерфейсом.

Мир Minecraft оживили нейросетью во время игры: видео

Нейросети уже сейчас можно использовать для преобразования игрового геймплея в реальном времени — правда, с нюансами. Это продемонстрировал реддитор Alchemist1123, экспериментировавший с Minecraft.

Энтузиаст попытался оживить картину игры, чей мир состоит из кубов-вокселей. Для оживления использовалась нейросеть Stable Diffusion, получавшая изображения напрямую из Minecraft.

По словам реддитора, ему удалось получить от Stable Diffusion 14 кадров в секунду. При этом нейросеть работала на GeForce RTX 3080 Ti, топовая современная видеокарта вроде RTX 4090 справилась бы с обсчетом еще быстрее.

Впрочем, о практическом применении связки игра/нейросеть речь пока не идет. Во-первых, изображения рендерились в низком разрешении — это было сделано для ускорения обсчета.

Во-вторых, в динамике хорошо видно, что у Stable Diffusion есть проблемы с консистентностью: соседние кадры могут заметно отличаться друг от друга. Правда, благодаря нейросетям, генерирующим видео, мы знаем, что эта проблема решаема.

Наконец, остаются проблемы с интерфейсом: Stable Diffusion перерисовывает и его, делая совершенно нечитаемым. Эту проблему относительно легко решить — достаточно интегрировать нейросеть в игровой код и отдавать ей кадр до отрисовки интерфейса.

Читать далее
За сколько вы готовы купить GTA VI?
До 8000 рублей
391 голос, 5.8%
До 7000 рублей
121 голос, 1.8%
До 6000 рублей
154 голоса, 2.3%
До 5000 рублей
669 голосов, 9.9%
До 4000 рублей
183 голоса, 2.7%
До 3000 рублей
315 голосов, 4.7%
До 2000 рублей
756 голосов, 11.2%
За любые деньги
381 голос, 5.7%
Ни за сколько, я пират
3768 голосов, 55.9%
Теги: Minecraft, Игры
Аватар Evernews
Evernews
8074 подписчика