Final Fantasy IX попробовали «отремастерить» с помощью ИИ: фото
Несколько лет назад результаты работы ИИ были куда скромнее.
Кстати, на сайте читать удобнее
Когда в конце 2010-х годов начали набирать популярность приложения для апскейла с помощью ИИ, фанаты игр быстро смекнули, что с их помощью можно попытаться ускорить разработку неофициальных ремастеров. Была проблема: зачастую апскейл работал не очень хорошо.
Спустя несколько лет мечты о быстрых фанатских ремастерах стали выглядеть реальнее. Посмотрите, как выглядят кадры из Final Fantasy IX, обработанные с помощью нейросети Stable Diffusion и надстройки ControlNet.
Если обычный апскейл пытался дорисовать изображение высокого разрешения хоть как-нибудь, то комбинация из Stable Diffusion и ControlNet более-менее понимает, какие предметы изображены на кадре низкого разрешения, и рисует их же, но в высоком разрешении.
Правда, нюансы все-таки есть. Нейросеть щедро добавляет мелкие детали, благодаря которым картинка выглядит более реалистично, но иногда перебарщивает: колесо от телеги, к примеру, может превратиться в нечто более современное.
Похожий эксперимент провели на скриншотах старых игр для первого поколения PlayStation. С руками явно нужно что-то придумать, но в остальном выглядит не так уж плохо.
К сожалению, современные видеокарты не могут достаточно быстро обрабатывать изображения таким образом. Даже в случае с GeForce RTX 4090 речь идет не о кадрах в секунду, а о секундах на кадр — ИИ-ремастеров, работающих в реальном времени, придется подождать еще несколько лет.