Sony патентует генерацию кадров на основе предсказания действий игрока

Фоллбэк для неправильного предсказания компания тоже предусмотрела.

Игровое подразделение Sony патентует технологию генерации кадров Frame Generation Super Sampling. Согласно описанию из патента, технология может не только повышать частоту кадров, но и сокращать задержку реакции на управление.

Современные апскейлы — например, DLSS — представляют собой продвинутые аппроксиматоры, создающие дополнительные изображения между реальными кадрами. Sony в своем патенте предлагает другой подход.

Вместо ожидания следующего кадра система должна прогнозировать изменения игровой сцены. Алгоритм будет жет анализировать предыдущее изображение, векторы движения и команды с контроллера, а затем генерировать искусственный кадр еще до завершения рендеринга нормального кадра.

Архитектура Frame Generation Super Sampling предусматривает использование энкодера и декодера. Первый обрабатывает исходный кадр, данные о движении объектов и действия игрока, а второй формирует предполагаемое следующее изображение.

Sony также предусмотрела резервный механизм без применения ИИ. Он должен предотвращать появление графических глитчей в ситуациях, когда прогноз системы расходится с реальными событиями в игре.

Традиционно отметим, что появление такого патента не означает, будто технологию непременно реализуют в нынешних или будущих поколениях PlayStation.