Nvidia рассказала о ставке на нейронный рендеринг вместо растеризации

В идеале нейросети должны отвечать за все или почти все аспекты обработки картинки.

На конференции Hot Chips 2025 компания Nvidia подробнее рассказала об архитектуре Blackwell и о своем видении будущего компьютерной графики. Nvidia намерена делать ставку на нейронный рендеринг.

Вместо простого наращивания производительности компания выступает за интеграцию машинного обучения в графический конвейер. Главная идея — использовать нейросетевые алгоритмы вместо традиционных методов растеризации.

В числе ключевых технологий названы денойзинг, генерация промежуточных кадров и обучение на данных отдельных пикселей — это позволяет получать изображение с меньшими затратами. В идеале нейросети должны отвечать почти за все аспекты обработки картинки.

Чтобы реализовать этот подход, Nvidia переходит к вычислениям в формате FP4: это снизит нагрузку на память и вычислительные блоки чипов. Кроме того, в чипах компании применяются усовершенствованные механизмы планирования.

В частности, реализовано переупорядочивание выполнения шейдеров, усилена работа с целыми числами и добавлен встроенный процессор управления ИИ. Последний отвечает за то, чтобы графические задачи и операции машинного обучения не блокировали друг друга.

В Nvidia считают, что именно нейросетевой рендеринг станет главным направлением развития индустрии в ближайшие годы. Вероятно, в будущих архитектурах GeForce нейросетевому рендерингу будут уделять еще больше внимания.