Создана нейросеть, меняющая на фотографиях время суток

Превратить день в ночь с ее помощью не удастся.

Группа исследователей Adobe и Университетского колледжа Лондона рассказали о нейронной сети OutCast, способной менять время суток на фотографиях. С ее помощью можно изменять освещение кадра.

Нейронная сеть может прогнозировать положение теней при изменении освещения в сцене. Обрабатывая сцену, искусственный интеллект учитывает положение облаков и дорисовывает Солнце, если это необходимо.

У технологии есть ограничение: судя по демонстрациям, она не может превратить день в ночь или наоборот.

6

В качестве входных данных нейросети достаточно одного изображения. По нему искусственный интеллект строит карту глубины сцены, получая трехмерную версию изображения, с которой можно вести расчеты освещения.

Новое освещение обсчитывается с помощью трассировки лучей по полученной карте глубины. Старые тени и пересветы при обработке убираются.

Создатели OutCast подготовили несколько тестовых сцен, в которых можно вручную поменять положение Солнца на небе. Покрутить их можно здесь.