Nvidia показала нейросеть, рисующую картинки по описаниям

Искусственный интеллект обучили примерно на 10 миллионах изображений.

В 2019 году исследователи Nvidia рассказали о нейросети GauGAN, способной генерировать изображения на базе самых простых набросков. Теперь компания анонсировала GauGAN2 — нейросеть, выполняющую ту же задачу, но без набросков.

Вместо набросков GauGAN2 полагается на простые текстовые описания изображений. Например, нейросеть может распознать фразу «океанские волны накатывают на каменный пляж» и сгенерировать соответствующую картинку.

Для обучений нейросети исследователи использовали базу из примерно 10 миллионов изображений. В редакторе, выпущенном Nvidia, нейросеть GauGAN2 совмещена с первым поколением ИИ: можно сгенерировать картинку по описанию, а затем дорисовать ее с помощью возможностей GauGAN.

Экспериментировать можно и в онлайн-редакторе, доступном здесь. Вот несколько изображений, созданных при помощи GauGAN2 и возможностей первой версии нейросети.