Компания Nvidia представила новую нейросеть GauGAN, которая превращает простые скетчи в реалистичные изображения. Новое ПО компании использует генеративно-состязательную сеть (GAN), которая позволяет превращать небольшие рисунки в довольно реалистичные изображения. Пользователь может нарисовать небольшой пейзаж, к примеру горы с водопадом или холм с проплывающими над ним тучами, а программа «заполнит» этот грубый схематичный скетч естественными текстурами — травой, облаками, закатами и рассветами.

Но есть и свои ограничения - программа с легкостью генерирует искусственную траву или воду, ведь их визуальные паттерны (паттерн понимается в этом плане как повторяющийся шаблон или образец) не имеют структуры; а вот со зданиями и мебелью нейросеть справляется хуже, результаты менее реалистичны. Но при необходимости систему научат справляться и с более трудными задачами.

Компания пока не сообщала, планирует ли она создание серийного продукта из этой технологии, но отметила, что такие инструменты могут быть очень полезны для архитекторов, разработчиков игр и многих других специалистов.