По мере того, как художник в общих чертах рисует желаемый пейзаж, система машинного обучения (ML) создает правдоподобный фотореалистичный пейзаж, который обновляется в реальном времени в визуализации Вселенной, включая отражения.

GauGAN, названный в честь художника постимпрессионистов Поля Гогена, создает фотореалистичные изображения из карт сегментации, которые обозначены как эскизы, которые изображают расположение сцены. Программа работает через модель глубокого обучения, разработанную NVIDIA Research, которая превращает грубые наброски в очень реалистичные сцены, используя генеративные состязательные сети (GAN).

Возможности практического использования GauGAN в процессе создания 3d сцен, анимации рекламы практически безграничны, и значительно упростят процесс изготовления качественного видео.