Нейросет от Nvidia превръща най-простите скици в красиви пейзажи

Водопад на курильщика и водопад на здравом човек

Всички знаем как да нарисуваме сова. Първо трябва да нарисуваме овал, после още един кръг, а след това — получаваме страхотна сова. Разбира се, това е шега, и то много стара, но инженерите на Nvidia се постараха да направят така, че фантазията да стане реалност.

Нова разработка, наречена GauGAN, създава удивителни пейзажи от много простички скици (наистина прости — кръгове, линии и всичко). Разбира се, в основата на тази разработка лежат съвременни технологии — именно генеративни състезателни невронни мрежи.

GauGAN позволява създаването на цветни виртуални светове — и не само за забавление, но и за работа. Така архитекти, специалисти по ландшафтен дизайн, разработчици на игри — всички те могат да черпят нещо полезно. Изкуственият интелект веднага „разбира“ какво иска човек и допълва първоначалната идея с огромно количество детайли.

„Мозъчната атака в планирането на дизайна става много по-лесно с помощта на GauGAN, тъй като интелигентната четка може да допълни първоначалната скица, добавяйки качествени изображения“, заяви един от разработчиците на GauGAN.

Потребителите на този инструмент могат да изменят първоначалната концепция, да модифицират пейзажа или друг образ, да добавят небе, пясък, море и т.н. Всичко, което душата желае, и то за само няколко секунди.

Невронната мрежа е обучавана с помощта на база от милиони изображения. Благодарение на това системата разбира какво иска човек и как да постигне желаното. Освен това невронната мрежа не забравя и за най-малките детайли. Така, ако нарисувате схематично водоем и някои дървета около него, след оживяването на пейзажа всички близки обекти ще се отразяват в олепяването на водата на водоема.

На системата може да се указва каква трябва да бъде видимата повърхност — тя може да бъде покрита с трева, сняг, вода или пясък. Всичко това може да бъде преобразувано за секунди, така че снегът да стане пясък и вместо заснежена пустош художникът да получи пустинен ландшафт.

«Това е като оцветяваща книжка, в която се указва къде да се сложи дървото, къде - слънцето, а къде - небето. След това, след първоначалната задача, невронната мрежа вдъхва живот на картината, добавя необходимите детайли и текстури, рисува отражения. Всичко това се основава на реални изображения», казва един от разработчиците.

Въпреки че на системата ѝ липсва «разбиране» на реалния свят, тя създава впечатляващи пейзажи. Всичко това е възможно благодарение на две невронни мрежи – генератор и дискриминатор. Генераторът създава изображение и го показва на дискриминатора. Той, основавайки се на милиони видени преди изображения, избира най-реалистичните варианти.

Затова генераторът «знае» къде трябва да бъдат отраженията. Следва да се отбележи, че инструментът е много гъвкав и предлага множество настройки. С него можете да рисувате картини, адаптирайки се към стила на определен художник или просто да експериментирате с бързо добавяне на изгрев или залез.

Разработчиците твърдят, че системата не просто взема изображения от различни места, комбинира ги и получава резултат. Не, всички получени «картини» са генерирани. Тоест, невронната мрежа «създава», като истински художник (или дори по-добре).

В момента програмата не е налична за свободен достъп, но скоро ще може да бъде изпробвана в работа. Това може да стане на технологичната изложба GPU Technology Conference 2019, която в момента се провежда в Калифорния. Щастливците, които успяха да посетят изложбата, вече могат да тестват GauGAN.

Невронните мрежи отдавна учат да участват в творческия процес. Например, миналата година някои от тях бяха в състояние да създават 3D модели. Освен това, разработчиците от DeepMind обучиха невронна мрежа да възстановява триизмерни пространства и обекти на базата на рисунки, снимки и скици. За да възстанови проста фигура, на невронната мрежа ѝ е нужна само една картинка; за създаването на по-сложни обекти са необходими пет картинки за «обучение».

Що се отнася до GauGAN, този инструмент очевидно ще намери достойно търговско приложение — много сфери на бизнеса и науката имат нужда от подобни услуги.

Източник: habr.com