Алатката NVIDIA ги претвора едноставните скици во слики користејќи вештачка интелигенција

NVIDIA активно експериментира на полето на длабоко учење, а резултатите од нејзината работа понекогаш се доста интересни. Компанијата на GDC 2019 го објави создавањето на GauGAN, интелигентна апликација за цртање која користи модел за длабоко учење за да создаде фотореалистични верзии на едноставни цртежи. Името на апликацијата се однесува на францускиот пост-импресионистички уметник Пол Гоген и користењето на софтверот на генеративни противнички мрежи (GANs) за создавање слики кои реално имитираат слики.

Како функционира GauGAN? Според објаснувањето на компанијата, апликацијата е како „паметна четка“ која ги пополнува деталите на скицата на корисникот (NVIDIA ја нарекува „мапа на сегментација“). Во суштина, корисникот или уметникот само поставува план за она што сака да го види на крајот и го означува секој сегмент, означувајќи што треба да биде. Потоа го презема GauGAN, пополнувајќи дополнителни детали и ги прави цртежите пореални.

Обучен на милиони уметнички слики, моделот за длабоко учење потоа го населува пејзажот со импресивни (но не секогаш совршени) резултати. Ако нацртате езерце, блиските елементи како дрвја и камења ќе се рефлектираат во водата. Доволно е да се смени ознаката на сегментот од „трева“ во „снег“, а целата слика ќе се промени, претворајќи се во зимска, а лиснатите дрвја ќе станат голи. За да разберете за што зборуваме, можете да го погледнете видеото подолу.

Исто така, вреди да се напомене дека иако GauGAN користи широко знаење засновано на мноштво други слики за да ги создаде конечните дела, вторите сè уште се сметаат за оригинални бидејќи апликацијата генерира целосно нови добиени слики.

Новиот паметен графички уредник на NVIDIA не е ограничен само на природни сцени или пејзажи - апликацијата може да додава згради, патишта, па дури и луѓе. GauGAN, исто така, им овозможува на корисниците да применуваат филтри, стилизирајќи го резултатот да одговара на нивниот посакуван стил. Таквите филтри, меѓу другото, можат да го имитираат стилот на одреден уметник (на пример, Ван Гон) или да го прилагодат осветлувањето на сцената, менувајќи ги сликите од ден во ноќ.

Не е јасно дали GauGAN некогаш ќе биде пуштен во употреба за секојдневна употреба на потрошувачите, но мислам дека порано или подоцна обичните корисници може да добијат некои прилично корисни алатки како оваа, поедноставувајќи ја работата во различни области: од архитектура и илустрација до развој на игри.

Сепак, на ресурсот NVIDIA AI Playground, заинтересираните можат да се запознаат со некои способности за машинско учење. На пример, во демонстрацијата за трансфер на уметнички стил што е присутна таму, можете да обработите која било фотографија во стилот на познати уметници.

Други слични експерименти од NVIDIA вклучуваат студија која покажува како визуелните ефекти генерирани од вештачка интелигенција може да се комбинираат со традиционален цевковод за растеризација. Резултатот е хибриден графички систем кој може да се користи во игри, филмови и виртуелна реалност. Друг сличен пример е алгоритам за претворање на улици исполнети со снег во летни, развиен од специјалисти на компанијата за поефикасна обука за автопилоти.

Извор: 3dnews.ru