Ang NVIDIA ay aktibong nag-eeksperimento sa larangan ng malalim na pag-aaral, at ang mga resulta ng gawain nito ay minsan ay kawili-wili. Inanunsyo ng kumpanya sa GDC 2019 ang paglikha ng GauGAN, isang intelligent na application sa pagguhit na gumagamit ng malalim na modelo ng pag-aaral upang lumikha ng mga photorealistic na bersyon ng mga simpleng drawing. Ang pangalan ng app ay tumutukoy sa French post-impressionist artist na si Paul Gauguin at sa paggamit ng software ng generative adversarial networks (GANs) upang lumikha ng mga larawang makatotohanang gayahin ang mga painting.
Paano gumagana ang GauGAN? Ayon sa paliwanag ng kumpanya, ang app ay parang "smart brush" na pumupuno sa mga detalye ng sketch ng user (tinatawag itong "segmentation map" ng NVIDIA). Sa pangkalahatan, ang user o artist ay nagtatakda lang ng plano para sa kung ano ang gusto niyang makita sa huli, at nilalagyan ng label ang bawat segment, na nagsasaad kung ano dapat ito. Ang GauGAN pagkatapos ay humalili, pinupunan ang mga karagdagang detalye at ginagawang mas makatotohanan ang mga guhit.
Sinanay sa milyun-milyong artistikong larawan, ang modelo ng malalim na pag-aaral ay pinupuno ang landscape ng mga kahanga-hangang (ngunit hindi palaging perpekto) na mga resulta. Kung gumuhit ka ng pond, makikita ang mga kalapit na elemento tulad ng mga puno at bato sa tubig. Ito ay sapat na upang baguhin ang label ng segment mula sa "damo" sa "snow", at ang buong imahe ay magbabago, na magiging isang taglamig, at ang mga madahong puno ay magiging hubad. Upang maunawaan kung ano ang pinag-uusapan natin, maaari mong panoorin ang video sa ibaba.
Nararapat ding tandaan na bagama't gumagamit ang GauGAN ng malawak na kaalaman batay sa isang host ng iba pang mga larawan upang likhain ang mga huling gawa, ang huli ay itinuturing pa rin na orihinal dahil ang application ay bumubuo ng ganap na bagong mga resultang larawan.
Ang bagong smart graphics editor ng NVIDIA ay hindi limitado sa mga natural na eksena o landscape lamangβmaaaring magdagdag ang app ng mga gusali, kalsada, at maging ng mga tao. Pinapayagan din ng GauGAN ang mga user na mag-apply ng mga filter, i-istilo ang resulta upang umangkop sa kanilang gustong istilo. Ang ganitong mga filter, bukod sa iba pang mga bagay, ay maaaring gayahin ang estilo ng isang partikular na artist (halimbawa, Van Gon) o ayusin ang pag-iilaw ng isang eksena, pagbabago ng mga imahe mula araw hanggang gabi.
Hindi malinaw kung ipapalabas ang GauGAN para sa pang-araw-araw na paggamit ng consumer, ngunit sa palagay ko, sa kalaunan ay maaaring makakuha ang mga ordinaryong user ng ilang medyo kapaki-pakinabang na tool tulad nito, na nagpapasimple sa trabaho sa iba't ibang lugar: mula sa arkitektura at paglalarawan hanggang sa pagbuo ng laro.
Gayunpaman, sa mapagkukunan ng NVIDIA AI Playground, maaaring maging pamilyar ang mga interesado sa ilang mga kakayahan sa pag-aaral ng makina. Halimbawa, sa demonstrasyon ng Artistic Style Transfer na naroroon, maaari mong iproseso ang anumang larawan sa istilo ng mga sikat na artista.
Kasama sa iba pang katulad na mga eksperimento mula sa NVIDIA ang isang pag-aaral na nagpapakita kung paano maaaring isama ang AI-generated visual effects sa isang tradisyunal na pipeline ng rasterization. Ang resulta ay isang hybrid na graphics system na maaaring magamit sa mga laro, pelikula at virtual reality. Ang isa pang katulad na halimbawa ay isang algorithm para sa paggawa ng mga lansangan na puno ng niyebe sa tag-araw, na binuo ng mga espesyalista ng kumpanya para sa mas mahusay na pagsasanay sa autopilot.
Pinagmulan: 3dnews.ru