NVIDIA eksperimenteerib aktiivselt süvaõppe valdkonnas ja selle töö tulemused on mõnikord üsna huvitavad. Ettevõte teatas GDC 2019. aastal intelligentse joonistusrakenduse GauGAN loomisest, mis kasutab süvaõppemudelit lihtsate jooniste fotorealistlike versioonide loomiseks. Rakenduse nimi viitab prantsuse postimpressionistlikule kunstnikule Paul Gauguinile ja tarkvara kasutamisele generatiivsete võistlevate võrgustike (GAN) kasutamisele piltide loomiseks, mis maalid realistlikult jäljendavad.
Kuidas GauGAN toimib? Ettevõtte selgituse kohaselt on äpp nagu "tark pintsel", mis täidab kasutaja visandi üksikasjad (NVIDIA nimetab seda "segmenteerimiskaardiks"). Põhimõtteliselt määrab kasutaja või esitaja lihtsalt plaani, mida ta lõpuks näha soovib, ja märgistab iga segmendi, näidates, milline see peaks olema. Seejärel võtab üle GauGAN, täites täiendavaid detaile ja muutes joonised realistlikumaks.
Miljonite kunstiliste kujutiste põhjal treenitud süvaõppemudel täidab maastiku muljetavaldavate (kuid mitte alati täiuslike) tulemustega. Kui joonistate tiigi, peegelduvad vees läheduses olevad elemendid, nagu puud ja kivid. Piisab, kui muuta segmendi silt “muru” asemel “lumi” ja kogu pilt muutub, muutudes talviseks ja lehtpuud muutuvad paljaks. Et mõista, millest me räägime, võite vaadata allolevat videot.
Samuti väärib märkimist, et kuigi GauGAN kasutab lõpptööde loomiseks laialdasi teadmisi, mis põhinevad paljudel muudel piltidel, peetakse viimaseid siiski originaalseks, kuna rakendus genereerib tulemuseks täiesti uusi pilte.
NVIDIA uus nutikas graafikaredaktor ei piirdu ainult looduslike stseenide või maastikega – rakendus võib lisada hooneid, teid ja isegi inimesi. GauGAN võimaldab kasutajatel ka filtreid rakendada, kujundades tulemuse soovitud stiili järgi. Sellised filtrid võivad muuhulgas jäljendada konkreetse kunstniku stiili (näiteks Van Gon) või reguleerida stseeni valgustust, muutes pilte päevast õhtusse.
On ebaselge, kas GauGAN kunagi igapäevaseks kasutamiseks välja tuleb, kuid arvan, et varem või hiljem võivad tavakasutajad hankida niisuguseid päris kasulikke tööriistu, mis lihtsustavad tööd erinevates valdkondades: arhitektuurist ja illustratsioonidest kuni mänguarenduseni.
NVIDIA AI Playgroundi ressursil saavad huvilised aga tutvuda mõne masinõppevõimalusega. Näiteks saate seal asuvas kunstilise stiiliülekande demonstratsioonis töödelda mis tahes fotot kuulsate kunstnike stiilis.
Teised sarnased NVIDIA katsed hõlmavad uuringut, mis näitab, kuidas AI-ga loodud visuaalseid efekte saab kombineerida traditsioonilise rasterdamiskonveieriga. Tulemuseks on hübriidgraafikasüsteem, mida saaks kasutada mängudes, filmides ja virtuaalreaalsuses. Teine sarnane näide on lumist täis tänavate suvisteks muutmise algoritm, mille on välja töötanud ettevõtte spetsialistid autopiloodi tõhusamaks treenimiseks.
Allikas: 3dnews.ru