NVIDIA alat pretvara jednostavne skice u slike koristeći AI

NVIDIA aktivno eksperimentiše na polju dubokog učenja, a rezultati njenog rada su ponekad prilično zanimljivi. Kompanija je na GDC 2019 najavila stvaranje GauGAN-a, inteligentne aplikacije za crtanje koja koristi model dubokog učenja za kreiranje fotorealističnih verzija jednostavnih crteža. Naziv aplikacije odnosi se na francuskog postimpresionističkog umjetnika Paula Gauguina i softversko korištenje generativnih suparničkih mreža (GAN) za stvaranje slika koje realistično imitiraju slike.

NVIDIA alat pretvara jednostavne skice u slike koristeći AI

Kako funkcioniše GauGAN? Prema objašnjenju kompanije, aplikacija je poput "pametne četke" koja popunjava detalje korisničke skice (NVIDIA to naziva "mapa segmentacije"). U suštini, korisnik ili umjetnik samo postavlja plan za ono što želi vidjeti na kraju, i označava svaki segment, naznačujući kakav bi trebao biti. Tada ga preuzima GauGAN, koji popunjava dodatne detalje i čini crteže realističnijim.

Obučen na milionima umjetničkih slika, model dubokog učenja zatim popunjava krajolik impresivnim (ali ne uvijek savršenim) rezultatima. Ako nacrtate ribnjak, obližnji elementi poput drveća i kamenja će se odraziti u vodi. Dovoljno je promijeniti oznaku segmenta iz "trava" u "snijeg", a cijela slika će se promijeniti, pretvarajući se u zimsku, a lisnato drveće će postati golo. Da biste razumjeli o čemu govorimo, možete pogledati video ispod.

Također je vrijedno napomenuti da iako GauGAN koristi opsežno znanje zasnovano na mnoštvu drugih slika za kreiranje konačnih radova, potonje se i dalje smatraju originalnim jer aplikacija generiše potpuno nove rezultirajuće slike.

NVIDIA-in novi pametni grafički uređivač nije ograničen samo na prirodne scene ili pejzaže – aplikacija može dodati zgrade, puteve, pa čak i ljude. GauGAN takođe omogućava korisnicima da primene filtere, stilizujući rezultat tako da odgovara njihovom željenom stilu. Takvi filteri, između ostalog, mogu imitirati stil određenog umjetnika (na primjer, Van Gona) ili prilagoditi osvjetljenje scene, mijenjajući slike iz dana u noć.

NVIDIA alat pretvara jednostavne skice u slike koristeći AI

Nejasno je hoće li GauGAN ikada biti pušten za svakodnevnu upotrebu, ali mislim da bi prije ili kasnije obični korisnici mogli dobiti neke prilično korisne alate poput ovog, pojednostavljujući rad u raznim oblastima: od arhitekture i ilustracije do razvoja igara.

Međutim, na resursu NVIDIA AI Playground, zainteresovani se mogu upoznati sa nekim mogućnostima mašinskog učenja. Na primjer, u demonstraciji Artistic Style Transfer koja je prisutna, možete obraditi bilo koju fotografiju u stilu poznatih umjetnika.

Drugi slični eksperimenti iz NVIDIA-e uključuju studiju koja pokazuje kako se vizuelni efekti generisani veštačkom inteligencijom mogu kombinovati sa tradicionalnim cevovodom za rasterizaciju. Rezultat je hibridni grafički sistem koji bi se mogao koristiti u igricama, filmovima i virtuelnoj stvarnosti. Drugi sličan primjer je algoritam za pretvaranje snijegom ispunjenih ulica u ljetne, koji su razvili stručnjaci kompanije za efikasniju obuku autopilota.

NVIDIA alat pretvara jednostavne skice u slike koristeći AI


izvor: 3dnews.ru

Dodajte komentar