Nvidia neurala nätverk förvandlar enkla skisser till vackra landskap

Nvidia neurala nätverk förvandlar enkla skisser till vackra landskap
Rökarens vattenfall och en frisk persons vattenfall

Vi vet alla hur man ritar en uggla. Först måste du rita en oval, sedan en annan cirkel, och sedan - det visar sig en underbar uggla. Naturligtvis är detta ett skämt, och ett mycket gammalt sådant, men Nvidias ingenjörer försökte förverkliga fantasin.

Ny utveckling, som kallas GauGAN, skapar vackra landskap från mycket enkla skisser (riktigt enkla - cirklar, linjer och allt). Naturligtvis är denna utveckling baserad på modern teknologi - nämligen generativa motstridiga neurala nätverk.

GauGAN låter dig skapa färgglada virtuella världar - och inte bara för skojs skull, utan också för jobbet. Så, arkitekter, landskapsdesigners, spelutvecklare - de kan alla lära sig något användbart. Artificiell intelligens "förstår" omedelbart vad en person vill ha och kompletterar den ursprungliga idén med en enorm mängd detaljer.

"Brainstorming när det gäller designutveckling är mycket lättare med hjälp av GauGAN, eftersom en smart borste kan komplettera den initiala skissen genom att lägga till kvalitetsbilder", sa en GauGAN-utvecklare.

Användare av detta verktyg kan ändra den ursprungliga idén, ändra landskapet eller annan bild, lägga till himmel, sand, hav, etc. Allt ditt hjärta önskar, och tillägget tar bara ett par sekunder.

Det neurala nätverket tränades med hjälp av en databas med miljontals bilder. Tack vare detta kan systemet förstå vad en person vill och hur man uppnår vad de vill. Dessutom glömmer det neurala nätverket inte de minsta detaljerna. Så om du schematiskt ritar en damm och några träd bredvid den, kommer alla närliggande föremål att reflekteras i dammvattnets spegel efter att landskapet har återupplivats.

Du kan tala om för systemet vad den synliga ytan ska vara - den kan täckas med gräs, snö, vatten eller sand. Allt detta kan förvandlas på en sekund, så att snön blir sand och istället för en snöig ödemark får konstnären ett ökenlandskap.

"Det är som en målarbok som säger var man ska placera trädet, var är solen och var är himlen. Sedan, efter den första uppgiften, animerar det neurala nätverket bilden, lägger till nödvändiga detaljer och texturer, ritar reflektioner. Allt detta är baserat på verkliga bilder”, säger en av utvecklarna.


Även om systemet saknar "förståelse" för den verkliga världen, skapar systemet spektakulära landskap. Detta beror på att två neurala nätverk används här, en generator och en diskriminator. Generatorn skapar en bild och visar den för diskriminatorn. Han, baserat på miljontals tidigare sedda bilder, väljer de mest realistiska alternativen.

Det är därför generatorn "vet" var reflektionerna ska vara. Det är värt att notera att verktyget är mycket flexibelt och utrustat med ett stort antal inställningar. Så med den kan du måla, anpassa dig till en viss konstnärs stil eller bara leka med det snabba tillägget av soluppgång eller solnedgång.

Utvecklarna hävdar att systemet inte bara tar bilder någonstans ifrån, lägger ihop dem och får resultatet. Nej, alla mottagna "bilder" genereras. Det vill säga det neurala nätverket "skapar" som en riktig artist (eller ännu bättre).

Än så länge är programmet inte fritt tillgängligt, men snart kommer det att vara möjligt att testa det i arbete. Detta kan göras på GPU Technology Conference 2019, som just nu pågår i Kalifornien. De lyckliga som kunde besöka utställningen kan redan nu testa GauGAN.

Neurala nätverk har länge lärt sig att delta i den kreativa processen. Till exempel förra året, några av dem kan skapa 3D-modeller. Dessutom tränade utvecklarna från DeepMind det neurala nätverket för att återställa tredimensionella utrymmen och objekt från ritningar, fotografier och skisser. För att återskapa en enkel figur behöver det neurala nätverket en bild; för att skapa mer komplexa objekt krävs fem bilder för "träning".

När det gäller GauGAN kommer detta verktyg helt klart att hitta en värdig kommersiell tillämpning - många affärsområden och vetenskaper har behov av sådana tjänster.

Källa: will.com

Lägg en kommentar