Nvidias neuronnät omvandlar enkla skisser till vackra landskap

Rökarnas vattenfall och ett friskt människovattenfall

Vi vet alla hur man ritar en uggla. Först behöver man rita en oval, sen en cirkel till, och sen — så får man en fantastisk uggla. Självklart är det ett skämt, ett som är mycket gammalt, men Nvidias ingenjörer har strävat efter att göra så att fantasin blir verklighet.

Ny utveckling, som kallas GauGAN, skapar magnifika landskap från väldigt enkla skisser (verkligen enkla — cirklar, linjer och så vidare). Självklart ligger moderna teknologier till grund för denna utveckling — nämligen generativa adversariella neuronnät.

GauGAN möjliggör att skapa färgglada virtuella världar — inte bara för nöjes skull, utan även för arbete. Så, arkitekter, landskapsdesigners, spelutvecklare — alla kan plocka upp något användbart. Den artificiella intelligensen "förstår" genast vad en person vill och kompletterar den ursprungliga idén med en mängd detaljer.

„Brainstorming i designutvecklingen går mycket lättare med hjälp av GauGAN, eftersom den smarta borsten kan komplettera den ursprungliga skissen med kvalitativa bilder”, sade en av utvecklarna av GauGAN.

Användarna av detta verktyg kan ändra den ursprungliga idén, modifiera landskapet eller annan bild, lägga till himmel, sand, hav och så vidare. Allt som själen önskar, och tillsatsen sker på bara några sekunder.

Neuronnätet har tränats med en databas av miljontals bilder. Tack vare detta kan systemet förstå vad en person vill och hur man uppnår det önskade. Dessutom glömmer inte neuronnätet de minsta detaljerna. Så om man ritar en schematisk damm och några träd bredvid den, så kommer alla närliggande objekt att återspeglas i vattnets spegel.

Systemet kan anvisas vilken yta som ska synas — den kan vara täckt av gräs, snö, vatten eller sand. Allt detta kan omvandlas på en sekund, så att snö blir sand och istället för en snöig ödemark får konstnären ett ökenlandskap.

»Det är som en målarbok där det står var man ska placera trädet, var solen ska vara och var himlen ska vara. Sedan, efter den ursprungliga uppgiften, ger neuronätet liv åt bilden, lägger till nödvändiga detaljer och texturer, och ritar reflektionerna. Allt detta baseras på verkliga bilder,« säger en av utvecklarna.

Trots att systemet saknar 'förståelse' av den verkliga världen, skapar det imponerande landskap. Det beror på att två neuronät används här, en generator och en diskriminator. Generatorn skapar bilden och visar den för diskriminatorn. Baserat på miljoner tidigare sedda bilder väljer den de mest realistiska alternativen.

Just därför 'vet' generatorn var reflektionerna ska vara. Det är värt att notera att verktyget är mycket flexibelt och utrustat med många inställningar. Med hjälp av det kan man skapa målningar, anpassa sig till stilen hos en viss konstnär eller bara leka med att snabbt lägga till en soluppgång eller solnedgång.

Utvecklarna hävdar att systemet inte bara tar bilder från något ställe, sätter ihop dem och får ett resultat. Nej, alla 'bilder' som genereras är skapade. Det vill säga, neuronätet 'skapar' som en riktig konstnär (eller till och med bättre).

För tillfället finns programmet inte tillgängligt för allmänheten, men snart kan det testas i praktiken. Detta kan göras på teknologimässan GPU Technology Conference 2019, som just nu pågår i Kalifornien. De lyckliga som har kunnat besöka mässan kan redan testa GauGAN.

Neuronät har länge lärts att delta i den kreativa processen. Till exempel förra året kunde vissa av dem skapa 3D-modeller.. Dessutom har utvecklarna från DeepMind tränat ett neuronät att återställa tredimensionella utrymmen och objekt utifrån ritningar, fotografier och skisser. För att återskapa en enkel figur räcker det med en bild, men för att skapa mer komplexa objekt krävs fem bilder för 'träning'.

När det gäller GauGAN, så kommer detta verktyg uppenbarligen att hitta ett värdefullt kommersiellt användningsområde — många affärsområden och vetenskapsfält har behov av sådana tjänster.

Källa: habr.com