NVIDIA DLSS, en maskininlärningsbaserad helskärmskantutjämningsteknik som använder tensorkärnorna på GeForce RTX-grafikkort, har förbättrats avsevärt över tiden. Inledningsvis, när man använde DLSS, var det ofta märkbar suddighet i bilden. Men i den nya sci-fi actionfilmen Control från Remedy Entertainment kan du verkligen se den bästa implementeringen av DLSS hittills. Nyligen NVIDIA Hur DLSS-algoritmen för kontroll skapades.
Under studien upptäckte företaget att vissa tillfälliga artefakter, som tidigare klassificerades som fel, effektivt kan användas för att lägga till detaljer i bilden. Efter att ha räknat ut detta började NVIDIA arbeta på en ny AI-forskningsmodell som använde sådana artefakter för att återskapa detaljer som tidigare saknats i den slutliga bilden. Med hjälp av den nya modellen började det neurala nätverket nå enorma framgångar och producera mycket hög bildkvalitet. Teamet fick dock arbeta hårt för att optimera modellens prestanda innan de lades till i spelet. Den slutliga bildbehandlingsalgoritmen gjorde det möjligt att uppnå en ökning av bildhastigheten med upp till 75 % i tunga lägen.
I allmänhet fungerar DLSS på följande princip: spelet renderas i flera upplösningar, och sedan, baserat på sådana par av bilder, tränas det neurala nätverket för att omvandla en lågupplöst bild till en högre. För varje spel och för varje upplösning måste du träna din egen modell under lång tid, så vanligtvis är DLSS endast tillgänglig i de svåraste lägena (till exempel med strålspårningseffekter), vilket ger acceptabel prestanda i dem.
NVIDIA noterade att även den nya och förbättrade versionen av DLSS fortfarande lämnar utrymme för förbättringar och optimeringar. Till exempel, när du använder DLSS vid 720p i Control ser lågorna märkbart värre ut än vid 1080p. Liknande artefakter observeras i vissa typer av rörelser i ramen.
Därför kommer experter att fortsätta att förbättra maskininlärningsmodellen för att uppnå ännu mer imponerande resultat. Och de visade till och med en tidig version av sin nästa lovande DLSS-modell med exemplet på en skogsbrandscen i Unreal Engine 4. Den nya modellen låter dig återställa små detaljer som glöd och gnistor, även om den fortfarande kräver optimering när det gäller bildåtergivning fart. När detta arbete är klart kommer ägare av grafikkort baserade på Turing-arkitekturen att få nya drivrutiner med ännu bättre och effektivare DLSS-lägen.
Källa: 3dnews.ru