NVIDIA DLSS, en maskinlæringsbaseret fuldskærms anti-aliasing-teknologi, der bruger tensorkernerne på GeForce RTX-grafikkort, er blevet væsentligt forbedret over tid. I starten, når man brugte DLSS, var der ofte mærkbar sløring af billedet. Men i den nye sci-fi actionfilm Control fra Remedy Entertainment kan du helt sikkert se den bedste implementering af DLSS til dato. For nylig NVIDIA Hvordan DLSS-algoritmen til kontrol blev oprettet.
Under undersøgelsen opdagede virksomheden, at visse midlertidige artefakter, som tidligere blev klassificeret som fejl, effektivt kan bruges til at tilføje detaljer til billedet. Efter at have fundet ud af dette, begyndte NVIDIA at arbejde på en ny AI-forskningsmodel, der brugte sådanne artefakter til at genskabe detaljer, der tidligere manglede på det endelige billede. Ved hjælp af den nye model begyndte det neurale netværk at opnå enorm succes og producere meget høj billedkvalitet. Holdet måtte dog arbejde hårdt for at optimere modellens ydeevne, før de blev tilføjet til spillet. Den endelige billedbehandlingsalgoritme gjorde det muligt at opnå en stigning i billedhastigheden med op til 75 % i tunge tilstande.
Generelt fungerer DLSS efter følgende princip: spillet gengives i flere opløsninger, og derefter, baseret på sådanne par billeder, trænes det neurale netværk til at transformere et lavopløsningsbillede til et højere. For hvert spil og for hver opløsning skal du træne din egen model i lang tid, så normalt er DLSS kun tilgængelig i de sværeste tilstande (for eksempel med strålesporingseffekter), hvilket giver acceptabel ydeevne i dem.
NVIDIA bemærkede, at selv den nye og forbedrede version af DLSS stadig efterlader plads til forbedringer og optimeringer. For eksempel, når du bruger DLSS ved 720p i Control, ser flammerne mærkbart værre ud end ved 1080p. Lignende artefakter observeres i nogle typer bevægelser i rammen.
Derfor vil eksperter fortsætte med at forbedre maskinlæringsmodellen for at opnå endnu mere imponerende resultater. Og de viste endda en tidlig version af deres næste lovende DLSS-model ved at bruge eksemplet med en skovbrandsscene i Unreal Engine 4. Den nye model giver dig mulighed for at gendanne små detaljer som gløder og gnister, selvom det stadig kræver optimering med hensyn til billedgengivelse fart. Når dette arbejde er afsluttet, vil ejere af videokort baseret på Turing-arkitekturen modtage nye drivere med endnu bedre og mere effektive DLSS-tilstande.
Kilde: 3dnews.ru