NVIDIA DLSS, en maskinlæringsbasert fullskjerms anti-aliasing-teknologi som bruker tensorkjernene til GeForce RTX-grafikkort, har forbedret seg betydelig over tid. Opprinnelig, når du brukte DLSS, ble det ofte observert merkbar uskarphet. Men i den nye sci-fi actionfilmen Control fra Remedy Entertainment kan du absolutt se den beste implementeringen av DLSS til dags dato. Nylig NVIDIA Hvordan DLSS-algoritmen for kontroll ble opprettet.
Under studien oppdaget selskapet at visse midlertidige artefakter, som tidligere ble klassifisert som feil, effektivt kan brukes til å legge til detaljer i bildet. Etter å ha funnet ut av dette, begynte NVIDIA å jobbe med en ny AI-forskningsmodell som brukte slike artefakter for å gjenskape detaljer som tidligere manglet i det endelige bildet. Ved hjelp av den nye modellen begynte det nevrale nettverket å oppnå enorm suksess og produsere svært høy bildekvalitet. Imidlertid måtte teamet jobbe hardt for å optimalisere modellens ytelse før de la den til spillet. Den endelige bildebehandlingsalgoritmen oppnådde en bildefrekvensøkning på opptil 75 % i tunge moduser.
Generelt fungerer DLSS etter følgende prinsipp: spillet gjengis i flere oppløsninger, og deretter, basert på slike bildepar, trenes det nevrale nettverket til å transformere et lavoppløselig bilde til et høyere. For hvert spill og for hver oppløsning må du trene din egen modell i lang tid, så vanligvis er DLSS bare tilgjengelig i de vanskeligste modusene (for eksempel med strålesporingseffekter), og gir akseptabel ytelse i dem.
NVIDIA bemerket at selv den nye og forbedrede versjonen av DLSS fortsatt gir rom for forbedringer og optimaliseringer. For eksempel, når du bruker DLSS ved 720p i Control, ser flammene merkbart verre ut enn ved 1080p. Lignende artefakter er observert i noen typer bevegelser i rammen.
Derfor kommer eksperter til å fortsette å forbedre maskinlæringsmodellen for å oppnå enda mer imponerende resultater. Og de viste til og med en tidlig versjon av sin neste lovende DLSS-modell ved å bruke eksemplet på en skogbrannscene i Unreal Engine 4. Den nye modellen lar deg gjenopprette små detaljer som glør og gnister, selv om den fortsatt krever optimalisering når det gjelder bildegjengivelse hastighet. Når dette arbeidet er fullført, vil eiere av skjermkort basert på Turing-arkitekturen motta nye drivere med enda bedre og mer effektive DLSS-moduser.
Kilde: 3dnews.ru