NVIDIA DLSS, uma tecnologia anti-aliasing de tela cheia baseada em aprendizado de máquina que usa os núcleos tensores das placas gráficas GeForce RTX, melhorou significativamente ao longo do tempo. Inicialmente, ao usar DLSS, muitas vezes havia um desfoque perceptível na imagem. No entanto, no novo filme de ação de ficção científica Control da Remedy Entertainment, você certamente pode ver a melhor implementação de DLSS até o momento. Recentemente NVIDIA Como foi criado o algoritmo DLSS para Controle.
Durante o estudo, a empresa descobriu que certos artefatos temporários, que antes eram classificados como erros, podem ser usados de forma eficaz para adicionar detalhes à imagem. Tendo descoberto isso, a NVIDIA começou a trabalhar em um novo modelo de pesquisa de IA que usava esses artefatos para recriar detalhes que antes estavam faltando na imagem final. Com a ajuda do novo modelo, a rede neural começou a obter enorme sucesso e a produzir imagens de altíssima qualidade. Porém, a equipe teve que trabalhar muito para otimizar o desempenho do modelo antes de adicioná-lo ao jogo. O algoritmo final de processamento de imagem permitiu obter um aumento na taxa de quadros em até 75% nos modos pesados.
Em geral, o DLSS funciona segundo o seguinte princípio: o jogo é renderizado em diversas resoluções e, a partir desses pares de imagens, a rede neural é treinada para transformar uma imagem de baixa resolução em uma de maior resolução. Para cada jogo e para cada resolução, você precisa treinar seu próprio modelo por um longo tempo, então normalmente o DLSS está disponível apenas nos modos mais difíceis (por exemplo, com efeitos de ray tracing), proporcionando desempenho aceitável neles.
A NVIDIA observou que mesmo a versão nova e aprimorada do DLSS ainda deixa espaço para melhorias e otimizações. Por exemplo, ao usar DLSS em 720p no Control, as chamas parecem visivelmente piores do que em 1080p. Artefatos semelhantes são observados em alguns tipos de movimento no quadro.
Portanto, os especialistas continuarão aprimorando o modelo de aprendizado de máquina para alcançar resultados ainda mais impressionantes. E eles até mostraram uma versão inicial de seu próximo modelo DLSS promissor usando o exemplo de uma cena de incêndio florestal no Unreal Engine 4. O novo modelo permite restaurar pequenos detalhes como brasas e faíscas, embora ainda exija otimização em termos de renderização de quadros velocidade. Quando este trabalho for concluído, os proprietários de placas de vídeo baseadas na arquitetura Turing receberão novos drivers com modos DLSS ainda melhores e mais eficientes.
Fonte: 3dnews.ru