NVIDIA DLSS – технологія повноекранного згладжування на основі машинного навчання з використанням тензорних ядер відеокарт GeForce RTX – з часом значно покращилася. Спочатку з використанням DLSS часто спостерігалося помітне розмиття зображення. Однак у новому фантастичному бойовику Control від Remedy Entertainment, безумовно, можна побачити найкращу на сьогодні реалізацію DLSS. Нещодавно NVIDIA Як створювався алгоритм DLSS для Control.
У ході дослідження фахівці компанії виявили, що певні тимчасові артефакти, які раніше кваліфікувалися як помилки, можуть ефективно використовуватись для додавання деталей до зображення. З'ясувавши це, NVIDIA почала працювати над новою дослідною моделлю ІІ, яка використовувала такі артефакти для відтворення деталей, що раніше випадали з кінцевої картинки. За допомогою нової моделі нейромережа стала досягати величезних успіхів і видавати дуже високу якість зображення. Тим не менш, фахівцям довелося попрацювати над тим, щоб оптимізувати продуктивність моделі перед додаванням її до гри. Кінцевий алгоритм обробки зображень дозволив досягти підвищення частоти кадрів значення до 75 % у важких режимах.
У загальному випадку DLSS працює за наступним принципом: гра візуалізується в декількох роздільних здатності, а потім на основі таких пар зображень нейромережа тренується в трансформації зображення в низькій роздільній здатності до вищого. Під кожну гру та під кожну роздільну здатність необхідно довго тренувати власну модель, тому зазвичай DLSS доступна лише у найважчих режимах (наприклад, з ефектами трасування променів), забезпечуючи в них прийнятну продуктивність.
NVIDIA зазначила, що навіть нова покращена версія DLSS ще залишає простір для покращення та оптимізації. Наприклад, при використанні DLSS для дозволу 720p у Control полум'я виглядає помітно гірше, ніж у 1080p. Подібні артефакти спостерігаються на деяких видах руху в кадрі.
Тому фахівці збираються продовжувати вдосконалювати модель машинного навчання, щоб досягти ще більш вражаючих результатів. І навіть показали ранню версію своєї наступної перспективної моделі DLSS на прикладі сцени лісової пожежі в Unreal Engine 4. Нова модель дозволяє відновити дрібні деталі на кшталт вугілля та іскор, хоча ще потребує оптимізації з точки зору швидкості промальовування кадрів. Коли ця робота буде закінчена, власники відеокарт на базі архітектури Turing отримають нові драйвери з більш якісними та ефективними режимами DLSS.
Джерело: 3dnews.ru