За допомогою нейромереж зйомка Нью-Йорка 1911 року перетворена на кольорове відео 4k/60p

У 1911 році шведська компанія Svenska Biografteatern зробила відеозапис поїздки до Нью-Йорка, в результаті чого було отримано більше восьми хвилин відео, яке у своєму первісному вигляді має досить слабку роздільну здатність і низьку нестабільну частоту кадрів.

За допомогою нейромереж зйомка Нью-Йорка 1911 року перетворена на кольорове відео 4k/60p

Протягом ряду років робилися різні спроби покращити роздільну здатність, частоту кадрів, кольори та інші деталі. Результати виходили різні, але одним із найкращих на сьогодні стала робота Дениса Ширяєва (Denis Shiryaev), який нещодавно поділився покращеним відео на Reddit та своєму каналі YouTube.

Відео Нью-Йорка 1911 року в 4K/60p

Згідно з описом відео, а також коментарю, залишеному Ширяєвим в Reddit, у проекті було задіяно чотири нейронні мережі, включаючи DeOldify NN (для колоризації). Загалом, різним нейронним мережам вдалося збільшити частоту кадрів до 60 за секунду, підняти роздільну здатність до 4K, підвищити різкість і навіть провести автоматичне оцвітіння.

Вихідне відео Нью-Йорка 1911 року з накладенням озвучки та відкоригованою швидкістю відтворення

Результат набагато кращий за оригінал, проте з автоматичним оцвітінням нейромережа явно не впоралася. Накладені звуки дозволяють глибше поринути в атмосферу ділової столиці США більш ніж 100-річну давність. Ми вже писали про те, як Денис Ширяєв візуально покращив знамениту короткометражку братів Люм'єр «Прибуття поїзда» 1896 року. на його каналі є й інші цікаві роботи, включаючи місячну місію «Аполлона-16»:



Джерело: 3dnews.ru

Додати коментар або відгук