Pomocou neurónových sietí sa zábery z New Yorku v roku 1911 zmenili na farebné video 4k/60p

V roku 1911 švédska spoločnosť Svenska Biografteatern natočila výlet do New Yorku, výsledkom čoho bolo viac ako osem minút videa, ktoré má vo svojej pôvodnej podobe dosť slabé rozlíšenie a nízku, nestabilnú snímkovú frekvenciu.

Pomocou neurónových sietí sa zábery z New Yorku v roku 1911 zmenili na farebné video 4k/60p

V priebehu rokov sa robili rôzne pokusy o zlepšenie rozlíšenia, snímkovej frekvencie, farieb a iných detailov. Výsledky sa rôznili, no jedným z najlepších k dnešnému dňu bola práca Denisa Shiryaeva, ktorý nedávno zdieľal vylepšené video na Reddite a svojom kanáli YouTube.

Prehrať video

Video z New Yorku 1911 v rozlíšení 4K/60p

Podľa popisu videa, ako aj komentára, ktorý zanechal Shiryaev na Reddite, boli do projektu zapojené štyri neurónové siete, vrátane DeOldify NN (pre zafarbenie). Vo všeobecnosti sa rôznym neurónovým sieťam podarilo zvýšiť frekvenciu snímok na 60 za sekundu, zvýšiť rozlíšenie na 4K, zvýšiť ostrosť a dokonca vykonať automatické zafarbenie.

Prehrať video

Pôvodné video z New Yorku v roku 1911 s hlasovým záznamom a upravenou rýchlosťou prehrávania

Výsledok je oveľa lepší ako originál, ale neurónová sieť si zjavne nedokázala poradiť s automatickým zafarbením. Prekryté zvuky vám umožnia ponoriť sa hlbšie do atmosféry obchodného hlavného mesta Spojených štátov amerických pred viac ako 100 rokmi. my už napísal o tom, ako Denis Shiryaev vizuálne vylepšil slávny krátky film bratov Lumièrovcov „Príchod vlaku“ z roku 1896. Zapnuté jeho kanál existujú aj ďalšie zaujímavé diela vrátane lunárnej misie Apollo 16:

Prehrať video



Zdroj: 3dnews.ru