Neurális hálózatok segítségével az 1911-es New York-i felvételeket 4k/60p színes videóvá alakították.

1911-ben a svéd Svenska Biografteatern cég egy New York-i utazást forgatott, aminek eredményeként több mint nyolc perces videót készítettek, amely eredeti formájában meglehetősen gyenge felbontású és alacsony, instabil képkockasebességgel rendelkezik.

Neurális hálózatok segítségével az 1911-es New York-i felvételeket 4k/60p színes videóvá alakították.

Az évek során különféle kísérletek történtek a felbontás, a képkockasebesség, a színek és egyéb részletek javítására. Az eredmények változatosak voltak, de az eddigi egyik legjobb Denis Shiryaev munkája volt, aki nemrég megosztott egy továbbfejlesztett videót a Redditen és YouTube-csatornáján.

Videó New Yorkról 1911-ből 4K/60p felbontásban

A videó leírása, valamint Shiryaev megjegyzése szerint a Redditen négy neurális hálózat vett részt a projektben, köztük a DeOldify NN (színezéshez). Általánosságban elmondható, hogy a különféle neurális hálózatok képesek voltak másodpercenként 60-ra növelni a képkocka sebességet, 4K-ra növelni a felbontást, növelni az élességet és még automatikus színezést is végrehajtani.

Eredeti videó New York City-ről 1911-ben hangátvitellel és beállított lejátszási sebességgel

Az eredmény sokkal jobb, mint az eredeti, de a neurális hálózat nyilvánvalóan nem tudott megbirkózni az automatikus színezéssel. Az overlay hangok lehetővé teszik, hogy mélyebben elmerüljön az Egyesült Államok több mint 100 évvel ezelőtti üzleti fővárosának légkörében. Mi már írt arról, hogy Denis Shiryaev hogyan javította vizuálisan a Lumière fivérek „A vonat érkezése” című, 1896-os híres rövidfilmjét. Tovább a csatornája vannak más érdekes munkák is, köztük az Apollo 16 holdküldetés:



Forrás: 3dnews.ru

Hozzászólás