Ved hjelp av nevrale nettverk ble opptak av New York i 1911 omgjort til 4k/60p fargevideo

I 1911 filmet det svenske selskapet Svenska Biografteatern en tur til New York City, noe som resulterte i over åtte minutter med video som i sin opprinnelige form har en ganske lav oppløsning og en lav, ustabil bildefrekvens.

Ved hjelp av nevrale nettverk ble opptak av New York i 1911 omgjort til 4k/60p fargevideo

Gjennom årene har det blitt gjort diverse forsøk på å forbedre oppløsning, bildefrekvens, farge og andre detaljer. Resultatene har variert, men et av de beste hittil er arbeidet til Denis Shiryaev, som nylig delte en forbedret video på Reddit og YouTube-kanalen sin.

Spill av video

New York City 1911-video i 4K/60p

I følge videobeskrivelsen og en kommentar fra Shiryaev på Reddit, brukte prosjektet fire nevrale nettverk, inkludert DeOldify NN (for fargelegging). Totalt sett klarte de ulike nevrale nettverkene å øke bildefrekvensen til 60 bilder per sekund, heve oppløsningen til 4K, forbedre skarpheten og til og med utføre automatisk fargelegging.

Spill av video

Originalvideo av New York City i 1911 med voiceover og justert avspillingshastighet

Resultatet er mye bedre enn originalen, men det nevrale nettverket sviktet tydeligvis med den automatiske fargeleggingen. De overlappende lydene lar oss fordype oss dypere i atmosfæren til den amerikanske forretningshovedstaden for mer enn 100 år siden. allerede skrevet om hvordan Denis Shiryaev visuelt forbedret den berømte kortfilmen fra 1896 av Lumière-brødrene, Ankomsten av et tog. kanalen hans Det finnes andre interessante verk, inkludert Apollo 16-måneferden:

Spill av video



Kilde: 3dnews.ru