Met behulp van neurale netwerken werden beelden van New York in 1911 omgezet in 4k/60p kleurenvideo

In 1911 filmde het Zweedse bedrijf Svenska Biografteatern een reis naar New York City, wat resulteerde in ruim acht minuten aan video die, in zijn oorspronkelijke vorm, een nogal slechte resolutie en een lage, onstabiele framesnelheid heeft.

Met behulp van neurale netwerken werden beelden van New York in 1911 omgezet in 4k/60p kleurenvideo

Door de jaren heen zijn er verschillende pogingen ondernomen om de resolutie, framesnelheid, kleuren en andere details te verbeteren. De resultaten varieerden, maar een van de beste tot nu toe was het werk van Denis Shiryaev, die onlangs een verbeterde video deelde op Reddit en zijn YouTube-kanaal.

Video van New York 1911 in 4K/60p

Volgens de videobeschrijving en een opmerking van Shiryaev op Reddit waren vier neurale netwerken bij het project betrokken, waaronder DeOldify NN (voor inkleuring). Over het algemeen slaagden verschillende neurale netwerken erin de framesnelheid te verhogen tot 60 per seconde, de resolutie te verhogen naar 4K, de scherpte te verhogen en zelfs automatische inkleuring uit te voeren.

Originele video van New York City in 1911 met voice-over en aangepaste afspeelsnelheid

Het resultaat is veel beter dan het origineel, maar het neurale netwerk kon de automatische inkleuring duidelijk niet aan. Overlappende geluiden laten je dieper onderdompelen in de sfeer van de zakenhoofdstad van de Verenigde Staten van meer dan 100 jaar geleden. Wij schreef al over hoe Denis Shiryaev de beroemde korte film van de gebroeders Lumiere “The Arrival of a Train” uit 1896 visueel verbeterde. Op zijn kanaal er zijn nog andere interessante werken, waaronder de Apollo 16-maanmissie:



Bron: 3dnews.ru

Voeg een reactie