Utilizzando le reti neurali, le riprese di New York nel 1911 sono state trasformate in video a colori 4K/60p

Nel 1911, la compagnia svedese Svenska Biografteatern filmò un viaggio a New York City, ottenendo oltre otto minuti di video che, nella sua forma originale, ha una risoluzione piuttosto scarsa e un frame rate basso e instabile.

Utilizzando le reti neurali, le riprese di New York nel 1911 sono state trasformate in video a colori 4K/60p

Nel corso degli anni sono stati fatti vari tentativi per migliorare risoluzione, frame rate, colori e altri dettagli. I risultati sono stati vari, ma uno dei migliori fino ad oggi è stato il lavoro di Denis Shiryaev, che ha recentemente condiviso un video migliorato su Reddit e sul suo canale YouTube.

Video di New York 1911 in 4K/60p

Secondo la descrizione del video e un commento lasciato da Shiryaev su Reddit, nel progetto erano coinvolte quattro reti neurali, tra cui DeOldify NN (per la colorazione). In generale, varie reti neurali sono riuscite ad aumentare la frequenza dei fotogrammi a 60 al secondo, ad aumentare la risoluzione a 4K, ad aumentare la nitidezza e persino a eseguire la colorazione automatica.

Video originale di New York City nel 1911 con voce fuori campo e velocità di riproduzione modificata

Il risultato è molto migliore dell’originale, ma la rete neurale chiaramente non è in grado di gestire la colorazione automatica. I suoni sovrapposti ti consentono di immergerti più profondamente nell'atmosfera della capitale economica degli Stati Uniti più di 100 anni fa. Noi già scritto su come Denis Shiryaev abbia migliorato visivamente il famoso cortometraggio dei fratelli Lumière “L'arrivo di un treno” del 1896. SU suo canale ci sono altri lavori interessanti, tra cui la missione lunare Apollo 16:



Fonte: 3dnews.ru

Aggiungi un commento