Usando redes neurais, imagens de Nova York em 1911 foram transformadas em vídeo colorido 4k/60p

Em 1911, a empresa sueca Svenska Biografteatern filmou uma viagem à cidade de Nova Iorque, resultando em mais de oito minutos de vídeo que, na sua forma original, tem uma resolução bastante fraca e uma taxa de fotogramas baixa e instável.

Usando redes neurais, imagens de Nova York em 1911 foram transformadas em vídeo colorido 4k/60p

Ao longo dos anos, várias tentativas foram feitas para melhorar a resolução, taxa de quadros, cores e outros detalhes. Os resultados variaram, mas um dos melhores até agora foi o trabalho de Denis Shiryaev, que recentemente compartilhou um vídeo melhorado no Reddit e em seu canal no YouTube.

Vídeo de Nova York 1911 em 4K/60p

De acordo com a descrição do vídeo, além de um comentário deixado por Shiryaev no Reddit, quatro redes neurais estiveram envolvidas no projeto, incluindo DeOldify NN (para colorização). Em geral, diversas redes neurais conseguiram aumentar a taxa de quadros para 60 por segundo, aumentar a resolução para 4K, aumentar a nitidez e até realizar colorização automática.

Vídeo original da cidade de Nova York em 1911 com narração e velocidade de reprodução ajustada

O resultado é muito melhor que o original, mas a rede neural claramente não conseguiu lidar com a colorização automática. Os sons sobrepostos permitem que você mergulhe mais profundamente na atmosfera da capital empresarial dos Estados Unidos há mais de 100 anos. Nós já escreveu sobre como Denis Shiryaev melhorou visualmente o famoso curta-metragem dos irmãos Lumière “A Chegada de um Trem” de 1896. Sobre o canal dele existem outros trabalhos interessantes, incluindo a missão lunar Apollo 16:



Fonte: 3dnews.ru

Adicionar um comentário