Χρησιμοποιώντας νευρωνικά δίκτυα, πλάνα από τη Νέα Υόρκη το 1911 μετατράπηκε σε έγχρωμο βίντεο 4k/60p

Το 1911, η σουηδική εταιρεία Svenska Biografteatern γύρισε ένα ταξίδι στη Νέα Υόρκη, με αποτέλεσμα πάνω από οκτώ λεπτά βίντεο που, στην αρχική του μορφή, έχει μάλλον κακή ανάλυση και χαμηλό, ασταθή ρυθμό καρέ.

Χρησιμοποιώντας νευρωνικά δίκτυα, πλάνα από τη Νέα Υόρκη το 1911 μετατράπηκε σε έγχρωμο βίντεο 4k/60p

Με τα χρόνια, έχουν γίνει διάφορες προσπάθειες για τη βελτίωση της ανάλυσης, του ρυθμού καρέ, των χρωμάτων και άλλων λεπτομερειών. Τα αποτελέσματα διέφεραν, αλλά ένα από τα καλύτερα μέχρι σήμερα ήταν η δουλειά του Denis Shiryaev, ο οποίος πρόσφατα μοιράστηκε ένα βελτιωμένο βίντεο στο Reddit και στο κανάλι του στο YouTube.

Βίντεο της Νέας Υόρκης 1911 σε 4K/60p

Σύμφωνα με την περιγραφή του βίντεο, καθώς και ένα σχόλιο που άφησε ο Shiryaev στο Reddit, τέσσερα νευρωνικά δίκτυα συμμετείχαν στο έργο, συμπεριλαμβανομένου του DeOldify NN (για χρωματισμό). Γενικά, διάφορα νευρωνικά δίκτυα κατάφεραν να αυξήσουν τον ρυθμό καρέ στα 60 ανά δευτερόλεπτο, να αυξήσουν την ανάλυση στα 4Κ, να αυξήσουν την ευκρίνεια και ακόμη και να πραγματοποιήσουν αυτόματο χρωματισμό.

Πρωτότυπο βίντεο της Νέας Υόρκης το 1911 με φωνή και προσαρμοσμένη ταχύτητα αναπαραγωγής

Το αποτέλεσμα είναι πολύ καλύτερο από το αρχικό, αλλά το νευρωνικό δίκτυο σαφώς δεν μπορούσε να αντιμετωπίσει τον αυτόματο χρωματισμό. Οι επικαλυμμένοι ήχοι σάς επιτρέπουν να βυθιστείτε βαθύτερα στην ατμόσφαιρα της επιχειρηματικής πρωτεύουσας των Ηνωμένων Πολιτειών πριν από περισσότερα από 100 χρόνια. Εμείς έγραψε ήδη για το πώς ο Denis Shiryaev βελτίωσε οπτικά τη διάσημη ταινία μικρού μήκους των αδερφών Lumière "The Arrival of a Train" από το 1896. Επί το κανάλι του υπάρχουν και άλλα ενδιαφέροντα έργα, συμπεριλαμβανομένης της σεληνιακής αποστολής Apollo 16:



Πηγή: 3dnews.ru

Προσθέστε ένα σχόλιο