Oggi, per molti, non è più un problema rimuovere un elemento indesiderato da una foto. Le competenze di base nell'uso di Photoshop o le moderne reti neurali possono risolvere il problema. Tuttavia, nel caso dei video, la situazione si complica, poiché è necessario elaborare almeno 24 fotogrammi al secondo.
Ecco su Github un'utilità che automatizza queste operazioni, permettendo di rimuovere qualsiasi oggetto in movimento dai video. È sufficiente evidenziare l'oggetto indesiderato con il cursore, e il sistema farà tutto il resto. L'utilità si chiama semplicemente - video-object-removal. Tuttavia, alla base ci sono tecnologie avanzate.
Il sistema utilizza una rete neurale che elabora il video fotogramma per fotogramma, sostituendo l'oggetto o la persona non desiderata con uno sfondo. Il programma può modificare fino a 55 fotogrammi al secondo, ricostruendo lo sfondo sulla base dell'immagine circostante. Sebbene da un'analisi più attenta risulti chiaro che il metodo di rimozione degli oggetti non è affatto ideale, i risultati sono comunque impressionanti.
In alcuni fotogrammi si può notare che nel punto in cui si trovava la persona 'rimossa' rimane una traccia fantasma trasparente o semitrasparente. Questo perché il sistema analizza solo lo sfondo disponibile e finora non riesce sempre a ricostruirlo in modo adeguato. Ciò dipende dalla complessità dello sfondo: quanto più semplice e uniforme è, tanto migliore sarà il risultato finale.
Per i test è stato utilizzato il sistema operativo Ubuntu 16.04, Python 3.5, Pytorch 0.4.0, CUDA 8.0, e l'elaborazione è avvenuta su una scheda grafica NVIDIA GeForce GTX 1080 Ti. I sorgenti stessi sono open source e possono essere utilizzati da chiunque. Occorre notare che tale tecnologia può essere utilizzata anche per scopi malintenzionati. Ad esempio, per 'nascondere' violazioni delle norme del traffico o altri crimini ripresi dalle telecamere.
Fonte: 3dnews.ru
