Astăzi, pentru mulți, eliminarea unui element care interferează dintr-o fotografie nu mai este o problemă. Abilitățile de bază în Photoshop sau rețelele neuronale la modă de astăzi pot rezolva problema. Cu toate acestea, în cazul video, situația devine mai complicată, deoarece trebuie să procesați cel puțin 24 de cadre pe secundă de videoclip.
Și iată-l pe Github un utilitar care automatizează aceste acțiuni, permițându-vă să eliminați orice obiecte în mișcare din videoclip. Trebuie doar să selectați un obiect suplimentar cu un cadru folosind cursorul, iar sistemul se va ocupa de restul. Utilitarul are un nume simplu - video-object-removal. Cu toate acestea, se bazează pe tehnologii avansate.
Sistemul folosește o rețea neuronală care procesează video cadru cu cadru, înlocuind un obiect sau o persoană inutile cu fundalul. Programul poate schimba până la 55 de cadre pe secundă, construind fundalul pe baza imaginii din jur. Deși la o inspecție mai atentă devine clar că metoda de îndepărtare a obiectelor este departe de a fi perfectă, rezultatele sunt impresionante.
Unele cadre arată că o urmă fantomă transparentă sau translucidă rămâne în locul persoanei „înlăturate”. Faptul este că sistemul analizează doar fundalul disponibil și nu este întotdeauna capabil să îl deseneze în mod adecvat. Depinde de complexitatea fundalului - cu cât este mai simplu și mai uniform, cu atât rezultatul final este mai bun.
Pentru testare, sistemul de operare folosit a fost Ubuntu 16.04, Python 3.5, Pytorch 0.4.0, CUDA 8.0, iar procesarea a fost efectuată pe o placă video NVIDIA GeForce GTX 1080 Ti. Sursele în sine sunt deschise și pot fi folosite de oricine. Cu toate acestea, observăm că o astfel de tehnologie poate fi folosită și în scopuri rău intenționate. De exemplu, pentru a „ascunde” încălcările rutiere sau alte infracțiuni surprinse de camere.
Sursa: 3dnews.ru