Tänapäeval ei ole paljude jaoks fotolt segava elemendi eemaldamine enam probleem. Põhioskused Photoshopis või tänapäeva moodsates närvivõrkudes võivad probleemi lahendada. Video puhul läheb aga olukord keerulisemaks, sest videot on vaja töödelda vähemalt 24 kaadrit sekundis.
Ja siin see on Githubis utiliit, mis automatiseerib neid toiminguid, võimaldades teil eemaldada videost kõik liikuvad objektid. Peate lihtsalt kursori abil valima raamiga lisaobjekti ja süsteem teeb ülejäänu. Utiliidil on lihtne nimi - video-objekti eemaldamine. Kuid see põhineb arenenud tehnoloogiatel.
Süsteem kasutab närvivõrku, mis töötleb videot kaadri haaval, asendades mittevajaliku objekti või inimese taustaga. Programm suudab muuta kuni 55 kaadrit sekundis, ehitades tausta üles ümbritseva pildi põhjal. Kuigi lähemal uurimisel selgub, et objektide eemaldamise meetod pole kaugeltki täiuslik, on tulemused muljetavaldavad.
Mõned kaadrid näitavad, et "eemaldatud" inimese asemele jääb läbipaistev või poolläbipaistev fantoomjälg. Fakt on see, et süsteem analüüsib ainult olemasolevat tausta ega suuda seda alati adekvaatselt joonistada. Oleneb tausta keerukusest – mida lihtsam ja ühtlasem see on, seda parem lõpptulemus.
Testimiseks kasutati operatsioonisüsteemi Ubuntu 16.04, Python 3.5, Pytorch 0.4.0, CUDA 8.0 ning töötlemine viidi läbi NVIDIA GeForce GTX 1080 Ti videokaardil. Allikad ise on avatud ja neid saavad kasutada kõik. Siiski märgime, et sellist tehnoloogiat saab kasutada ka pahatahtlikel eesmärkidel. Näiteks liiklusrikkumiste või muude kaamerale püütud kuritegude “varjamiseks”.
Allikas: 3dnews.ru