I dag er det for mange ikke lenger et problem å fjerne et forstyrrende element fra et fotografi. Grunnleggende ferdigheter i Photoshop eller dagens fasjonable nevrale nettverk kan løse problemet. Men når det gjelder video, blir situasjonen mer komplisert, fordi du må behandle minst 24 bilder per sekund med video.
Og her er den på Github et verktøy som automatiserer disse handlingene, slik at du kan fjerne eventuelle bevegelige objekter fra videoen. Du trenger bare å velge et ekstra objekt med en ramme ved hjelp av markøren, og systemet vil gjøre resten. Verktøyet har et enkelt navn - video-objekt-fjerning. Den er imidlertid basert på avansert teknologi.
Systemet bruker et nevralt nettverk som behandler videoen bilde for bilde, og erstatter en unødvendig gjenstand eller person med bakgrunnen. Programmet kan endre opptil 55 bilder per sekund, og bygge opp bakgrunnen basert på bildet rundt. Selv om det ved nærmere ettersyn blir klart at metoden for fjerning av gjenstander er langt fra perfekt, er resultatene imponerende.
Noen rammer viser at et gjennomsiktig eller gjennomskinnelig fantomspor forblir i stedet for den "fjernede" personen. Faktum er at systemet kun analyserer den tilgjengelige bakgrunnen og er ikke alltid i stand til å tegne den tilstrekkelig. Det avhenger av kompleksiteten til bakgrunnen - jo enklere og mer enhetlig den er, jo bedre blir det endelige resultatet.
For testing var operativsystemet som ble brukt Ubuntu 16.04, Python 3.5, Pytorch 0.4.0, CUDA 8.0, og behandlingen ble utført på et NVIDIA GeForce GTX 1080 Ti skjermkort. Selve kildene er åpne og kan brukes av alle. Vi legger imidlertid merke til at slik teknologi også kan brukes til ondsinnede formål. For eksempel for å "gjemme" trafikkbrudd eller andre forbrytelser fanget på kamera.
Kilde: 3dnews.ru