Dnes už pro mnohé není problém odstranit rušivý prvek z fotografie. Základní dovednosti ve Photoshopu nebo dnes módní neuronové sítě mohou problém vyřešit. V případě videa se však situace komplikuje, protože potřebujete zpracovat minimálně 24 snímků za sekundu videa.
A tady je to na Github nástroj, který tyto akce automatizuje a umožňuje vám z videa odstranit jakékoli pohybující se objekty. Stačí pomocí kurzoru vybrat další objekt s rámečkem a systém se postará o zbytek. Nástroj má jednoduchý název – video-object-removal. Je však založen na vyspělých technologiích.
Systém využívá neuronovou síť, která zpracovává video snímek po snímku a nepotřebný objekt nebo osobu nahradí pozadím. Program může měnit až 55 snímků za sekundu a vytvářet pozadí na základě okolního obrazu. I když při bližším zkoumání je jasné, že metoda odstraňování objektů má k dokonalosti daleko, výsledky jsou působivé.
Některé snímky ukazují, že na místě „odstraněné“ osoby zůstává průhledná nebo průsvitná fantomová stopa. Faktem je, že systém analyzuje pouze dostupné pozadí a ne vždy je dokáže adekvátně vykreslit. Záleží na složitosti pozadí – čím jednodušší a jednotnější, tím lepší konečný výsledek.
Pro testování byl použit OS Ubuntu 16.04, Python 3.5, Pytorch 0.4.0, CUDA 8.0 a zpracování bylo provedeno na grafické kartě NVIDIA GeForce GTX 1080 Ti. Samotné zdroje jsou otevřené a může je používat každý. Upozorňujeme však, že tato technologie může být také použita ke škodlivým účelům. Například „skrýt“ dopravní přestupky nebo jiné trestné činy zachycené na kameru.
Zdroj: 3dnews.ru