Hoxe, para moitos, eliminar un elemento interferente dunha fotografía xa non é un problema. As habilidades básicas en Photoshop ou as redes neuronais de moda actual poden resolver o problema. Non obstante, no caso do vídeo, a situación faise máis complicada, porque cómpre procesar polo menos 24 fotogramas por segundo de vídeo.
E aquí está en Github unha utilidade que automatiza estas accións, permitíndoche eliminar calquera obxecto en movemento do vídeo. Só tes que seleccionar un obxecto adicional cun marco usando o cursor, e o sistema fará o resto. A utilidade ten un nome sinxelo: video-object-removal. Non obstante, baséase en tecnoloxías avanzadas.
O sistema utiliza unha rede neuronal que procesa o vídeo fotograma a fotograma, substituíndo un obxecto ou persoa innecesarias polo fondo. O programa pode cambiar ata 55 fotogramas por segundo, creando o fondo en función da imaxe circundante. Aínda que unha inspección máis atenta queda claro que o método de eliminación de obxectos dista moito de ser perfecto, os resultados son impresionantes.
Algúns cadros mostran que unha traza fantasma transparente ou translúcida permanece no lugar da persoa "eliminada". O caso é que o sistema só analiza o fondo dispoñible e non sempre é capaz de debuxalo adecuadamente. Depende da complexidade do fondo: canto máis sinxelo e uniforme sexa, mellor será o resultado final.
Para as probas, o SO utilizado foi Ubuntu 16.04, Python 3.5, Pytorch 0.4.0, CUDA 8.0 e o procesamento realizouse nunha tarxeta de vídeo NVIDIA GeForce GTX 1080 Ti. As fontes en si están abertas e poden ser utilizadas por todos. Non obstante, observamos que esta tecnoloxía tamén se pode usar con fins maliciosos. Por exemplo, para "ocultar" infraccións de tráfico ou outros delitos captados pola cámara.
Fonte: 3dnews.ru