Hoy en día, para muchos, eliminar un elemento que interfiere en una fotografía ya no es un problema. Las habilidades básicas en Photoshop o las redes neuronales de moda hoy en día pueden resolver el problema. Sin embargo, en el caso del vídeo, la situación se vuelve más complicada, porque es necesario procesar al menos 24 fotogramas por segundo de vídeo.
Y aquí está en Github. una utilidad que automatiza estas acciones, permitiéndole eliminar cualquier objeto en movimiento del video. Sólo necesitas seleccionar un objeto extra con un marco usando el cursor, y el sistema hará el resto. La utilidad tiene un nombre simple: eliminación de objetos de video. Sin embargo, se basa en tecnologías avanzadas.
El sistema utiliza una red neuronal que procesa el vídeo cuadro por cuadro, reemplazando un objeto o persona innecesarios con el fondo. El programa puede cambiar hasta 55 fotogramas por segundo, creando el fondo en función de la imagen circundante. Aunque tras una inspección más cercana queda claro que el método de eliminación de objetos está lejos de ser perfecto, los resultados son impresionantes.
Algunas tomas muestran que en lugar de la persona “eliminada” queda un rastro fantasmal transparente o translúcido. El hecho es que el sistema analiza sólo el fondo disponible y no siempre es capaz de dibujarlo adecuadamente. Depende de la complejidad del fondo: cuanto más simple y uniforme sea, mejor será el resultado final.
Para las pruebas, el sistema operativo utilizado fue Ubuntu 16.04, Python 3.5, Pytorch 0.4.0, CUDA 8.0 y el procesamiento se realizó en una tarjeta de video NVIDIA GeForce GTX 1080 Ti. Las fuentes en sí son abiertas y pueden ser utilizadas por todos. Sin embargo, observamos que dicha tecnología también puede utilizarse con fines maliciosos. Por ejemplo, para “ocultar” infracciones de tráfico u otros delitos captados por la cámara.
Fuente: 3dnews.ru