Hoy en día, para muchos, eliminar un elemento que interfiere en una fotografía ya no es un problema. Las habilidades básicas en Photoshop o las redes neuronales de moda hoy en día pueden resolver el problema. Sin embargo, en el caso del vídeo, la situación se vuelve más complicada, porque es necesario procesar al menos 24 fotogramas por segundo de vídeo.
Y aquí está en Github. una utilidad que automatiza estas acciones, permitiéndole eliminar cualquier objeto en movimiento del video. Sólo necesitas seleccionar un objeto extra con un marco usando el cursor, y el sistema hará el resto. La utilidad tiene un nombre simple: eliminación de objetos de video. Sin embargo, se basa en tecnologías avanzadas.
El sistema utiliza una red neuronal que procesa el vídeo cuadro por cuadro, reemplazando un objeto o persona innecesarios con el fondo. El programa puede cambiar hasta 55 fotogramas por segundo, creando el fondo en función de la imagen circundante. Aunque tras una inspección más cercana queda claro que el método de eliminación de objetos está lejos de ser perfecto, los resultados son impresionantes.
Algunas tomas muestran que en lugar de la persona “eliminada” queda un rastro fantasmal transparente o translúcido. El hecho es que el sistema analiza sólo el fondo disponible y no siempre es capaz de dibujarlo adecuadamente. Depende de la complejidad del fondo: cuanto más simple y uniforme sea, mejor será el resultado final.
Для тестирования использовалась ОС Ubuntu 16.04, Python 3.5, Pytorch 0.4.0, CUDA 8.0, а обработка шла на видеокарте NVIDIA GeForce GTX 1080 Ti. Сами исходники открыты и могут использоваться всеми. При этом отметим, что такая технология может применяться и в злонамеренных целях. Например, чтобы «скрыть» нарушения правил дорожного движения или другие преступления, попавшие на камеры.
Fuente: 3dnews.ru
