비디오에서 움직이는 물체를 제거하는 유틸리티가 나타났습니다.

오늘날 많은 사람들에게 사진에서 간섭 요소를 제거하는 것은 더 이상 문제가 되지 않습니다. Photoshop이나 오늘날 유행하는 신경망의 기본 기술로 문제를 해결할 수 있습니다. 하지만 영상의 경우 초당 최소 24프레임의 영상을 처리해야 하기 때문에 상황은 더욱 복잡해진다.

그리고 여기 Github에 있습니다 출연 한 이러한 작업을 자동화하여 비디오에서 움직이는 개체를 제거할 수 있는 유틸리티입니다. 커서를 사용하여 프레임이 있는 추가 개체를 선택하기만 하면 시스템이 나머지 작업을 수행합니다. 이 유틸리티는 video-object-removal이라는 간단한 이름을 가지고 있습니다. 그러나 이는 첨단 기술을 기반으로 합니다.

이 시스템은 영상을 프레임 단위로 처리해 불필요한 물체나 사람을 배경으로 바꾸는 신경망을 사용한다. 이 프로그램은 초당 최대 55프레임을 변경하여 주변 이미지를 기반으로 배경을 구성할 수 있습니다. 자세히 살펴보면 이물질 제거 방법이 완벽하지 않다는 것을 알 수 있지만 결과는 인상적입니다.

일부 프레임에서는 "제거된" 사람의 자리에 투명 또는 반투명의 유령 흔적이 남아 있는 것을 보여줍니다. 사실 시스템은 사용 가능한 배경만 분석하고 항상 적절하게 그릴 수는 없습니다. 배경의 복잡성에 따라 달라집니다. 더 단순하고 균일할수록 최종 결과가 더 좋습니다.

테스트를 위해 사용된 OS는 Ubuntu 16.04, Python 3.5, Pytorch 0.4.0, CUDA 8.0이었으며 처리는 NVIDIA GeForce GTX 1080 Ti 비디오 카드에서 수행되었습니다. 소스 자체는 공개되어 있어 누구나 사용할 수 있습니다. 그러나 이러한 기술은 악의적인 목적으로도 사용될 수 있습니다. 예를 들어, 카메라에 잡힌 교통 위반이나 기타 범죄를 "숨기기" 위해.

출처 : 3dnews.ru