Aujourd'hui, pour beaucoup, il n'est plus problĂ©matique de supprimer un Ă©lĂ©ment gĂȘnant d'une photo. Les compĂ©tences de base en Photoshop ou les rĂ©seaux neuronaux Ă la mode peuvent rĂ©soudre le problĂšme. Cependant, dans le cas de la vidĂ©o, la situation se complique, car il faut traiter au moins 24 images par seconde.
Et maintenant sur Github , un utilitaire qui automatise ces actions, permettant de supprimer n'importe quel objet en mouvement d'une vidéo. Il suffit de sélectionner l'objet indésirable avec le curseur, et le systÚme se charge du reste. L'utilitaire porte un nom simple : video-object-removal. Cependant, il repose sur des technologies avancées.
Le systÚme utilise un réseau neuronale qui traite la vidéo image par image, remplaçant l'objet ou la personne indésirable par un fond. Le programme peut modifier jusqu'à 55 images par seconde, reconstruisant le fond sur la base de l'image environnante. Bien qu'à premiÚre vue, il soit évident que la méthode de suppression des objets n'est pas parfaite, les résultats sont impressionnants.
Dans certaines scÚnes, on peut voir qu'à la place de la personne « supprimée », il reste une trace fantomatique transparente ou semi-transparente. Cela s'explique par le fait que le systÚme analyse uniquement le fond disponible et n'est pas encore toujours capable de le reconstruire de maniÚre adéquate. Cela dépend de la complexité du fond : plus il est simple et homogÚne, meilleur sera le résultat final.
Pour les tests, on a utilisĂ© Ubuntu 16.04, Python 3.5, Pytorch 0.4.0, CUDA 8.0, et le traitement s'est effectuĂ© sur la carte graphique NVIDIA GeForce GTX 1080 Ti. Les sources sont ouvertes et peuvent ĂȘtre utilisĂ©es par tous. Cependant, il convient de noter que cette technologie pourrait Ă©galement ĂȘtre utilisĂ©e Ă des fins malveillantes. Par exemple, pour « cacher » des violations du code de la route ou d'autres crimes enregistrĂ©s par des camĂ©ras.
Source : 3dnews.ru
