Prototip d'interfície per transferir imatges del món real a un editor de gràfics

Cyril Diagne (Cyril Diagne), artista, dissenyador, programador i experimentador francès en el camp de les interfícies d'usuari, publicat prototip d'aplicació ar-cutpaste, que utilitza tecnologies de realitat augmentada per transferir imatges del món real a un editor de gràfics. El programa us permet utilitzar el vostre telèfon mòbil per fer una foto de qualsevol objecte real des de l'angle desitjat, després del qual l'aplicació eliminarà el fons i deixarà només aquest objecte. A continuació, l'usuari pot enfocar la càmera del telèfon mòbil a la pantalla de l'ordinador amb un editor de gràfics, seleccionar un punt i inserir un objecte en aquesta posició.

Prototip d'interfície per transferir imatges del món real a un editor de gràfics

Codi part del servidor està escrita en Python, i aplicacions mòbils per a la plataforma Android utilitzant TypeScript mitjançant el marc React Native. Per ressaltar un tema en una foto i netejar el fons aplicat biblioteca d'aprenentatge automàtic BASNet, utilitzant PyTorch i torchvision. Per determinar el punt de la pantalla al qual estava orientada la càmera del telèfon quan vau inserir un objecte, usat Paquet i classe OpenCV SIFT. Per interactuar amb l'editor gràfic, s'inicia al sistema un gestor de servidor senzill, que transmet una imatge per inserir-la a determinades coordenades X i Y de la pantalla (actualment només s'admet el protocol de control remot de Photoshop i s'hi admet altres editors gràfics). promès que s'afegirà en el futur).

Font: opennet.ru

Afegeix comentari