Prototipo de interfaz para transferir imágenes del mundo real a un editor gráfico

Cyril Diagne (cirilo diagne), artista, diseñador, programador y experimentador francés en el campo de las interfaces de usuario, publicado prototipo de aplicación ar-cutpaste, que utiliza tecnologías de realidad aumentada para transferir imágenes del mundo real a un editor gráfico. El programa te permite usar tu teléfono móvil para tomar una foto de cualquier objeto real desde el ángulo deseado, después de lo cual la aplicación eliminará el fondo y dejará solo este objeto. A continuación, el usuario puede enfocar la cámara del teléfono móvil en la pantalla del ordenador ejecutando un editor gráfico, seleccionar un punto e insertar un objeto en esa posición.

Prototipo de interfaz para transferir imágenes del mundo real a un editor gráfico

código la parte del servidor está escrita en Python y aplicaciones móviles para la plataforma Android usando TypeScript usando el marco React Native. Para resaltar un sujeto en una foto y borrar el fondo aplica biblioteca de aprendizaje automático BASNet, usando PyTorch y torchvision. Para determinar el punto de la pantalla al que apuntaba la cámara del teléfono cuando insertó un objeto, utilizado Paquete y clase OpenCV SIFT. Para interactuar con el editor gráfico, se inicia un controlador de servidor simple en el sistema, que transmite una imagen para insertarla en ciertas coordenadas X e Y en la pantalla (actualmente solo se admite el protocolo de control remoto de Photoshop y se admiten otros editores gráficos). prometió ser agregado en el futuro).

Fuente: opennet.ru

Añadir un comentario