Prototipo di interfaccia per il trasferimento di immagini dal mondo reale ad un editor grafico

Cyril Diagne (Cirillo Diagne), artista, designer, programmatore e sperimentatore francese nel campo delle interfacce utente, pubblicato prototipo dell'applicazione ar-cutpaste, che utilizza tecnologie di realtà aumentata per trasferire immagini dal mondo reale in un editor grafico. Il programma ti consente di utilizzare il tuo telefono cellulare per scattare una foto di qualsiasi oggetto reale dall'angolazione desiderata, dopodiché l'applicazione rimuoverà lo sfondo e lascerà solo questo oggetto. Successivamente, l'utente può mettere a fuoco la fotocamera del cellulare sullo schermo del computer utilizzando un editor grafico, selezionare un punto e inserire un oggetto in questa posizione.

Prototipo di interfaccia per il trasferimento di immagini dal mondo reale ad un editor grafico

codice la parte server è scritta in Python e applicazioni mobili per la piattaforma Android utilizzando TypeScript utilizzando il framework React Native. Per evidenziare un soggetto in una foto e cancellare lo sfondo applicare libreria di apprendimento automatico BASNet, utilizzando PyTorch e torchvision. Per determinare il punto dello schermo verso cui era puntata la fotocamera del telefono quando hai inserito un oggetto, usato Pacchetto e classe OpenCV SIFT. Per interagire con l'editor grafico, viene lanciato sul sistema un semplice gestore server, che trasmette un'immagine da inserire in determinate coordinate X e Y sullo schermo (attualmente è supportato solo il protocollo di controllo remoto di Photoshop, mentre è attivo il supporto per altri editor grafici promesso di essere aggiunto in futuro).

Fonte: opennet.ru

Aggiungi un commento