Interfeisa prototips attēlu pārsūtīšanai no reālās pasaules uz grafikas redaktoru

Sirils Diagne (Kirils Diāns), franču mākslinieks, dizaineris, programmētājs un eksperimentētājs lietotāja interfeisu jomā, publicēti lietojumprogrammas prototips ar-cutpaste, kas izmanto paplašinātās realitātes tehnoloģijas, lai attēlus no reālās pasaules pārsūtītu uz grafikas redaktoru. Programma ļauj izmantot mobilo tālruni, lai no vēlamā leņķa nofotografētu jebkuru reālu objektu, pēc kura aplikācija noņems fonu un atstās tikai šo objektu. Pēc tam lietotājs var fokusēt mobilā tālruņa kameru datora ekrānā, kurā darbojas grafiskais redaktors, atlasīt punktu un ievietot objektu šajā pozīcijā.

Interfeisa prototips attēlu pārsūtīšanai no reālās pasaules uz grafikas redaktoru

Kods servera daļa ir uzrakstīta programmā Python un mobilā lietotne Android platformai, izmantojot TypeScript, izmantojot React Native ietvaru. Lai fotoattēlā iezīmētu objektu un notīrītu fonu piemēro mašīnmācīšanās bibliotēka BASNet, izmantojot PyTorch un torchvision. Lai noteiktu punktu ekrānā, uz kuru bija vērsta tālruņa kamera, ievietojot objektu, lietots OpenCV pakotne un klase SIFT. Lai mijiedarbotos ar grafisko redaktoru, sistēmā tiek palaists vienkāršs servera apdarinātājs, kas pārraida attēlu ievietošanai pēc noteiktām X un Y koordinātām ekrānā (šobrīd tiek atbalstīts tikai Photoshop tālvadības protokols, un atbalsts citiem grafiskajiem redaktoriem solīts pievienot nākotnē).

Avots: opennet.ru

Pievieno komentāru