Liidese prototüüp piltide ülekandmiseks reaalsest maailmast graafikaredaktorisse

Cyril Diagne (Cyril Diagne), prantsuse kunstnik, disainer, programmeerija ja eksperimenteerija kasutajaliideste valdkonnas, avaldatud rakenduse prototüüp ar-cutpaste, mis kasutab liitreaalsuse tehnoloogiaid piltide ülekandmiseks reaalsest maailmast graafikaredaktorisse. Programm võimaldab teil mobiiltelefoniga pildistada mis tahes reaalset objekti soovitud nurga alt, misjärel rakendus eemaldab tausta ja jätab ainult selle objekti. Järgmisena saab kasutaja teravustada mobiiltelefoni kaamera arvutiekraanil, kus töötab graafikaredaktor, valida punkti ja sisestada sellesse kohta objekti.

Liidese prototüüp piltide ülekandmiseks reaalsest maailmast graafikaredaktorisse

Kood serveri osa on kirjutatud Pythonis ja mobiilirakendus Androidi platvormi jaoks, kasutades TypeScripti, kasutades React Native raamistikku. Objekti esiletõstmiseks fotol ja tausta puhastamiseks rakendatud masinõppe raamatukogu BASNet, kasutades PyTorchi ja torchvisioni. Et määrata ekraanil punkt, millele telefoni kaamera objekti sisestamisel oli suunatud, kasutatud OpenCV pakett ja klass SÕELDA. Graafilise redaktoriga suhtlemiseks käivitatakse süsteemis lihtne serverikäsitleja, mis edastab sisestamiseks pildi teatud X- ja Y-koordinaatidel ekraanil (praegu on toetatud ainult Photoshopi kaugjuhtimisprotokoll ja teiste graafiliste redaktorite tugi on olemas lubati tulevikus lisada).

Allikas: opennet.ru

Lisa kommentaar