Prototip sučelja za prijenos slika iz stvarnog svijeta u grafički uređivač

Cyril Diagne (Cyril Diagne), francuski umjetnik, dizajner, programer i eksperimentator na polju korisničkih sučelja, objavljen prototip aplikacije ar-cutpaste, koji koristi tehnologije proširene stvarnosti za prijenos slika iz stvarnog svijeta u grafički uređivač. Program vam omogućuje da mobitelom fotografirate bilo koji stvarni objekt iz željenog kuta, nakon čega će aplikacija ukloniti pozadinu i ostaviti samo ovaj objekt. Zatim, korisnik može fokusirati kameru mobilnog telefona na zaslon računala koji pokreće grafički uređivač, odabrati točku i umetnuti objekt na tu poziciju.

Prototip sučelja za prijenos slika iz stvarnog svijeta u grafički uređivač

Šifra serverski dio je napisan u Pythonu, i Mobilna aplikacija za Android platformu koristeći TypeScript koristeći React Native okvir. Za označavanje subjekta na fotografiji i brisanje pozadine primijenjena knjižnica strojnog učenja BASNet, koristeći PyTorch i torchvision. Da biste odredili točku na zaslonu prema kojoj je kamera telefona bila usmjerena kada ste umetnuli predmet, polovan OpenCV paket i klasa PROSIJATI. Za interakciju s grafičkim uređivačem, na sustavu se pokreće jednostavan rukovatelj poslužitelja koji šalje sliku za umetanje na određenim X i Y koordinatama na ekranu (trenutno je podržan samo Photoshop daljinski upravljački protokol, a podrška za druge grafičke uređivače je obećano da će se dodati u budućnosti).

Izvor: opennet.ru

Dodajte komentar