Interfész prototípusa képek átviteléhez a valós világból egy grafikus szerkesztőbe

Cyril Diagne (Cyril Diagne), francia művész, tervező, programozó és kísérletező a felhasználói felületek területén, közzétett alkalmazás prototípusa ar-cutpaste, amely kiterjesztett valóság technológiái segítségével a valós világból a képeket grafikus szerkesztőbe helyezi át. A program lehetővé teszi, hogy mobiltelefonjával bármilyen valós tárgyat a kívánt szögből lefényképezzen, majd az alkalmazás eltávolítja a hátteret, és csak ezt az objektumot hagyja meg. Ezután a felhasználó egy grafikus szerkesztőt futtató számítógép képernyőjére fókuszálhatja a mobiltelefon kameráját, kiválaszthat egy pontot és beilleszthet egy objektumot ebbe a pozícióba.

Interfész prototípusa képek átviteléhez a valós világból egy grafikus szerkesztőbe

Kód szerver rész meg van írva Pythonban, és mobil alkalmazások Android platformon a TypeScript használatával a React Native keretrendszer használatával. Téma kiemelése a fényképen és a háttér törlése alkalmazott gépi tanulási könyvtár BASNet, PyTorch és torchvision használatával. A képernyő azon pontjának meghatározásához, amelyre a telefon kamerája irányult, amikor behelyezett egy tárgyat, használt OpenCV csomag és osztály SZITÁL. A grafikus szerkesztővel való interakcióhoz egy egyszerű szerverkezelő indul el a rendszeren, amely a képernyőn bizonyos X és Y koordinátákon továbbít egy képet beszúrásra (jelenleg csak a Photoshop távirányító protokollja támogatott, más grafikus szerkesztők támogatása megígérte, hogy a jövőben hozzáadják).

Forrás: opennet.ru

Hozzászólás