Interface prototype para sa paglilipat ng mga larawan mula sa totoong mundo patungo sa isang graphics editor

Cyril Diagne (Cyril Diagne), French artist, designer, programmer at experimenter sa larangan ng mga user interface, lathala prototype ng application ar-cutpaste, na gumagamit ng mga teknolohiya ng augmented reality upang ilipat ang mga larawan mula sa totoong mundo patungo sa isang graphics editor. Pinapayagan ka ng programa na gamitin ang iyong mobile phone upang kumuha ng larawan ng anumang tunay na bagay mula sa nais na anggulo, pagkatapos nito ay aalisin ng application ang background at iiwan lamang ang bagay na ito. Susunod, maaaring ituon ng user ang camera ng mobile phone sa screen ng computer na nagpapatakbo ng isang graphics editor, pumili ng isang punto at magpasok ng isang bagay sa posisyong ito.

Interface prototype para sa paglilipat ng mga larawan mula sa totoong mundo patungo sa isang graphics editor

Kodigo ang bahagi ng server ay nakasulat sa Python, at mobile application para sa Android platform gamit ang TypeScript gamit ang React Native framework. Upang i-highlight ang isang paksa sa isang larawan at i-clear ang background inilapat library ng machine learning BASNet, gamit ang PyTorch at torchvision. Upang matukoy ang punto sa screen kung saan nakatutok ang camera ng telepono noong nagpasok ka ng isang bagay, ginamit OpenCV package at klase SIFT. Upang makipag-ugnayan sa graphic editor, ang isang simpleng server handler ay inilunsad sa system, na nagpapadala ng isang larawan para sa pagpasok sa ilang mga X at Y na coordinate sa screen (kasalukuyang ang Photoshop remote control protocol lamang ang sinusuportahan, at ang suporta para sa iba pang mga graphic editor ay ipinangakong idadagdag sa hinaharap).

Pinagmulan: opennet.ru

Magdagdag ng komento