Mfano wa kiolesura cha kuhamisha picha kutoka kwa ulimwengu halisi hadi kwa kihariri cha michoro

Cyril Diagne (Cyril Diagne), msanii wa Ufaransa, mbuni, mtayarishaji programu na majaribio katika uwanja wa miingiliano ya watumiaji, kuchapishwa mfano wa maombi ar-cutpaste, ambayo hutumia teknolojia za ukweli uliodhabitiwa kuhamisha picha kutoka ulimwengu halisi hadi kihariri cha michoro. Mpango huo unakuwezesha kutumia simu yako ya mkononi kuchukua picha ya kitu chochote halisi kutoka kwa pembe inayotaka, baada ya hapo programu itaondoa historia na kuacha kitu hiki tu. Kisha, mtumiaji anaweza kuzingatia kamera ya simu ya mkononi kwenye skrini ya kompyuta inayoendesha kihariri cha picha, chagua uhakika na uingize kitu katika nafasi hii.

Kanuni sehemu ya seva imeandikwa katika Python, na programu ya simu kwa jukwaa la Android kwa kutumia TypeScript kwa kutumia mfumo wa React Native. Ili kuangazia mada kwenye picha na kufuta usuli inatumika maktaba ya kujifunza mashine BASNet, kwa kutumia PyTorch na torchvision. Kuamua nukta kwenye skrini ambayo kamera ya simu ililenga wakati unaingiza kitu, hutumiwa OpenCV kifurushi na darasa SIFT. Ili kuingiliana na kihariri cha picha, kidhibiti rahisi cha seva huzinduliwa kwenye mfumo, ambao hutuma picha kwa ajili ya kuingizwa kwenye viwianishi fulani vya X na Y kwenye skrini (kwa sasa ni itifaki ya udhibiti wa mbali ya Photoshop pekee inayotumika, na usaidizi kwa wahariri wengine wa picha aliahidi kuongezwa katika siku zijazo).

Chanzo: opennet.ru