Interfaceprototype foar it oerdragen fan ôfbyldings fan 'e echte wrâld nei in grafyske bewurker

Cyril Diagne (Cyril Diagne), Frânske keunstner, ûntwerper, programmeur en eksperimint op it mêd fan brûkersynterfaces, publisearre applikaasje prototype ar-cutpaste, dy't augmented reality-technologyen brûkt om ôfbyldings fan 'e echte wrâld oer te setten yn in grafyske bewurker. It programma lit jo jo mobile tillefoan brûke om in foto te nimmen fan elk wirklik objekt út 'e winske hoeke, wêrnei't de applikaasje de eftergrûn sil ferwiderje en allinich dit objekt ferlitte. Dêrnei kin de brûker de kamera fan 'e mobile tillefoan fokusje op it kompjûterskerm mei in grafyske bewurker, in punt selektearje en in objekt yn dizze posysje ynfoegje.

Interfaceprototype foar it oerdragen fan ôfbyldings fan 'e echte wrâld nei in grafyske bewurker

koade tsjinner diel wurdt skreaun yn Python, en mobile applikaasje foar it Android-platfoarm mei TypeScript mei it React Native-ramt. Om in ûnderwerp yn in foto te markearjen en de eftergrûn wiskje tapast machine learning bibleteek BASNet, mei PyTorch en torchvision. Om it punt op it skerm te bepalen wêrop de tillefoankamera wie rjochte doe't jo in objekt ynfoege, wurdt brûkt OpenCV pakket en klasse SIFT. Om ynteraksje te meitsjen mei de grafyske bewurker, wurdt in ienfâldige serverbewurker op it systeem lansearre, dy't in ôfbylding ferstjoert foar ynfoegje op bepaalde X- en Y-koordinaten op it skerm (op it stuit wurdt allinich it Photoshop-fernkontrôleprotokol stipe, en stipe foar oare grafyske bewurkers is tasein yn 'e takomst tafoege wurde).

Boarne: opennet.ru

Add a comment