Gränssnittsprototyp för överföring av bilder från den verkliga världen till en grafikredigerare

Cyril Diagne (Cyril Diagne), fransk konstnär, designer, programmerare och experimenterare inom området för användargränssnitt, publicerade applikationsprototyp ar-cutpaste, som använder förstärkt verklighetsteknik för att överföra bilder från den verkliga världen till en grafikredigerare. Programmet låter dig använda din mobiltelefon för att ta ett foto av vilket verkligt objekt som helst från önskad vinkel, varefter applikationen tar bort bakgrunden och lämnar bara detta objekt. Därefter kan användaren fokusera mobilkameran på datorskärmen som kör en grafikredigerare, välja en punkt och infoga ett objekt på denna position.

Gränssnittsprototyp för överföring av bilder från den verkliga världen till en grafikredigerare

Kod serverdelen skrivs i Python, och mobila applikationer för Android-plattformen med TypeScript med hjälp av React Native-ramverket. För att markera ett motiv i ett foto och rensa bakgrunden applicerad maskininlärningsbibliotek BASNet, med PyTorch och torchvision. För att bestämma den punkt på skärmen som telefonkameran var riktad mot när du infogade ett föremål, används OpenCV-paket och klass SÅLLA. För att interagera med den grafiska editorn startas en enkel serverhanterare på systemet, som sänder en bild för insättning vid vissa X- och Y-koordinater på skärmen (för närvarande stöds endast Photoshops fjärrkontrollprotokoll, och stöd för andra grafiska redigerare är lovade att läggas till i framtiden).

Källa: opennet.ru

Lägg en kommentar