Prototipe antarmuka untuk mentransfer gambar dari dunia nyata ke editor grafis

Cyril Diagne (Cyril Diagne), seniman, perancang, pemrogram, dan eksperimen Perancis di bidang antarmuka pengguna, diterbitkan prototipe aplikasi ar-potong pasta, yang menggunakan teknologi augmented reality untuk mentransfer gambar dari dunia nyata ke dalam editor grafis. Program ini memungkinkan Anda menggunakan ponsel Anda untuk mengambil foto objek nyata apa pun dari sudut yang diinginkan, setelah itu aplikasi akan menghapus latar belakang dan hanya menyisakan objek tersebut. Selanjutnya, pengguna dapat memfokuskan kamera ponsel pada layar komputer yang menjalankan editor grafis, memilih suatu titik dan menyisipkan objek pada posisi ini.

Prototipe antarmuka untuk mentransfer gambar dari dunia nyata ke editor grafis

kode bagian server ditulis dengan Python, dan aplikasi seluler untuk platform Android menggunakan TypeScript menggunakan framework React Native. Untuk menyorot subjek dalam foto dan menghapus latar belakang terapan perpustakaan pembelajaran mesin BASNet, menggunakan PyTorch dan torchvision. Untuk menentukan titik di layar yang menjadi tujuan kamera ponsel saat Anda memasukkan suatu objek, bekas Paket dan kelas OpenCV SIFT. Untuk berinteraksi dengan editor grafis, pengendali server sederhana diluncurkan pada sistem, yang mengirimkan gambar untuk disisipkan pada koordinat X dan Y tertentu di layar (saat ini hanya protokol kendali jarak jauh Photoshop yang didukung, dan dukungan untuk editor grafis lainnya adalah berjanji akan ditambahkan di masa depan).

Sumber: opennet.ru

Tambah komentar