Collabora video konferentsiyaning siqishni samaradorligini oshirish uchun mashinani o'rganish tizimini joriy qildi, bu esa videoni ishtirokchining yuzi bilan uzatishda H.10 darajasida sifatni saqlab, talab qilinadigan tarmoqli kengligini 264 baravar kamaytirish imkonini beradi. . Amalga oshirish PyTorch tizimi yordamida Python-da yozilgan va GPLv3 litsenziyasi ostida ochiq.
Usul uzatish paytida yo'qolgan yuz tafsilotlarini yuqori darajadagi siqilish bilan qayta tiklashga imkon beradi. Mashinani o'rganish modeli alohida uzatilgan yuqori sifatli yuz tasviri va natijada olingan video asosida gaplashuvchi bosh animatsiyasini yaratadi, yuz ifodasi va videodagi bosh holatidagi o'zgarishlarni kuzatadi. Yuboruvchi tomonida video juda past bit tezligida uzatiladi, qabul qiluvchi tomonda esa mashinani o'rganish tizimi tomonidan qayta ishlanadi. Sifatni yanada oshirish uchun yaratilgan videoni Super-Resolution modeli yordamida qayta ishlash mumkin.
Manba: opennet.ru