Collabora видеоконференцияның қысу тиімділігін жақсарту үшін машиналық оқыту жүйесін енгізуді жариялады, бұл қатысушының бетімен бейнені жіберген жағдайда H.10 деңгейінде сапаны сақтай отырып, қажетті өткізу қабілеттілігін 264 есе азайтуға мүмкіндік береді. . Іске асыру PyTorch құрылымы арқылы Python тілінде жазылған және GPLv3 лицензиясы бойынша ашық.
Әдіс сығымдаудың жоғары деңгейімен жіберу кезінде жоғалған бет бөлшектерін қалпына келтіруге мүмкіндік береді. Машинамен оқыту моделі бет әлпетіндегі және бейнедегі бас күйіндегі өзгерістерді бақылай отырып, бөлек жіберілген жоғары сапалы бет кескіні мен алынған бейне негізінде сөйлейтін бас анимациясын жасайды. Жіберуші жағында бейне өте төмен бит жылдамдығымен жіберіледі, ал алушы жағында ол машиналық оқыту жүйесімен өңделеді. Сапасын одан әрі жақсарту үшін жасалған бейнені Super-Resolution үлгісі арқылы өңдеуге болады.
Ақпарат көзі: opennet.ru