Collabora telah menerbitkan implementasi sistem pembelajaran mesin untuk meningkatkan efisiensi kompresi konferensi video, yang memungkinkan, dalam hal transmisi video dengan wajah peserta, mengurangi bandwidth yang dibutuhkan sebanyak 10 kali lipat dengan tetap menjaga kualitas pada tingkat H.264 . Implementasinya ditulis dengan Python menggunakan kerangka PyTorch dan terbuka di bawah lisensi GPLv3.
Metode ini memungkinkan Anda merekonstruksi detail wajah yang hilang selama transmisi dengan tingkat kompresi yang tinggi. Model pembelajaran mesin menghasilkan animasi kepala berbicara berdasarkan gambar wajah berkualitas tinggi yang dikirimkan secara terpisah dan video yang dihasilkan, melacak perubahan ekspresi wajah dan posisi kepala dalam video. Di sisi pengirim, video ditransmisikan dengan bitrate yang sangat rendah, dan di sisi penerima diproses oleh sistem pembelajaran mesin. Untuk lebih meningkatkan kualitas, video yang dihasilkan dapat diproses menggunakan model Resolusi Super.
Sumber: opennet.ru