Collabora je objavila implementaciju sustava strojnog učenja za poboljšanje učinkovitosti kompresije videokonferencije, koja omogućuje, u slučaju prijenosa videa s licem sudionika, smanjenje potrebne propusnosti za 10 puta uz zadržavanje kvalitete na razini H.264 . Implementacija je napisana u Pythonu korištenjem PyTorch okvira i otvorena je pod GPLv3 licencom.
Metoda vam omogućuje rekonstrukciju detalja lica koji su izgubljeni tijekom prijenosa uz visoku razinu kompresije. Model strojnog učenja generira animaciju glave koja govori na temelju zasebno prenesene visokokvalitetne slike lica i rezultirajućeg videa, prateći promjene u izrazu lica i položaju glave u videu. Na strani pošiljatelja video se prenosi vrlo malom brzinom prijenosa, a na strani primatelja obrađuje ga sustav strojnog učenja. Kako bi se dodatno poboljšala kvaliteta, generirani video može se obraditi pomoću modela Super-Resolution.
Izvor: opennet.ru