Collabora je objavila implementaciju sistema mašinskog učenja za poboljšanje efikasnosti kompresije video konferencija, koji omogućava, u slučaju prenosa videa sa licem učesnika, smanjenje potrebne propusnosti za 10 puta uz održavanje kvaliteta na nivou H.264 . Implementacija je napisana u Python-u koristeći PyTorch framework i otvorena je pod GPLv3 licencom.
Metoda vam omogućava da rekonstruišete detalje lica izgubljene tokom prenosa uz visok nivo kompresije. Model mašinskog učenja generiše animaciju govoreće glave zasnovane na odvojeno prenošenoj visokokvalitetnoj slici lica i rezultirajućem videu, prateći promene u izrazu lica i položaju glave u videu. Na strani pošiljaoca, video se prenosi vrlo niskim bitrate-om, a na strani primaoca ga obrađuje sistem mašinskog učenja. Da bi se dodatno poboljšao kvalitet, generirani video se može obraditi pomoću modela Super-Resolution.
izvor: opennet.ru