„Collabora“ paskelbė mašininio mokymosi sistemos diegimą, skirtą vaizdo konferencijų glaudinimo efektyvumui pagerinti, kuri leidžia, perduodant vaizdo įrašą dalyvio veidu, 10 kartų sumažinti reikiamą pralaidumą, išlaikant kokybę H.264 lygiu. . Diegimas parašytas Python naudojant PyTorch sistemą ir yra atviras pagal GPLv3 licenciją.
Šis metodas leidžia atkurti veido detales, kurios buvo prarastos perdavimo metu, naudojant aukštą suspaudimo lygį. Mašininio mokymosi modelis generuoja kalbančios galvos animaciją pagal atskirai perduodamą aukštos kokybės veido vaizdą ir gautą vaizdo įrašą, stebint veido išraiškos ir galvos padėties pokyčius vaizdo įraše. Siuntėjo pusėje vaizdo įrašas perduodamas labai mažu bitų dažniu, o gavėjo pusėje jį apdoroja mašininio mokymosi sistema. Siekiant dar labiau pagerinti kokybę, sugeneruotas vaizdo įrašas gali būti apdorotas naudojant Super-Resolution modelį.
Šaltinis: opennet.ru