Collabora prezantoi një sistem të mësimit të makinës për kompresimin e videos

Collabora ka publikuar një implementim të një sistemi të mësimit të makinerive për të përmirësuar efikasitetin e kompresimit të videokonferencave, i cili lejon, në rastin e transmetimit të videos me fytyrën e një pjesëmarrësi, të zvogëlojë gjerësinë e brezit të kërkuar me 10 herë duke ruajtur cilësinë në nivelin H.264 . Implementimi është shkruar në Python duke përdorur kornizën PyTorch dhe është i hapur nën licencën GPLv3.

Metoda ju lejon të rindërtoni detajet e fytyrës të humbura gjatë transmetimit me një nivel të lartë kompresimi. Modeli i mësimit të makinës gjeneron një animacion të kokës që flet bazuar në një imazh të fytyrës me cilësi të lartë të transmetuar veçmas dhe videon që rezulton, duke ndjekur ndryshimet në shprehjen e fytyrës dhe pozicionin e kokës në video. Nga ana e dërguesit, videoja transmetohet me një shpejtësi shumë të ulët të biteve dhe nga ana e marrësit ajo përpunohet nga një sistem mësimi makinerie. Për të rritur më tej cilësinë, videoja e krijuar mund të përpunohet duke përdorur modelin Super-Rezolutë.



Burimi: opennet.ru

Shto një koment