نشرت Collabora تطبيقًا لنظام التعلم الآلي لتحسين كفاءة الضغط لمؤتمرات الفيديو، والذي يسمح، في حالة إرسال الفيديو بوجه المشارك، بتقليل عرض النطاق الترددي المطلوب بمقدار 10 مرات مع الحفاظ على الجودة عند مستوى H.264 . تمت كتابة التنفيذ بلغة Python باستخدام إطار عمل PyTorch وهو مفتوح بموجب ترخيص GPLv3.
تسمح لك هذه الطريقة بإعادة بناء تفاصيل الوجه التي فقدت أثناء الإرسال بمستوى عالٍ من الضغط. يقوم نموذج التعلم الآلي بإنشاء رسوم متحركة للرأس الناطق بناءً على صورة وجه عالية الجودة يتم إرسالها بشكل منفصل والفيديو الناتج، وتتبع التغييرات في تعبيرات الوجه وموضع الرأس في الفيديو. من ناحية المرسل، يتم إرسال الفيديو بمعدل بت منخفض جدًا، ومن ناحية المتلقي تتم معالجته بواسطة نظام التعلم الآلي. لتعزيز الجودة بشكل أكبر، يمكن معالجة الفيديو الذي تم إنشاؤه باستخدام نموذج الدقة الفائقة.
المصدر: opennet.ru