Достъпен мултимедиен фреймуърк GStreamer 1.16.0

След повече от година разработка се състоя релиз GStreamer 1.16, написан на C, кроссплатформенный набор компонентов для создания различных мультимедийных приложений, от медиаплееров и конвертеров аудио/видео файлов до VoIP-приложений и систем потокового вещания. Код GStreamer распространяется под лицензией LGPLv2.1. Обновления плагинов gst-plugins-base 1.16, gst-plugins-good 1.16, gst-plugins-bad 1.16, gst-plugins-ugly 1.16, а также обвязка gst-libav 1.16 и сервер потокового вещания gst-rtsp-server 1.16 доступны одновременно. На уровне API и ABI новый выпуск обратно совместим с веткой 1.0. Бинарные сборки будут доступны в ближайшее время ще бъдат подготвени за Android, iOS, macOS и Windows (в Linux се препоръчва да се използват пакети от дистрибуцията).

Ключови подобрения GStreamer 1.16:

• В WebRTC добавлена поддержка P2P каналов данных, реализованных с помощью протокола SCTP, а также поддержка механизма BUNDLE для отправки различных типов мультимедийных данных в одном соединении и возможность работы с несколькими серверами TURN (расширение STUN для обхода NAT);
• Добавлена поддержка видеокодека AV1 в контейнерах Matroska (MKV) и QuickTime/MP4. Реализованы дополнительные настройки AV1 и расширено число поддерживаемых кодировщиком форматов входных данных;
• Добавена поддръжка на скрытых субтитров, а также возможность определения и извлечения из видео других видов интегрированных данных ANC (дополнительная информация, такая как звук и метаданные, передаваемая через цифровые интерфейсы в неотображаемых частях строк развёртки);
• Добавлена поддержка некодированного (raw) звука без чередования звуковых каналов в памяти (Non-Interleaved, левый и правый звуковые каналы располагаются в отдельных блоках, вместо чередования каналов в виде «LEFT|RIGHT|LEFT|RIGHT|LEFT|RIGHT»);
• В базовый набор плагинов (gst-plugins-base) перемещены GstVideoAggregator (класс для смешивания raw-видео), compositor (усовершенствованная замена videomixer) и элементы OpenGL mixer (glvideomixer, glmixerbin, glvideomixerelement, glstereomix, glmosaic), которые ранее размещались в наборе «gst-plugins-bad»;
• Добавен е нов режим чередования полей, в котором каждый буфер обрабатывается как отдельное поле в чересстрочном видео с разделением верхнего и нижнего полей по уровням привязанных к буферу флагов;
• В распаковщик медиаконтейнеров Matroska добавлена поддержка формата WebM и шифрования содержимого;
• Добавлен новый элемент wpesrc, работающий как браузер на основе движка WebKit WPE (позволяет обрабатывать вывод браузера как источник данных);
• За Video4Linux е осигурена поддръжка за кодиране и декодиране на HEVC, кодиране на JPEG и подобрен импорт и експорт на dmabuf;
• В декодера видео, използващ хардуерно ускорение на GPU NVIDIA, е добавена поддръжка за декодиране на VP8/VP9, а в кодера - поддръжка за хардуерно ускорено кодиране H.265/HEVC;
• Направени са множество подобрения на плъгина msdk, който позволява използването на средства за хардуерно ускорение на кодиране и декодиране на чипове Intel (основан на Intel Media SDK). Включително е добавена поддръжка за импорт/експорт на dmabuf, декодиране на VP9, кодиране на 10-битови HEVC, постобработка на видео и динамично изменение на резолюцията;
• В системата за изобразяване на субтитри ASS/SSA е добавена поддръжка за обработка на множество временно припокриващи се субтитри с тяхното едновременно изобразяване на екрана;
• Осигурена е пълна поддръжка на системата за компилиране Meson, която сега е препоръчвана за компилиране на GStreamer на всички платформи. Очаква се премахване на поддръжката за Autotools в следващата версия;
• В основния пакет GStreamer са включени биндинги за разработка на езика Rust и модул с плъгини на Rust;
• Оптимизирана е производителността.

Източник: opennet.ru