Достъпен е мултимедиен фреймворк GStreamer 1.26.0

След една година разработка, GStreamer 1.26, кросплатформен набор от компоненти за създаване на разнообразни мултимедийни приложения, от медийни плейъри и конвертори на аудио/видео файлове до VoIP приложения и системи за стрийминг, е представен. Кодът на GStreamer се разпространява под лиценз LGPLv2.1. Отделно се развиват актуализации на плъгините gst-plugins-base, gst-plugins-good, gst-plugins-bad, gst-plugins-ugly, както и обвивката gst-libav и сървъра за стрийминг gst-rtsp-server. На ниво API и ABI, новото издание е обратно съвместимо с клон 1.0. Бинарните сборки скоро ще бъдат подготвени за Android, iOS, macOS и Windows (в Linux се препоръчва да се използват пакети от дистрибуцията).

Ключови подобрения в GStreamer 1.26:

• Добавени са кодек и декодер за видеоформата VVC (Versatile Video Coding), известна също така като стандарт за компресия на видео H.266, разработен съвместно от работни групи MPEG (ISO/IEC JTC 1) и VCEG (ITU-T), с участието на компании като Apple, Ericsson, Intel, Huawei, Microsoft, Qualcomm и Sony. H.266 заменя H.265 (HEVC) и осигурява висока ефективност при предаване и съхранение на всички резолюции на екрана (от SD и HD до 4K и 8K), поддържа видео с разширен динамичен обхват (HDR, High Dynamic Range) и панорамно видео в режим 360 градуса.
• Добавени са кодек и декодер за стандарта за кодиране на видео LCEVC (Low Complexity Enhancement Video Coding), реализиращ допълнителен слой с метаданни за подобряване качеството на вече съществуващите кодеци H.26x и MP4/ISOBMFF.
• Добавени са кодек и декодер за формата на изображения JPEG XS, който се позиционира като лека система за кодиране на изображения, осигуряваща минимални закъснения при кодиране и декодиране, и фокусирана върху оптимизацията на предаването на последователности от изображения с много високо качество (до 8K). JPEG XS позволява значително намаляване на необходимата пропускателна способност на канала без видими за човешкото око загуби на качество.
• Добавена е възможност за замяна и извличане на скрити субтитри за формати H.264 и H.265.
• Подобренa е поддръжката на адаптивно стрийминг на базата на протоколите HLS (HTTP Live Streaming) и DASH (Dynamic Adaptive Streaming over HTTP). Добавени са нови приемници на мултимедийни данни (sink) hlscmafsink и hlssink3 за извеждане на фрагменти CMAF (fMP4) и MPEG-TS, както и hlsmultivariantsink за вариативно извеждане.
• В опаковчика и разопаковчика на мултимедийни контейнери MPEG-TS е добавена поддръжка на кодеците H.266, JPEG XS, AV1 и VP9, както и на метаданни SMPTE ST-2038 и ID3.
• В форматите Matroska и ISO MP4 са добавени опаковчици и разопаковчици за кодека H.266/VVC. В MP4 са добавени разопаковчици за видео формати Hap и Lagarith.
• Добавена е поддръжка на SMPTE 2038, система за прикрепяне на допълнителни данни и метаданни към мултимедийните контейнери.
• Подобрила се е интеграцията с графичния API Vulkan. Разширени са възможностите за управление на паметта, избор на цветово пространство, управление на устройства и работа на цял екран. Добавена е поддръжка на разширения на Vulkan за ускоряване на декодирането на видео H264 и H265. Повишена е производителността на кодера, използващ Vulkan.
• Подобрила се е интеграцията с OpenGL. Добавена е поддръжка на допълнителни формати за преобразуване на цветове и пикселови формати. Добавена е поддръжка на импортиране на потоци с използване на DMABufs.
• Подобрила се е интеграцията с библиотеката Qt6 и QML.
• Разширени са компонентите за интеграция с CUDA и NVIDIA Video Codec SDK. Добавен е кодер за формата AV1 на базата на API NVCODEC.
• Реализирана е библиотека gst-d3d12 с кодировчици и декодировчици на базата на API Direct3D 12.
• В стека RTSP е добавена поддръжка за управление на ключове MIKEY от страната на клиента.
• В audioconvert е добавена поддръжка за преорганизиране на звуковите канали.
• В плъгин на базата на библиотеката GTK3 е добавена поддръжка на OpenGL/WGL на платформата Windows.
• В елемента imagefreeze е добавена поддръжка на формати JPEG и PNG.
• В елемента pitch е реализирана възможността за възпроизвеждане в обратна посока.
• В елемента rtmp2 са подобрени механизмите за удостоверяване на RTP-сервери. Добавена е поддръжка за удостоверяване в CDN Limelight.
• В плъгина за интеграция с VA-API са добавени елементи за ускоряване на декодирането на H.266 (VVC), както и за кодиране на VP8 и JPEG.
• Добавени са елементи за работа с потоци на базата на протокола QUIC (raw QUIC, RTP-over-QUIC и WebTransport).
• В набора gst-plugins-rs са добавени 23 нови елемента или плъгина, написани на езика Rust. Плъгините, написани на Rust, могат да се използват в програми на всякакви езици и работата с тях е аналогична на използването на плъгини на C и C++.

Източник: opennet.ru