Достъпен е FFmpeg 8.1 с поддръжка на JPEG XS, нови възможности за 3D звук и ускорение чрез Vulkan

След седем месеца разработка, беше публикуван мултимедиен пакет FFmpeg 8.1, който включва набор от приложения и колекция от библиотеки за работа с различни мултимедийни формати (запис, преобразуване и декодиране на аудио и видео формати). Пакетът е написан на C и се разпространява под лицензите LGPL и GPL.

Сред измененията в FFmpeg 8.1:

• Добавени са парсер, кодер и декодер, както и мултимедийни контейнери (muxer/demuxer) за формата на изображения JPEG XS, който се позиционира като лека система за кодиране на изображения, осигуряваща минимални закъснения при кодиране и декодиране, и е насочена към оптимизация на предаването на последователности от изображения с много високо качество (до 8K). JPEG XS позволява значително намаляване на необходимата пропускателна способност на комуникационния канал без забележими за човешкото око загуби на качество. Реализацията е базирана на библиотеката libsvtjpegxs.
• Добавен експериментален декодер за формата за кодиране на звук xHE-AAC (High-Efficiency Advanced Audio Coding) със схема за обемен звук Mps212 (MPEG Surround с разпределение на каналите 212). xHE-AAC се използва в стрийминг услуги на Netflix и е част от технологиите за цифрово радиоразпръскване Digital Radio Mondiale. Кодекът се отличава с поддръжка на широк диапазон от битрейт (от 12 до 300 kbit/s), висока степен на компресия, средства за възпроизвеждане с постоянен звук, осигурявайки висока яснота при всякакви нива на звука, допълнителни профили за управление на динамичния обхват при слушане на шумни места и добавяне на метаданни, позволяващи възстановяване на загуби на приемната страна.
• На базата на библиотеката libmpeghdec е реализиран декодер за интерактивен и обемен звук във формата NGA (Next Generation Audio), определен в стандарта за кодиране на звук и видео MPEG-H.
• Добавена поддръжка за опаковане и разпаковане на пространствения звук във формат IAMF (Immersive Audio Model and Formats) с обемен звук в режим Ambisonics, който отчита разпространението на звука не само в хоризонталната равнина, но и във вертикалната (за определяне на източника на звука отгоре или отдолу).
• Добавена поддръжка за анализ и пренасочване на метаданни във формат LCEVC (Low Complexity Enhancement Video Coding), който реализира допълнителен слой с метаданни над стандартните кодеци за подобряване на качеството на видеото. Добавена е поддръжка за експортиране на слоеве за подобряване на качеството LCEVC в мултимедийни контейнери MPEG-TS (MPEG Transport Stream).
• На основата на графичния API Vulkan са реализирани кодек и декодер за кодека Apple ProRes, както и декодер за използвания в киноиндустрията формат разделно предаване на кадри DPX (Digital Picture Exchange). Реализациите на базата на API Vulkan се отличават с значително повишение на производителността чрез хардуерно ускорение, паралелизиране на операций и използване на изчислителни шейдъри. Оптимизирани са реализациите на кодеците на базата на AI Vulkan. За ускоряване на инициализацията на кодеците е реализирана възможността за използване на вече компилирани шейдъри GLSL, без необходимост от тяхната компилация по време на работа.
• В библиотеката swscale (Software Scaler), която се използва в FFmpeg за софтуерно мащабиране и преобразуване на цветове, е реализиран бекенд, който използва графичния API Vulkan за ускоряване на изпълнението на операциите.
• Добавени са варианти на кодировчици за формати H.264 и AV1, които използват API D3D12 (Direct3D 12) за хардуерно ускорение на кодиранието.
• Добавен е вариант на кодировчик за формата H.264/HEVC, който използва наличните в чиповете Rockchip средства за хардуерно кодиране на видео.
• Добавени демуксери (demuxer) за мултимедийни контейнери в форматите HXVS и HXVT, използвани в IP камери.
• Реализиран е парсер за метаданни в формат EXIF и съпътстващ API за анализ на метаданни.
• В утилитата ffprobe е добавена опция «-codec» («-c») за избор на конкретна реализация на декодера.
• В утилитата ffmpeg е добавена поддръжка на мозаечен режим (tiled) за съхранение на изображения в формат HEIF (когато много голямо изображение се съхранява под формата на набор от по-малки изображения).
• Старият обработчик за протокол HLS е премахнат.
• Нови филтри:
  • drawvg за извеждане на векторна графика върху видео кадри, използвайки библиотеката libcairo.
  • vpp_amf за смяна на размера на видео и преобразуване на цветово пространство, използвайки AMD Advanced Media Framework за хардуерно ускорение.
  • vf_scale_d3d12, vf_deinterlace_d3d12, vf_mestimate_d3d12 за мащабиране, деинтерлейсинг и анализ на движение на видео, използвайки графичния API Direct3D 12 за хардуерно ускорение.
  • gfxcapture за улавяне на съдържанието на прозорци и екрана на платформата Windows чрез API Windows.Graphics.Capture.
  • Добавен е bitstream филтър за метаданни LCEVC.

Източник: opennet.ru