Po třech měsících vývoje byl uveden multimediální balíček FFmpeg 9.1, který zahrnuje sadu aplikací a kolekci knihoven pro práci s různými multimediálními formáty (nahrávání, převod a dekódování zvukových a video formátů). Balíček je napsán v jazyce C a je distribuován pod licencemi LGPL a GPL.
Mezi změnami ve FFmpeg 9.1:
- Byl přidán síťový backend na bázi knihovny libcurl.
- Bylo navrženo experimentální API pro vytváření bitstream filtrů pro přímou modifikaci zabaleného bitového toku bez jeho dekódování. Nové API umožňuje spojování filtrů do nelineárních grafů, které umožňují složitou směrování, slučování a dělení toků.
- Do příkazové utility ffmpeg byla přidána možnost práce s dvoustopými reprezentacemi formátu kódování videa LCEVC (Low Complexity Enhancement Video Coding), ve kterých je základní video a metadata pro zlepšení kvality uchovávána ve formě samostatných stop.
- Byla přidána podpora pro přenos dekódovaných snímků videa z hardwarového dekodéru NVIDIA NVDEC do paměti GPU pomocí texturových polí CUARRAY (CUDA array) místo bufferu CUdeviceptr pro zlepšení kompatibility s grafickým API Vulkan. Podpora CUARRAY byla přidána pro kodeky H.264, HEVC, AV1, MPEG-1, MPEG-2, MPEG-4, VC-1, WMV3, VP8 a VP9.
- Byly přidány obalovače a rozbalovače multimediálních kontejnerů astc a KTX 1.0, které se používají pro ukládání textur. Pomocí knihovny libastcenc byla implementována podpora komprese a rozbalování textur ve formátu ASTC (Adaptive Scalable Texture Compression).
- Byla implementována podpora výběru zařízení pro zachytávání videa a zvuku AVFoundation podle unikátního identifikátoru a sériového čísla USB zařízení. Pro určení identifikátorů byly přidány možnosti "-video_device_id" a "-audio_device_id".
- Byla přidána varianta enkodéru (apv_vulkan) pro formát APV (Advanced Professional Video), která využívá pro zrychlení možnosti grafického API Vulkan a výpočetní shadery.
- Byl přidán enkodér pro formát DSD (dsd_msbf).
- Byl výrazně vylepšen enkodér pro zvukový formát AAC (Advanced Audio Coding). Byla přidána podpora dekódování formátu xHE-AAC (Extended High-Efficiency AAC, standard ISO/IEC 23003-3, používaný ve streamování Netflix) pomocí knihovny libfdk-xhe-aac.
- Byla přidána podpora dekódování segmentovaných (partitioning) video toků H.264, ve kterých je každý snímek rozdělen na několik částí.
- Byly přidány dekodéry pro formáty Infinity IMM6, Rhetorex ADPCM, ADPCM IMA Citrix a Panasonic RW2.
- Byl implementován dekodér a dekompresor multimediálních kontejnerů pro formát DVD-Audio LPCM (Linear Pulse Code Modulated).
- Byly přidány obalovače multimediálních kontejnerů ve formátech iTerm2 a JPEG Multi-Picture.
- Byly přidány dekompresory multimediálních kontejnerů ve formátech MVR a JPEG Multi-Picture.
- Pro platformu Windows byla implementována podpora protokolu „handle:“, který umožňuje používat popisovače HANDLE z WinAPI a podporuje náhodný přístup, nikoli pouze lineární čtení jako při použití protokolu „pipe:“.
- Do backendu ONNX Runtime byla přidána možnost spouštění neuronových filtrů ve Windows pomocí knihovny DirectML implementované nad API Direct3D 12 v režimu zero-copy (bez kopírování snímků mezi video pamětí a RAM).
- Nové filtry:
- vf_fruc_vulkan — zvyšuje snímkovou frekvenci videa pomocí doplnění mezisnímků s využitím hardwarového akcelerátoru NVIDIA Optical Flow Accelerator, přičemž využívá Vulkan rozšíření VK_NV_optical_flow.
- gainmap — vypočítává mapu zvýšení jasu (HDR Gain Map) na základě verzí SDR a HDR stejného obrazu.
- latticepal — převádí plně barevný RGB/BGR obraz do formátu s 8bitovou paletou PAL8.
- vf_vqe_amf — zvyšuje kvalitu videa na systémech s GPU AMD pomocí mechanismu potlačení šumu VQE (Video Quality Enhancer) dostupného v Advanced Media Framework (AMF).
- Byly přidány bitstream filtry: trim (odstranění paketů mimo určený rozsah), jpegapp (vložení segmentů JPEG APP0..APP15) a side_data (odstranění služebních metadat).
- Byl přidán filtr pro sloučení vrstev (vrstva s základním videem a vrstva s metadaty pro zlepšení kvality) pro video ve formátu LCEVC.
Zdroj: opennet.ru
