Efter tre måneders udvikling er multimediapakken FFmpeg 9.1 blevet offentliggjort, som inkluderer et sæt applikationer og et bibliotek til operationer med forskellige multimediaformater (optagelse, konvertering og dekodning af lyd- og videoformater). Pakken er skrevet i C og distribueres under LGPL- og GPL-licenser.
Blandt ændringerne i FFmpeg 9.1:
- En netværksbackend baseret på libcurl-biblioteket er tilføjet.
- Et eksperimentelt API til oprettelse af bitstream-filtre til direkte modifikation af den pakkede bitstream uden dekodning er foreslået. Det nye API gør det muligt at kombinere filtre i ikke-lineære grafer, som muliggør kompleks routing, sammensmeltning og opdeling af streams.
- Kommandoen ffmpeg har fået mulighed for at arbejde med dobbelt-lags repræsentationer af video-kodningsformatet LCEVC (Low Complexity Enhancement Video Coding), hvor det grundlæggende video og metadata til kvalitetsforbedring gemmes som separate tracks.
- Support for overførsel af dekodede videobilledrammer fra NVIDIA NVDEC-hardwaredekoderen til GPU-hukommelse ved hjælp af teksturarrays CUARRAY (CUDA array) er tilføjet for at forbedre kompatibiliteten med grafiske API'er som Vulkan. CUARRAY-support er tilføjet for codecs H.264, HEVC, AV1, MPEG-1, MPEG-2, MPEG-4, VC-1, WMV3, VP8 og VP9.
- Pakkerne og pakkerne til mediecontainere astc og KTX 1.0, som anvendes til opbevaring af teksturer, er blevet tilføjet. Gennem libastcenc-biblioteket er support til komprimering og dekomprimering af teksturer i ASTC-format (Adaptive Scalable Texture Compression) realiseret.
- Support for valg af video- og lydoptageenheder via AVFoundation baseret på unikke ID'er eller USB-enhedens serienummer er implementeret. Optionen '-video_device_id' og '-audio_device_id' er tilføjet til at angive ID'er.
- En encoder (apv_vulkan) til APV-formatet (Advanced Professional Video), der bruger grafiske API'er Vulkan og beregningsshaders til acceleration, er blevet tilføjet.
- En encoder til DSD-formatet (dsd_msbf) er blevet tilføjet.
- Encoder til AAC-lydformatet (Advanced Audio Coding) er væsentligt forbedret. Support til dekodning af xHE-AAC-formatet (Extended High-Efficiency AAC, standard ISO/IEC 23003-3, anvendt i Netflix streaming) er tilføjet via libfdk-xhe-aac-biblioteket.
- Support til dekodning af partitionerede H.264 videostrømme, hvor hvert billede opdeles i flere dele, er blevet tilføjet.
- Dekodere til formaterne Infinity IMM6, Rhetorex ADPCM, ADPCM IMA Citrix og Panasonic RW2 er blevet tilføjet.
- Der er implementeret en dekoder og en pakker til mediecontainere for DVD-Audio LPCM (Linear Pulse Code Modulated).
- Pakker til mediecontainere i formaterne iTerm2 og JPEG Multi-Picture er blevet tilføjet.
- Udpakkere til mediecontainere i formaterne MVR og JPEG Multi-Picture er blevet tilføjet.
- Der er implementeret support for protokollen «handle:» på Windows-platformen, som gør det muligt at bruge HANDLE-descriptors fra WinAPI og understøtter vilkårlig adgang, ikke kun lineær læsning som med protokollen «pipe:».
- ONNX Runtime-backenden har fået mulighed for at køre neurale netværksfiltre i Windows ved hjælp af et bibliotek til DirectML over API Direct3D 12 i zero-copy-tilstand (uden at kopiere videoramme mellem GPU- og RAM-hukommelse).
- Nye filtre:
- vf_fruc_vulkan — øger videoens billedhastighed ved at tilføje mellemrammer ved hjælp af NVIDIA Optical Flow Accelerator hardwareacceleratoren, ved at bruge Vulkan-udvidelsen VK_NV_optical_flow.
- gainmap — beregner en lysstyrkekort (HDR Gain Map) baseret på SDR- og HDR-versioner af det samme billede.
- latticepal — konverterer et fuldfarvet RGB/BGR-billede til et format med 8-bit palette PAL8.
- vf_vqe_amf — forbedrer videoens kvalitet på systemer med AMD GPU ved at bruge VQE (Video Quality Enhancer) støjreduktionsmekanismen, som er tilgængelig i Advanced Media Framework (AMF).
- Bitstream-filtre er blevet tilføjet: trim (fjernelse af pakker uden for et givent område), jpegapp (indsættelse af segmenter JPEG APP0..APP15) og side_data (fjernelse af servicemetadata).
- Et lag-sammenfletningsfilter (et lag med grundlæggende video og et lag med metadata til kvalitetsforbedring) til video i LCEVC-format er blevet tilføjet.
Kilde: opennet.ru
