FFmpeg 8.1 är tillgänglig med stöd för JPEG XS, nya funktioner för 3D-ljud och acceleration via Vulkan.

Efter sju månaders utveckling har multimediapaketet FFmpeg 8.1 offentliggjorts, vilket inkluderar en uppsättning applikationer och en samling bibliotek för operationer med olika multimediaformat (inspelning, konvertering och avkodning av ljud- och videoformat). Paketet är skrivet i C och distribueras under licenserna LGPL och GPL.

Ändringar i FFmpeg 8.1:

• En parser, en kodare och en avkodare samt en multiplexer och demultiplexer för multimedia-containerformatet JPEG XS har lagts till. JPEG XS positioneras som ett lättviktskodningssystem för bilder, vilket säkerställer minimal försening vid kodning och avkodning, och är inriktat på att optimera överföringen av mycket högkvalitativa bildsekvenser (upp till 8K). JPEG XS möjliggör betydligt minskad nödvändig kapacitet i kommunikationskanalen utan märkbara kvalitetsförluster för det mänskliga ögat. Implementeringen bygger på biblioteket libsvtjpegxs.
• En experimentell avkodare för ljudkodningsformatet xHE-AAC (High-Efficiency Advanced Audio Coding) med Mps212-ljudformatet (MPEG Surround med 212-kanalsuppdelning) har lagts till. xHE-AAC används i Netflix streaming och involveras i Digital Radio Mondiale digitala radio- teknologier. Codec:en är anmärkningsvärd för sitt breda bitratespektrum (från 12 till 300 kbit/s), hög komprimeringsgrad, möjligheter för konstant volymåtergivning, säkerställande av hög klarhet vid alla volymnivåer, ytterligare profiler för hantering av dynamiskt omfång för lyssning i bullriga miljöer samt tillägg av metadata som möjliggör att förluster återställs på mottagarsidan.
• Baserat på biblioteket libmpeghdec har en avkodare för interaktiv och tredimensionell ljudkodning i NGA-formatet (Next Generation Audio) implementerats, vilket definieras i MPEG-H ljud- och videostandard.
• Stöd för paketering och avpaketering av rumsligt ljud i IAMF-formatet (Immersive Audio Model and Formats) med surroundljud i Ambisonics-läge har lagts till, vilket tar hänsyn till ljudets spridning inte bara i det horisontella planet utan också i det vertikala (för att avgöra om ljudkällan kommer ovanifrån eller nedifrån).
• Stöd för analys och omdirigering av metadata i LCEVC-formatet (Low Complexity Enhancement Video Coding) har lagts till, vilket implementerar ett extra lager med metadata ovanpå standardcodecs för att förbättra videokvaliteten. Stöd för export av LCEVC-kvalitetsförbättringslager till MPEG-TS multimedia-containrar har lagts till.
• En kodare och avkodare för Apple ProRes-codec och en avkodare för det i filmproduktion använda formatet DPX (Digital Picture Exchange) har implementerats baserat på Vulkan-grafik-API. Implementeringarna baserade på Vulkan API kännetecknas av en betydande prestandaökning tack vare hårdvaruacceleration, parallellisering av operationer och användning av beräkningsshaders. Optimisering av AI Vulkan-baserade codec-implementeringar har genomförts. För att påskynda initieringen av codecs har möjligheten att använda redan kompilera shaders i GLSL, utan behov av att kompilera dem under körning, lagts till.
• En backend som använder Vulkan-grafik-API för att påskynda utförandet av operationer har implementerats i swscale-biblioteket (Software Scaler), som används i FFmpeg för programvaruskalering och färgkonvertering.
• Nya kodningsalternativ för H.264 och AV1-format som använder D3D12 API (Direct3D 12) för hårdvaruacceleration av kodning har lagts till.
• Ett H.264/HEVC kodningsalternativ som använder de hårdvarufunktioner som finns i Rockchip-chips för att koda video har lagts till.
• Demuxers för multimedia-containrar i HXVS- och HXVT-format har lagts till, som används i IP-kameror.
• En parser för metadata i EXIF-format och en tillhörande API för analys av metadata har implementerats.
• I ffprobe-verktyget har alternativet "-codec" ("-c") lagts till för att välja en specifik implementation av avkodaren.
• Stöd för mosaikläge (tiled) för lagring av bilder i HEIF-format (när en mycket stor bild sparas som en uppsättning av mindre bilder) har lagts till i ffmpeg-verktyget.
• Den gamla hanteraren för HLS-protokollet har tagits bort.
• Nya filter:
  • drawvg för att rendera vektorgrafik ovanpå videoramar, med hjälp av biblioteket libcairo.
  • vpp_amf för att ändra storlek på video och konvertera färgrymd, med hjälp av AMD Advanced Media Framework för hårdvaruacceleration.
  • vf_scale_d3d12, vf_deinterlace_d3d12, vf_mestimate_d3d12 för skalning, deinterlacing och rörelseanalys på video, med hjälp av grafik-API:t Direct3D 12 för hårdvaruacceleration.
  • gfxcapture för att fånga innehållet av fönster och skärmar på Windows med Windows.Graphics.Capture API.
  • En bitstream-filter för LCEVC metadata har lagts till.

Källa: opennet.ru