FFmpeg 8.1 est disponible avec le support de JPEG XS, de nouvelles fonctionnalités pour le son 3D et des accélérations via Vulkan.

Après sept mois de développement, le paquet multimédia FFmpeg 8.1 a été publié, incluant un ensemble d'applications et une collection de bibliothèques pour des opérations sur différents formats multimédias (enregistrement, conversion et décodage de formats audio et vidéo). Le paquet est écrit en langage C et distribué sous les licences LGPL et GPL.

Parmi les changements dans FFmpeg 8.1 :

• Ajout d'un analyseur, d'un encodeur et d'un décodeur, ainsi que d'un muxer/demuxer pour le format d'image JPEG XS, qui est présenté comme un système d'encodage d'images léger, offrant des délais minimaux lors de l'encodage et du décodage, et axé sur l'optimisation de la transmission de séquences d'images de très haute qualité (jusqu'à 8K). JPEG XS permet de réduire considérablement la bande passante requise sans pertes de qualité perceptibles pour l'œil humain. L'implémentation est basée sur la bibliothèque libsvtjpegxs.
• Ajout d'un décodeur expérimental pour le format de codage audio xHE-AAC (High-Efficiency Advanced Audio Coding) avec le schéma sonore Mps212 (MPEG Surround avec disposition des canaux 212). xHE-AAC est utilisé dans le streaming Netflix et est impliqué dans les technologies de radiodiffusion numérique Digital Radio Mondiale. Ce codec se distingue par sa prise en charge d'une large gamme de débits binaires (de 12 à 300 kbit/s), un haut degré de compression, des moyens de lecture avec un volume constant, garantissant une grande clarté à tous les niveaux de volume, des profils supplémentaires de gestion de la plage dynamique lors de l'écoute dans des environnements bruyants et l'ajout de métadonnées permettant de restaurer les pertes du côté du récepteur.
• Sur la base de la bibliothèque libmpeghdec, un décodeur a été mis en œuvre pour l'audio interactif et spatial au format NGA (Next Generation Audio), défini dans la norme de codage audio et vidéo MPEG-H.
• Ajout de la prise en charge de l'emballage et du déballage de l'audio spatial au format IAMF (Immersive Audio Model and Formats) avec un son surround en mode Ambisonics, tenant compte de la propagation du son non seulement dans le plan horizontal, mais aussi dans la vertical (pour déterminer si la source sonore est au-dessus ou en dessous).
• Ajout de la prise en charge de l'analyse et de la redirection des métadonnées au format LCEVC (Low Complexity Enhancement Video Coding), qui met en œuvre une couche supplémentaire de métadonnées au-dessus des codecs standard pour améliorer la qualité vidéo. Ajout de la prise en charge de l'exportation des couches d'amélioration de la qualité LCEVC dans des conteneurs multimédias MPEG-TS (MPEG Transport Stream).
• Un encodeur et un décodeur pour le codec Apple ProRes, ainsi qu'un décodeur pour le format de transmission d'images séparées DPX (Digital Picture Exchange), ont été réalisés sur la base de l'API graphique Vulkan. Les implémentations basées sur Vulkan se distinguent par une amélioration significative des performances grâce à l'accélération matérielle, à la parallélisation des opérations et à l'utilisation de shaders de calcul. L'optimisation des implémentations de codecs basées sur AI Vulkan a été effectuée. Pour accélérer l'initialisation des codecs, la possibilité d'utiliser des shaders GLSL déjà compilés a été mise en œuvre, sans avoir besoin de les compiler au moment de l'exécution.
• Une backend utilisant l'API graphique Vulkan pour accélérer l'exécution des opérations a été mis en œuvre dans la bibliothèque swscale (Software Scaler), utilisée dans FFmpeg pour le redimensionnement et la conversion des couleurs.
• Des variantes d'encodeurs pour les formats H.264 et AV1 utilisant l'API D3D12 (Direct3D 12) pour l'accélération matérielle de l'encodage ont été ajoutées.
• Une variante de l'encodeur pour le format H.264/HEVC utilisant les ressources d'encodage vidéo disponibles dans les puces Rockchip a été ajoutée.
• Des démultiplexeurs pour des conteneurs multimédias aux formats HXVS et HXVT, utilisés dans les caméras IP, ont été ajoutés.
• Un parseur pour les métadonnées au format EXIF et une API connexe pour l'analyse des métadonnées ont été mis en œuvre.
• L'outil ffprobe a ajouté l'option « -codec » (« -c ») pour sélectionner une implémentation de décodeur spécifique.
• L'outil ffmpeg a introduit la prise en charge du mode de stockage d'images en mosaïque (tiled) au format HEIF (lorsqu'une très grande image est enregistrée sous la forme d'un ensemble d'images plus petites).
• L'ancien gestionnaire du protocole HLS a été supprimé.
• Nouveaux filtres :
  • drawvg pour afficher des graphiques vectoriels au-dessus de trames vidéo, en utilisant la bibliothèque libcairo.
  • vpp_amf pour le redimensionnement vidéo et la conversion d'espace colorimétrique, utilisant AMD Advanced Media Framework pour l'accélération matérielle.
  • vf_scale_d3d12, vf_deinterlace_d3d12, vf_mestimate_d3d12 pour le redimensionnement, le désentrelacement et l'analyse du mouvement sur des vidéos, utilisant l'API graphique Direct3D 12 pour l'accélération matérielle.
  • gfxcapture pour capturer le contenu des fenêtres et de l'écran sur la plateforme Windows à l'aide de l'API Windows.Graphics.Capture.
  • Ajouté un filtre bitstream pour les métadonnées LCEVC.

Source : opennet.ru