Le framework multimédia GStreamer 1.22.0 est disponible

Après un an de développement, la version de GStreamer 1.22 a été publiée, un ensemble de composants multiplateformes pour créer un large éventail d’applications multimédias, allant des lecteurs multimédias et des convertisseurs de fichiers audio/vidéo aux applications VoIP et aux systèmes de streaming. Le code GStreamer est distribué sous la licence LGPLv2.1. Des mises à jour pour les plugins gst-plugins-base, gst-plugins-good, gst-plugins-bad, gst-plugins-ugly, ainsi que le wrapper gst-libav et le serveur de streaming gst-rtsp-server sont développées séparément. Au niveau de l'API et de l'ABI, cette nouvelle version est rétrocompatible avec la branche 1.0. Les builds binaires seront bientôt préparées pour Android, iOS, macOS et Windows (sous Linux, il est recommandé d'utiliser des paquets de la distribution).

Améliorations clés de GStreamer 1.22 :

• Amélioration de la prise en charge du format de codage vidéo AV1. Ajout de la possibilité d’utiliser l’accélération matérielle pour l’encodage et le décodage AV1 via les API VAAPI/VA, AMF, D3D11, NVCODEC, QSV et Intel MediaSDK. Nouveaux gestionnaires RTP pour AV1 ajoutés. Amélioration de l’analyse AV1 dans les conteneurs MP4, Matroska et WebM. Les builds incluent des éléments avec des encodeurs et décodeurs AV1 basés sur les bibliothèques dav1d et rav1e.
• Prise en charge de Qt6 mise en œuvre. Élément qml6glsink ajouté, utilisant Qt6 pour le rendu vidéo à l’intérieur de la scène QML.
• Ajout d’éléments gtk4paintablesink et gtkwaylandsink pour le rendu utilisant GTK4 et Wayland.
• De nouveaux clients pour le streaming adaptatif ont été ajoutés, prenant en charge les protocoles HLS, DASH et MSS (Microsoft Smooth Streaming).
• Possibilité de créer des builds réduits, optimisés pour réduire la taille.
• Prise en charge de WebRTC simulcast et du contrôle de congestion Google ajoutée.
• Fourniture d'un plugin simple et autonome pour l'envoi via WebRTC.
• Ajout d'un nouvel emballage de conteneur multimédia MP4 prenant en charge les données fragmentées et non fragmentées.
• Ajout de nouveaux plugins pour le stockage Amazon AWS et les services de transcription audio.
• Mises à jour des liaisons pour le langage Rust. Ajout de 19 nouveaux plugins, effets et éléments écrits en Rust (gst-plugins-rs). Il est noté que 33 % des changements dans le nouveau GStreamer ont été réalisés en Rust (les modifications concernent les liaisons et les plugins), et l'ensemble des plugins gst-plugins-rs est l'un des modules les plus activement développés de GStreamer. Les plugins écrits en Rust peuvent être utilisés dans des programmes dans n'importe quel langage, et leur utilisation est similaire à celle des plugins en C et C++.
• La livraison des plugins pour Rust est assurée dans le cadre des paquets binaires officiels pour les plateformes Windows et macOS (la construction et la livraison sont prises en charge pour Linux, Windows et macOS).
• Un serveur multimédia écrit en Rust basé sur WebRTC a été réalisé, prenant en charge WHIP (WebRTC HTTP ingest) et WHEP (WebRTC HTTP egress).
• Un élément videocolorscale a été ajouté, combinant des fonctionnalités pour la conversion et le redimensionnement de la vidéo.
• Le support des vidéos à grande profondeur de couleur a été amélioré.
• L'API Navigation a été améliorée avec la prise en charge des événements des écrans tactiles.
• Des éléments de correction des horodatages H.264/H.265 ont été ajoutés pour la reconstruction des PTS/DTS avant l'emballage des conteneurs multimédias.
• Sur la plateforme Linux, l'application du DMA a été améliorée pour travailler avec des tampons lors du codage, du décodage, du filtrage et du rendu de la vidéo en utilisant l'accélération matérielle.
• L'intégration avec CUDA a été améliorée : la bibliothèque gst-cuda et l'élément cudaconvertscale ont été ajoutés, assurant l'intégration avec les éléments D3D11 et NVIDIA dGPU NVMM.
• L'intégration avec Direct3D11 a été améliorée : une nouvelle bibliothèque gst-d3d11 a été ajoutée, élargissant les capacités des plugins d3d11screencapture, d3d11videosink, d3d11convert et d3d11compositor.
• De nouveaux encodeurs vidéo accélérés par matériel pour les formats H.264/AVC, H.265/HEVC et AV1, construits avec le SDK AMF (Advanced Media Framework), ont été réalisés pour les GPU AMD.
• Le plugin applemedia a été amélioré avec la prise en charge de l'encodage et du décodage vidéo H.265/HEVC.
• Le plugin androidmedia a été amélioré avec la prise en charge de l'encodage vidéo H.265/HEVC.
• Les plugins audiomixer, compositor, glvideomixer et d3d11compositor ont ajouté la propriété force-live pour forcer l'activation du mode live.

Source : opennet.ru