Publication du paquet multimédia FFmpeg 4.3 avec support de l'API graphique Vulkan

Après dix mois de développement disponible pack multimédia FFmpeg 4.3, incluant un ensemble d'applications et une collection de bibliothèques pour le traitement de divers formats multimédia (enregistrement, conversion et décodage de formats audio et vidéo). Le package est distribué sous les licences LGPL et GPL, le développement de FFmpeg se fait en parallèle avec le projet MPlayer.

De modifications, ajoutées dans FFmpeg 4.3, on peut distinguer :

• Ajout du support de l'API graphique Vulkan;
• Un encodeur basé sur Vulkan pour Linux a été implémenté, utilisant les moteurs AMD AMF/VCE pour l'accélération, ainsi que des variantes de filtres standard avgblur_vulkan, overlay_vulkan, scale_vulkan et chromaber_vulkan;
• Il est possible d'utiliser l'API VDPAU (Video Decode and Presentation) pour l'accélération matérielle du traitement de vidéos au format VP9 ;
• Ajout de la capacité d'encodage vidéo AV1 utilisant la bibliothèque librav1e, écrite en Rust et développée par les communautés Xiph et Mozilla ;
• Pour les conteneurs multimédia mp4, prise en charge du codec audio multicanal sans perte TrueHD et d'un codec pour audio tridimensionnel MPEG-H 3D;
• Ajout de la prise en charge des protocoles ZeroMQ et RabbitMQ (AMQP 0-9-1) ;
• Sous Linux, migration d'un serveur de trames pour le montage non linéaire des flux vidéo (codec vidéo virtuel) AvxSynth, qui est déjà abandonné depuis 5 ans, vers un fork actuel AviSynth+;
• Un parseur pour les images au format WebP a été inclus ;
• Des décodeurs MJPEG et VP9, utilisant le mécanisme d'accélération matérielle Intel QSV (Quick Sync Video), ainsi qu'un encodeur VP9 basé sur Intel QSV ;
• Prise en charge élargie des styles de sous-titres au format 3GPP Timed Text Subtitles ;
• Ajout d'un encodeur en enrobage au-dessus de l'API Microsoft Media Foundation;
• Ajout d'un encodeur ADPCM pour les données audio utilisées dans les jeux de Simon & Schuster Interactive ;
• Ajout de nouveaux décodeurs : PFM, IMM5, Sipro ACELP.KELVIN, mvdv, mvha, mv30, NotchLC, Argonaut Games ADPCM, Rayman 2 ADPCM, Simon & Schuster Interactive ADPCM, High Voltage Software ADPCM, ADPCM IMA MTF, CDToons, Siren, DERF DPCM et CRI HCA ;
• Ajout d'un multiplexeur (muxer) streamhash et mise en œuvre de la capacité de multiplexage pcm et pgs dans des conteneurs m2ts ;
• Ajout de démultiplexeurs (demuxer) multimédias : AV1 avec des extensions de l'application B,
  Argonaut Games ASF, Real War KVAG, Rayman 2 APM, LEGO Racers ALP (.tun et .pcm), FWSE, DERF, CRI HCA, Pro Pinball Series Soundbank ;
• Nouvelles filtres:
  • v360 — transforme des vidéos à 360 degrés en différents formats ;
  • scroll — fait défiler la vidéo horizontalement ou verticalement à la vitesse spécifiée ;
  • photosensitivity — élimine les flashes lumineux et les changements brusques de luminosité dans les vidéos qui pourraient potentiellement provoquer une crise d'épilepsie ;
  • arnndn — filtre de suppression du bruit dans la parole utilisant un réseau neuronal récurrent;
  • bilatéral — réalise un lissage spatial tout en préservant les contours;
  • maskedmin et maskedmax — fusionne deux flux vidéo en se basant sur les différences avec un troisième flux;
  • médian — filtre de suppression du bruit qui choisit le pixel médian d'un rectangle s'inscrivant dans un rayon spécifié;
  • fusion de trames AV1 — fusion de trames dans le flux AV1;
  • axcorrelate — calcule la corrélation mutuelle normalisée entre deux flux audio;
  • thistogram — calcule et affiche l'histogramme de la distribution des couleurs dans la vidéo;
  • freezeframes — remplace un ensemble de trames dans la vidéo par des trames spécifiques d'un autre flux;
  • xfade et xfade_opencl —
    fondu croisé avec transition d'un flux vidéo à un autre;
  • afirsrc — génère des coefficients FIR en utilisant la méthode de l'échantillonnage fréquentiel;
  • pad_opencl — ajoute des marges à l'image;
  • cas — applique à la vidéo le filtre d'accentuation des contours CAS (Contrast Adaptive Sharpen);
  • anlms — applique l'algorithme normalisé LMS (moindres carrés) au premier flux audio, calculant les coefficients sur la base des différences avec le deuxième flux;
  • overlay_cuda — superpose un morceau d'une vidéo sur une autre;
  • tmedian — filtre de suppression du bruit utilisant des pixels médians de plusieurs trames successives;
  • maskedthreshold — sélectionne lors du filtrage les pixels sur la base de la comparaison de la différence entre deux flux vidéo et une valeur seuil;
  • asubboost — renforce les fréquences des basses;
  • pcm_rechunk — réemballe le son PCM en tenant compte de la fréquence d'échantillonnage ou du débit spécifié;
  • scdet — détecte les changements de scène dans la vidéo (par exemple, pour détecter le mouvement dans le cadre);
  • gradients — génère un flux vidéo avec des dégradés;
  • sierpinski — génère un flux vidéo avec des fractales de Sierpinski;
  • untile — décompose une vidéo constituée de morceaux en images séparées;
  • dblur — réalise un flou directionnel.

Source : opennet.ru