Después de tres meses de desarrollo, se lanzó el paquete multimedia FFmpeg 9.1, que incluye un conjunto de aplicaciones y una colección de bibliotecas para operaciones sobre diversos formatos multimedia (grabación, conversión y decodificación de formatos de audio y video). El paquete está escrito en el lenguaje C y se distribuye bajo las licencias LGPL y GPL.
Entre los cambios en FFmpeg 9.1:
- Se agregó un backend de red basado en la biblioteca libcurl.
- Se propuso una API experimental para crear filtros de bitstream para modificar directamente el flujo de bits empaquetado sin necesidad de decodificación. La nueva API permite combinar filtros en gráficos no lineales que permiten complejas rutas, fusiones y divisiones de flujos.
- Se añadió la capacidad de trabajar con representaciones de dos pistas del formato de codificación de video LCEVC (Low Complexity Enhancement Video Coding) en la utilidad de línea de comandos ffmpeg, donde el video base y los metadatos para mejorar la calidad se almacenan en forma de pistas separadas.
- Se agregó soporte para la transferencia de fotogramas de video decodificados desde el decodificador de hardware NVIDIA NVDEC a la memoria de la GPU utilizando arreglos de texturas CUARRAY (CUDA array) en lugar del búfer CUdeviceptr para mejorar la compatibilidad con la API gráfica Vulkan. Se añadió soporte para CUARRAY en códecs H.264, HEVC, AV1, MPEG-1, MPEG-2, MPEG-4, VC-1, WMV3, VP8 y VP9.
- Se añadieron empaquetadores y desempaquetadores de contenedores multimedia astc y KTX 1.0, utilizados para almacenar texturas. Se implementó el soporte para la compresión y desempaquetado de texturas en formato ASTC (Adaptive Scalable Texture Compression) mediante la biblioteca libastcenc.
- Se implementó el soporte para seleccionar dispositivos de captura de video y audio de AVFoundation por un identificador único o el número de serie del dispositivo USB. Se añadieron las opciones '-video_device_id' y '-audio_device_id' para especificar los identificadores.
- Se añadió una variante del codificador (apv_vulkan) para el formato APV (Advanced Professional Video), que utiliza las capacidades de aceleración de la API gráfica Vulkan y los shaders de cálculo.
- Se añadió un codificador para el formato DSD (dsd_msbf).
- Se mejoró significativamente el codificador para el formato de audio AAC (Advanced Audio Coding). Se agregó soporte para la decodificación del formato xHE-AAC (Extended High-Efficiency AAC, estándar ISO/IEC 23003-3, utilizado en la transmisión por streaming de Netflix) mediante la biblioteca libfdk-xhe-aac.
- Se añadió soporte para la decodificación de flujos de video H.264 seccionados (partitioning), donde cada fotograma se divide en varias partes.
- Se han añadido decodificadores para los formatos Infinity IMM6, Rhetorex ADPCM, ADPCM IMA Citrix y Panasonic RW2.
- Se ha implementado un decodificador y descompresor de contenedores multimedia para el formato DVD-Audio LPCM (Modulación por Código de Pulsos Lineales).
- Se han añadido empaquetadores de contenedores multimedia en los formatos iTerm2 y JPEG Multi-Picture.
- Se han añadido descompresores de contenedores multimedia en los formatos MVR y JPEG Multi-Picture.
- Para la plataforma Windows se ha implementado el soporte del protocolo 'handle:', que permite utilizar descriptores HANDLE de WinAPI y que soporta acceso aleatorio, no solo lectura lineal como con el protocolo 'pipe:'.
- Se ha añadido a la backend de ONNX Runtime la capacidad de ejecutar filtros de redes neuronales en Windows, utilizando la biblioteca DirectML implementada sobre la API Direct3D 12 en modo zero-copy (sin copiar fotogramas entre la memoria de video y la RAM).
- Nuevos filtros:
- vf_fruc_vulkan — aumenta la frecuencia de fotogramas de video añadiendo fotogramas intermedios con la ayuda del acelerador de hardware NVIDIA Optical Flow Accelerator, utilizando la extensión Vulkan VK_NV_optical_flow.
- gainmap — calcula un mapa de aumento de brillo (HDR Gain Map) basado en versiones SDR y HDR de la misma imagen.
- latticepal — convierte una imagen RGB/BGR a todo color en un formato con paleta de 8 bits PAL8.
- vf_vqe_amf — mejora la calidad del video en sistemas con GPU AMD, utilizando el mecanismo de supresión de ruido VQE (Video Quality Enhancer), disponible en Advanced Media Framework (AMF).
- Se han añadido filtros bitstream: trim (eliminación de paquetes fuera del rango especificado), jpegapp (inserción de segmentos JPEG APP0..APP15) y side_data (eliminación de metadatos de servicio).
- Se ha añadido un filtro de fusión de capas (capa con video base y capa con metadatos para mejorar la calidad) para video en formato LCEVC.
Fuente: opennet.ru
