Após três meses de desenvolvimento, foi lançado o pacote multimídia FFmpeg 9.1, que inclui um conjunto de aplicativos e uma coleção de bibliotecas para operações com vários formatos multimídia (gravação, conversão e decodificação de formatos de áudio e vídeo). O pacote é escrito em C e distribuído sob as licenças LGPL e GPL.
Entre as mudanças no FFmpeg 9.1:
- Adicionado um backend de rede baseado na biblioteca libcurl.
- Uma API experimental foi proposta para a criação de filtros de bitstream para modificação direta do fluxo de bits embalado, sem necessidade de decodificação. A nova API permite que filtros sejam combinados em gráficos não lineares, permitindo roteamento complexo, mesclagem e divisão de fluxos.
- A ferramenta de linha de comando ffmpeg agora suporta a manipulação de representações de duas faixas do formato de codificação de vídeo LCEVC (Low Complexity Enhancement Video Coding), onde o vídeo básico e os metadados para melhoria de qualidade são armazenados como faixas separadas.
- Adicionada a capacidade de transferir frames de vídeo decodificados do decodificador de hardware NVIDIA NVDEC para a memória GPU usando matrizes de textura CUARRAY (CUDA array) em vez do buffer CUdeviceptr, para melhorar a compatibilidade com a API gráfica Vulkan. O suporte a CUARRAY foi adicionado para os codecs H.264, HEVC, AV1, MPEG-1, MPEG-2, MPEG-4, VC-1, WMV3, VP8 e VP9.
- Adicionadores e removentes de contêineres de mídia astc e KTX 1.0 foram implementados, utilizados para armazenar texturas. O suporte à compressão e descompressão de texturas no formato ASTC (Adaptive Scalable Texture Compression) foi implementado com a biblioteca libastcenc.
- Implementado o suporte para seleção de dispositivos de captura de vídeo e áudio AVFoundation por meio de um identificador exclusivo ou pelo número de série do dispositivo USB. As opções "-video_device_id" e "-audio_device_id" foram adicionadas para especificar os identificadores.
- Adicionado uma variante do codificador (apv_vulkan) para o formato APV (Advanced Professional Video), que utiliza os recursos de aceleração da API gráfica Vulkan e shaders computacionais.
- Adicionado um codificador para o formato DSD (dsd_msbf).
- Significativamente aprimorado o codificador para o formato de áudio AAC (Advanced Audio Coding). Adicionado suporte para decodificação do formato xHE-AAC (Extended High-Efficiency AAC, padrão ISO/IEC 23003-3, utilizado na transmissão ao vivo da Netflix) com a biblioteca libfdk-xhe-aac.
- Adicionado suporte para decodificação de streams de vídeo H.264 particionados, onde cada quadro é dividido em várias partes.
- Decodificadores adicionados para os formatos Infinity IMM6, Rhetorex ADPCM, ADPCM IMA Citrix e Panasonic RW2.
- Implementado um decodificador e extrator de contêineres de mídia para o formato DVD-Audio LPCM (Modulação de Código de Pulso Linear).
- Empacotadores de contêineres de mídia adicionados nos formatos iTerm2 e JPEG Multi-Picture.
- Desempacotadores de contêineres de mídia adicionados nos formatos MVR e JPEG Multi-Picture.
- Para a plataforma Windows, foi implementado o suporte ao protocolo 'handle:', que permite o uso de descritores HANDLE do WinAPI e suporta acesso aleatório, e não apenas leitura linear como ocorre com o protocolo 'pipe:'.
- No backend do ONNX Runtime, foi adicionada a possibilidade de executar filtros de rede neural no Windows, utilizando a biblioteca DirectML, que opera sobre a API Direct3D 12 em modo zero-copy (sem copiar frames de vídeo entre a memória de vídeo e a RAM).
- Novos filtros:
- vf_fruc_vulkan – aumenta a taxa de quadros do vídeo através da criação de quadros intermediários usando o acelerador de fluxo óptico NVIDIA Optical Flow, utilizando a extensão Vulkan VK_NV_optical_flow.
- gainmap – calcula o mapa de aumento de brilho (HDR Gain Map) com base nas versões SDR e HDR da mesma imagem.
- latticepal – transforma uma imagem RGB/BGR colorida em um formato com paleta de 8 bits PAL8.
- vf_vqe_amf – melhora a qualidade do vídeo em sistemas com GPU AMD, utilizando o mecanismo de supressão de ruídos VQE (Video Quality Enhancer), disponível no Advanced Media Framework (AMF).
- Adicionados filtros de bitstream: trim (remoção de pacotes fora do intervalo especificado), jpegapp (substituição de segmentos JPEG APP0..APP15) e side_data (remoção de metadados de serviço).
- Adicionado filtro de mesclagem de camadas (camada com vídeo base e camada com metadados para melhorar a qualidade) para vídeos no formato LCEVC.
Fonte: opennet.ru
