FFmpeg 4.3 multimeedia paketi väljaanne, mis toetab graafika API-d Vulkan

Kümne kuu arendamise järel saadaval multimeedia-pakett FFmpeg 4.3, mis sisaldab rakenduste komplekti ja kogu raamatukogusid erinevate multimeedia formaatidega toimetamiseks (salvestamine, konverteerimine ja helifailide ning videofailide dekodeerimine). Pakett on levitatav LGPL ja GPL litsentside alusel, FFmpeg arendust teostatakse paralleelselt projektiga VLC.

Uusimad muutusi, lisatud в FFmpeg 4.3, можно выделить:

• Lisatud graafilise API tugi Vulkan;
• На базе Vulkan для Linux реализован кодировщик, использующий для ускорения движки AMD AMF/VCE, а также варианты типовых фильтров avgblur_vulkan, overlay_vulkan, scale_vulkan и chromaber_vulkan;
• Обеспечена возможность использования API VDPAU (Video Decode and Presentation) для аппаратного ускорения обработки видео в формате VP9;
• Добавлена возможность кодирования видео AV1 с использованием библиотеки librav1e, написанной на на языке Rust и развиваемой сообществами Xiph и Mozilla;
• Для медиаконтейнеров mp4 реализована поддержка многоканального звукового кодека без потерь TrueHD и кодека для трёхмерного звука MPEG-H 3D;
• Добавлена поддержка протоколов ZeroMQ ja RabbitMQ (AMQP 0-9-1);
• В Linux осуществлён переход с фрэймсервера для нелинейного редактирования видеопотоков (виртуального видеокодека) AvxSynth, который уже 5 лет находится в заброшенном состоянии, на актуальный форк AviSynth+;
• В состав включён парсер для изображений в формате WebP;
• Реализованы декодировщики MJPEG и VP9, использующие механизм аппаратного ускорения Intel QSV (Quick Sync Video), а также кодировщик VP9 на базе Intel QSV;
• Расширена поддержка стилей субтитров в формате 3GPP Timed Text Subtitles;
• Добавлен кодировщик-обвязка над API Microsoft Media Foundation;
• Добавлен ADPCM-кодировщик для звуковых данных, используемых в играх компании Simon & Schuster Interactive;
• Добавлены новые декодировщики: PFM, IMM5, Sipro ACELP.KELVIN, mvdv, mvha, mv30, NotchLC, Argonaut Games ADPCM, Rayman 2 ADPCM, Simon & Schuster Interactive ADPCM, High Voltage Software ADPCM, ADPCM IMA MTF, CDToons, Siren, DERF DPCM и CRI HCA;
• Добавлен упаковщик медиаконтейнеров (muxer) streamhash и реализована возможность упаковки pcm и pgs в контейнеры m2ts;
• Добавлены распаковщики медиаконтейнеров (demuxer): AV1 с расширениями из приложения B,
  Argonaut Games ASF, Real War KVAG, Rayman 2 APM, LEGO Racers ALP (.tun и .pcm), FWSE, DERF, CRI HCA, Pro Pinball Series Soundbank;
• Uued filtrid:
  • v360 — преобразует видео с обзором 360 градусов в различные форматы;
  • scroll — прокручивает видео по горизонтали или вертикали с заданной скоростью;
  • photosensitivity — убирает яркие вспышки и резкие перепады яркости из видео, которые потенциально могут вызвать эпилептический припадок;
  • arnndn — фильтр подавления шумов в речи, использующий рекурентную нейронную сеть;
  • bilateral — выполняет пространственное сглаживание с сохранением краёв;
  • maskedmin ja maskedmax — выполняют слияние двух видеопотоков на основе отличий с третьим потоком;
  • median — фильтр подавления шума, который выбирает медианный пиксель из прямоугольника, вписывающегося в указанный радиус;
  • AV1 frame merge — слияние кадров в потоке AV1;
  • axcorrelate — рассчитывает нормализованную взаимную корреляцию между двумя аудиопотоками;
  • thistogram — вычисляет и выводит гистограмму распределения цветов в видео;
  • freezeframes — заменяет набор кадров на видео на определённые кадры из другого потока;
  • xfade ja xfade_opencl —
    перекрёстное затухание с переходом из одного видеопотока в другой;
  • afirsrc — генерирует коэффициенты FIR с использованием метода частотной выборки;
  • pad_opencl — добавляет отступы к изображению;
  • cas — применяет к видео фильтр изменения резкости CAS (Contrast Adaptive Sharpen);
  • anlms — применяет нормализованный алгоритм LMS (Least mean squares) к первому звуковому потоку, вычисляя коэффициенты на основе различий со вторым потоком;
  • overlay_cuda — размещает кусок одного видео поверх другого;
  • tmedian — фильтр подавления шумов, использующий медианные пиксели из нескольких успешных кадров;
  • maskedthreshold — выбирает при фильтрации пиксели на основе сравнения разницы двух видеопотоков с пороговым значением;
  • asubboost — усиливает частоты для саббуфера;
  • pcm_rechunk — переупаковывает PCM-звук с учётом заданной частоты дискретизации или скорости передачи пакетов;
  • scdet — определяет изменения сцены на видео (например, для определения движения в кадре);
  • gradients — генерирует видеопоток с градиентами;
  • sierpinski — генерирует видеопоток с фракталами Серпинского;
  • untile — разбирает видео, составленное из кусочков, на отдельные изображения;
  • dblur — реализует направленное размытие.

Allikas: opennet.ru