Разработчиците на кодека AV1 представиха формата IAMF за съраунд звук

Алиансът за отворени медии (AOMedia), който отговаря за разработването на видео кодиращия формат AV1 и формата за изображения AVIF, представи новия аудио формат IAMF (Immersive Audio Model and Formats), който определя контейнер за разпространение на съраунд звук, отчитащ разпространението на аудио сигнали в триизмерно пространство, за да пресъздаде звука възможно най-близък до естествения. IAMF позволява предаването на допълнителна информация, необходима за реконструкция на звуковата сцена и алгоритми за миксиране на аудио.

Форматът първоначално е позициониран като отворен код и безплатен. Всички участници в AOMedia, включително Amazon, Apple, Cisco, Google, Intel, Meta, Microsoft, Mozilla, Netflix, NVIDIA, Samsung Electronics и Tencent, имат лицензирани патенти, които се припокриват с безплатните патенти на IAMF. Лицензионното споразумение на IAMF предвижда и отнемане на правата за използване на IAMF в случай на патентни искове срещу други потребители на IAMF; т.е. компаниите не могат да използват IAMF, ако участват в съдебни спорове срещу потребители на IAMF.

IAMF е предназначен за разпространение на пространствено (поглъщащо) аудио съдържание (Immersive Audio), създавайки напълно поглъщащо изживяване и предоставяйки висококачествен звук на различни устройства: от смартфони и слушалки до саундбари, системи за домашно кино и телевизори. Форматът може да се използва както за стрийминг, така и за възпроизвеждане на съхранени аудио данни. Поддържат се представяния, базирани на канали или сцени, заедно с възможността за смесване на различни представяния. Посочените области на приложение включват добавяне на пространствена аудио поддръжка към музикални плейъри, стрийминг услуги, игри, комуникационни приложения, системи за виртуална и добавена реалност, мултимедийни системи и мрежата.

Форматът не е обвързан с конкретни кодеци и може да се използва с кодеци, изискващи или не изискващи плащане на авторски права. Например, спецификацията предлага използването на кодеци Opus или AAC (MP4) за кодиране на аудио със загуби и Flac или LPCM за кодиране без загуби. Имплементацията на референтния декодер е написана на C, лицензирана под BSD лиценза и може да бъде изградена с библиотеките opus, fdk-aac и flac. За съраунд звук се поддържа и изграждане с библиотеките bear и resonance-audio. Планирано е кодът на енкодера да бъде публикуван по-късно.

Използването на стандартни кодеци опростява интеграцията със съществуващи системи за възпроизвеждане и стрийминг и позволява създаването на IAMF-съвместимо пространствено аудио съдържание, използвайки съществуващи VST плъгини с отворен код, като EAR Production Suite за пространствено картографиране на високоговорителите и бинаурален мониторинг.

Форматът поддържа множество конфигурации за миксиране, което позволява на създателите на съдържание и потребителите да задават отделни настройки за силата на звука за различните режими на възпроизвеждане. За възпроизвеждане, което отчита пространственото разположение на високоговорителите или симулира съраунд звук в слушалки, IAMF поддържа алгоритми за рендиране на сигнала, като EAR и BEAR.

Източник: opennet.ru