L'Open Media Alliance (AOMedia), qui supervise le développement du format d'encodage vidéo AV1 et du format d'image AVIF, a présenté le nouveau format audio IAMF (Immersive Audio Model and Formats), qui définit un conteneur pour la distribution du son surround qui prend en compte la propagation des signaux audio dans un espace tridimensionnel pour recréer le son au plus près du naturel. IAMF assure la transmission des informations complémentaires nécessaires au fonctionnement des algorithmes de reconstruction de la scène sonore et de mixage sonore.
Le format se positionne initialement comme accessible au public et ne nécessite pas de paiement de redevances. Tous les membres d'AOMedia, notamment Amazon, Apple, Cisco, Google, Intel, Meta, Microsoft, Mozilla, Netflix, NVIDIA, Samsung Electronics et Tencent, possèdent des brevets sous licence qui chevauchent ceux de l'IAMF pour une utilisation libre de droits. Les termes du contrat de licence IAMF prévoient également la révocation des droits d'utilisation d'IAMF en cas de réclamations de brevet contre d'autres utilisateurs d'IAMF, c'est-à-dire les entreprises ne peuvent pas utiliser IAMF si elles sont impliquées dans des procédures judiciaires contre les utilisateurs d’IAMF.
IAMF est conçu pour la distribution de contenu audio spatial (immersif) (Immersive Audio), créant un effet de pleine présence et fournissant un son de haute qualité sur différentes classes d'appareils : des smartphones et écouteurs aux barres de son, home cinéma et téléviseurs. Le format peut être utilisé à la fois pour le streaming et pour la lecture de données audio stockées. Prend en charge les vues basées sur les canaux ou sur la scène sonore, ainsi que la possibilité de mélanger différentes vues. Les applications incluent l'ajout d'une prise en charge audio spatiale aux lecteurs de musique, aux services de streaming, aux jeux, aux applications de communication, aux systèmes de réalité virtuelle ou augmentée, aux systèmes multimédia et au Web.
Le format n'est pas lié à des codecs spécifiques et peut être utilisé avec des codecs libres de droits ou libres de droits. Par exemple, la spécification suggère d'utiliser les codecs Opus ou AAC (MP4) pour l'encodage audio sans perte, et Flac ou LPCM pour l'encodage audio sans perte. L'implémentation de référence du décodeur est écrite en C, est sous licence BSD et peut être compilée avec les bibliothèques opus, fdk-aac et flac. Pour fournir un son surround, un assemblage avec les bibliothèques Bear et Resonance-Audio est également pris en charge. Le code de l'encodeur devrait être publié ultérieurement.
L'utilisation de codecs génériques simplifie l'intégration avec les systèmes de diffusion et de streaming existants et permet la création de contenu audio spatial conforme à l'IAMF à l'aide de plugins VST ouverts existants, tels que EAR Production Suite, pour la disposition spatiale des haut-parleurs et le contrôle binaural (déterminant la direction du source sonore) .
Le format prend en charge l'inclusion de plusieurs configurations de mixage, permettant aux créateurs de contenu et aux utilisateurs de définir des paramètres de volume distincts pour différents modes de lecture. Pour une lecture prenant en compte le placement spatial des enceintes ou la simulation du son surround dans un casque, IAMF offre la possibilité d'utiliser des algorithmes de rendu de signal tels que EAR et BEAR.
Source: opennet.ru