11 月 10 日、Alliance for Open Media (AOMedia) は、最初のイマーシブ オーディオ仕様 IAMF (https://aomediacodec.github.io/iamf/) をリリースしました。IAMF は、再生時間に関する情報を伝送できるコーデックに依存しないコンテナ仕様です。レンダリング アルゴリズムとオーディオ ミキシングを備えており、AV1 ビデオ規格と同様にロイヤリティフリーです。
AV1 以来、AOMedia はオープン性を利用して、HEVC、VVC、および確立された標準化団体 ITU および ISO/IEC のその他の標準に対抗してきました。現在、AV1 は、Netflix、Meta、Apple などを含む主流ビデオ プラットフォームの主要標準となっており、AV1 のアプリケーション展開を拡大し続けています。同様に、IAMF は当然のことながら、商用イマーシブ オーディオ ソリューションに対する主力勢力となっています。現在、業界で最も影響力のあるイマーシブ オーディオ ソリューションは Dolby Atmos であり、Apple は独自のイマーシブ オーディオ ソリューションとして Dolby Atmos を採用しています。ドルビーがマルチメディアの制作と消費の分野に完全に浸透していることを考慮すると、アップルがドルビーを選択するのは自然なことです。さらに、Atmos Technology はイマーシブ オーディオの主要なソリューション プロバイダーでもあります。
AV1 の成功は、AOMedia が、コンテンツ制作ツール、コンテンツ IP 所有者、流通チャネル OTT、端末機器メーカー、チップ、主要テクノロジー サービス プロバイダーに至るまで、マルチメディアのあらゆる主要な側面において企業を結集したという事実にあります。もちろん、AV1 の成功は、HEVC のわかりにくいロイヤルティ メカニズムによっても支えられました。
Samsung が発行したプレスリリースによると、IAMF プロジェクトは 2020 年に開始され、Samsung と Google によって共同開発され、最終的に AOMedia となりました。サムスンは AOMedia の創設メンバーです。Apple は AOMedia の創設メンバーでもありますが、自社のエコシステムではイマーシブ オーディオ ソリューションとしてより成熟した Dolby Atmos を依然として使用しています。AOMedia のメンバーには、Amazon、Meta、Microsoft、Netflix、Tencent、Oppo、Vimeo などのコンテンツ プラットフォームも含まれており、これらのプラットフォームの選択が IAMF の運命を大きく左右します。
IAMF の主なハイライトは次のとおりです。
すべてのデバイス向けの空間オーディオ: IAMF は、チャネルベースおよびシーンベースの Atmos 空間オーディオ プレゼンテーションをヘッドフォン、携帯電話、テレビ、ホーム シアター、Web などのさまざまなデバイスにシームレスに配信できます。この多用途性により、プラットフォーム間で一貫した高品質のオーディオ体験が保証されます。
柔軟なオーディオ送信: IAMF は、さまざまなタイプのオーディオ要素をエンド デバイスに送信するための柔軟な方法を提供します。3.1.2 チャンネル オーディオとステレオ オーディオを組み合わせる場合でも、IAMF はすべてを実行できます。IAMF は、スピーカー レイアウトやヘッドフォンでの再生のために、EAR や BEAR などのアルゴリズムをレンダリングする方法を提供します。
クリエイターフレンドリー: クリエイターは、EAR Production Suite などの既存のオープンソース プラグインを使用して、IAMF 準拠のイマーシブ オーディオ コンテンツの作成を開始できます。これには、マルチスピーカー レイアウトやバイノーラル モニタリング用のレンダラーが含まれています。IAMF は複数のオーディオ ミックス構成を保持および含めることができるため、クリエイターとユーザーはさまざまな再生設定に基づいて制御可能なラウドネス調整を行うことができます。近い将来、オープン ソース リファレンス ソフトウェア AOMedia に、さまざまなオーディオ ミックスを圧縮するための IAMF エンコード ツールが IAMF に追加される予定です。
AI 主導: IAMF は人工知能と深層学習テクノロジーを活用してシーンを分析し、コンテンツの特定の側面を強調し、音声レベルを調整して視聴体験全体の音響効果を強化します。IAMFテクノロジーにより、ユーザーは自分好みのサウンドを自由に調整することができます。視聴者がアクション シーンのサウンドを強化したい場合でも、会話の明瞭さを強化したい場合でも、IAMF はコンテンツのオーディオをカスタマイズして、よりパーソナライズされた体験を実現する柔軟性を提供します。
IAMF 仕様とリファレンス ソフトウェア デコーダは、完全なテスト ストリームと同様に、ここ (https://github.com/AOMediaCodec) で見つけることができます。
Samsung Research InstituteのビジュアルテクノロジーチームのWooHyun Nam氏によると、Samsungの研究チームは現在、モバイルデバイス、メタバース、ビデオゲームなどの分野に適用できるIAMFテクノロジーの高度なバージョンを開発中だという。
参考情報：
https://aomedia.org/press%20releases/AOMedia-Advances-the-Audio-Innovation-Era/
https://news.samsung.com/global/interview-movie-quality-audio-from-the-comfort-of-your-home-meet-the-leaders-of-next-generation-3d-audio-technology
▼原文を読むには以下をクリックしてください ▼
LiveVideoStackCon 2023 深セン駅の公式 Web サイトにアクセスして、エキサイティングなスピーチの詳細をご覧ください。
この記事は、WeChat パブリック アカウント - LiveVideoStack (livevideostack) から共有されています。
侵害がある場合は、削除について [email protected] までご連絡ください。
この記事は「OSC ソース作成計画」に参加していますので、読んでいる方もぜひ参加し、共有してください。