[發明專利]用于計算機介導現實系統的渲染

有效

• 申請號: 201880065499.0
• 申請日: 2018-10-12
• 公開（公告）號: CN111183658B
• 公開（公告）日: 2021-07-06
• 發明（設計）人: N·G·彼得斯;S·M·A·塞爾辛;S·塔加迪爾·施瓦帕;金墨永;D·森
• 申請（專利權）人: 高通股份有限公司
• 主分類號: H04S7/00
• 分類號: H04S7/00;G06F3/01;H04R5/033
• 代理公司: 北京市柳沈律師事務所 11105
• 代理人: 安之斐

一般來說，本公開描述用于將高階立體混響音頻數據調適為包含三自由度加效應的技術。經配置以執行所述技術的實例裝置包含存儲器和耦合到所述存儲器的處理器。所述存儲器可經配置以存儲表示聲場的高階立體混響音頻數據。所述處理器可經配置以獲取表示與所述裝置介接的用戶的平移頭部移動的平移距離。所述處理器可進一步經配置以基于所述平移距離調適高階立體混響音頻數據，以提供使所述聲場適應所述平移頭部移動的三自由度加效應，且基于調適的高階環境音頻數據生成揚聲器饋送。

技術領域

本申請案要求2017年10月12日申請的美國專利申請案第15/782,252號的權益，所述專利申請案的全部內容以引用的方式并入本文中。

本公開涉及媒體數據，例如音頻數據的處理。

背景技術

高階立體混響(HOA)信號(常常由多個球諧系數(SHC)或其它階層元素來表示)為聲場的三維表示。HOA或SHC表示可按獨立于用以播放從SHC信號渲染的多聲道音頻信號的本地揚聲器幾何布置的方式來表示聲場。SHC信號還可促進回溯兼容性，這是因為可將SHC信號渲染為熟知且經高度采用的多聲道格式，例如5.1音頻聲道格式或7.1音頻聲道格式。因此，SHC表示可實現對聲場的優選表示，其也適應回溯兼容性。

發明內容

本公開大體上涉及計算機介導現實系統的用戶體驗的聽覺方面，所述計算機介導現實系統包含虛擬現實(VR)、混合現實(MR)、擴增現實(AR)、計算機視覺和圖形系統。所述技術可實現對考慮頭部移動的三自由度(橫擺、俯仰和偏轉)以及受限的頭部的平移移動的VR、MR、AR等高階立體混響(HOA)音頻數據的渲染，其為稱作三自由度加(3DOF+)音頻渲染的音頻渲染的形式。

在一個實例中，所述技術涉及一種裝置，其包括：存儲器，其經配置以存儲表示聲場的高階立體混響音頻數據；以及處理器，其耦合到存儲器且經配置以獲取表示與裝置介接的用戶的平移頭部移動的平移距離。處理器可進一步經配置以基于平移距離調適高階立體混響音頻數據，以提供使聲場適應平移頭部移動的三自由度加效應，且基于調適的高階環境音頻數據生成揚聲器饋送。

在另一實例中，所述技術涉及一種方法，其包括獲取表示與裝置介接的用戶的平移頭部移動的平移距離。方法可進一步包括：基于平移距離調適高階立體混響音頻數據，以提供使由高階立體混響音頻數據表示的聲場適應平移頭部移動的三自由度加效應；以及基于調適的高階環境音頻數據生成揚聲器饋送。

在另一實例中，所述技術涉及一種裝置，其包括用于獲取表示與裝置介接的用戶的平移頭部移動的平移距離的裝置。裝置可進一步包括：用于基于平移距離調適高階立體混響音頻數據，以提供使由高階立體混響音頻數據表示的聲場適應平移頭部移動的三自由度加效應的裝置；以及用于基于調適的高階環境音頻數據生成揚聲器饋送的裝置。

在另一實例中，技術涉及一種非暫時性計算機可讀存儲媒體，其上已存儲有指令，所述指令在執行時，促使一或多個處理器：獲取表示與裝置介接的用戶的平移頭部移動的平移距離；基于平移距離調適高階立體混響音頻數據，以提供使由高階立體混響音頻數據表示的聲場適應平移頭部移動的三自由度加效應；且基于調適的高階環境音頻數據生成揚聲器饋送。

在隨附圖式和以下描述中闡述本公開的一或多個實例的細節。技術的各個方面的其它特征、目標和優點將從描述和圖式以及從權利要求書顯而易見。

附圖說明

圖1為說明具有各種階數和子階數的球諧基函數的圖。

圖2A和2B為說明可執行本公開中所描述的技術的各個方面的系統的圖。

圖3為說明由用戶穿戴的VR裝置的實例的圖。

圖4為更詳細地說明圖2A和2B中所示的音頻播放系統在執行本公開中所描述的效應技術的各個方面時的框圖。

圖5為更詳細地說明圖4的實例中所示的效應單元如何根據本公開中所描述的技術的各個方面獲取效應矩陣的圖。