[發(fā)明專利]用于計(jì)算機(jī)介導(dǎo)現(xiàn)實(shí)系統(tǒng)的渲染

有效

• 申請?zhí)枺?/td>: 201880065499.0
• 申請日: 2018-10-12
• 公開（公告）號(hào): CN111183658B
• 公開（公告）日: 2021-07-06
• 發(fā)明（設(shè)計(jì)）人: N·G·彼得斯;S·M·A·塞爾辛;S·塔加迪爾·施瓦帕;金墨永;D·森
• 申請（專利權(quán)）人: 高通股份有限公司
• 主分類號(hào): H04S7/00
• 分類號(hào): H04S7/00;G06F3/01;H04R5/033
• 代理公司: 北京市柳沈律師事務(wù)所 11105
• 代理人: 安之斐

1.一種用于媒體數(shù)據(jù)處理的裝置，其包括：

存儲(chǔ)器，其經(jīng)配置以存儲(chǔ)表示聲場的高階立體混響音頻數(shù)據(jù)；和

一或多個(gè)處理器，其耦合到所述存儲(chǔ)器且經(jīng)配置以：

接收原始參考距離；

在與裝置介接的用戶的平移運(yùn)動(dòng)之前，確定定位于相對于所述用戶的頭部的原始參考距離處的參考點(diǎn)，其中所述參考點(diǎn)是錨點(diǎn)；

獲取表示與所述裝置介接的用戶的平移頭部移動(dòng)的平移距離；

在獲得所述平移距離之后，確定定位于所述原始參考距離處的每個(gè)錨點(diǎn)與所述用戶的頭部之間的更新距離；

在應(yīng)用渲染器之前，基于每個(gè)更新距離來確定效應(yīng)矩陣；

基于所述效應(yīng)矩陣生成高階立體混響音頻數(shù)據(jù)，以使所述聲場適應(yīng)所獲取的平移距離；且

基于所生成的高階立體混響音頻數(shù)據(jù)生成揚(yáng)聲器饋送。

2.根據(jù)權(quán)利要求1所述的裝置，其中表示所述平移頭部移動(dòng)的所述平移距離限定于二維空間坐標(biāo)空間或三維空間坐標(biāo)空間中。

3.根據(jù)權(quán)利要求1所述的裝置，

其中所述一或多個(gè)處理器進(jìn)一步經(jīng)配置以將所述效應(yīng)矩陣乘以渲染矩陣來獲取更新的渲染矩陣，

其中所述一或多個(gè)處理器經(jīng)配置以將所述更新的渲染矩陣應(yīng)用于所述高階立體混響音頻數(shù)據(jù)，從而1)提供使所述聲場適應(yīng)所述平移距離的一或多個(gè)效應(yīng)，且2)生成所述揚(yáng)聲器饋送。

4.根據(jù)權(quán)利要求1所述的裝置，其中多個(gè)錨點(diǎn)均勻分布于具有等于所述原始參考距離的半徑的球體的表面上。

5.根據(jù)權(quán)利要求1所述的裝置，

其中包含深度映射的三維視頻數(shù)據(jù)與所述高階立體混響音頻數(shù)據(jù)相關(guān)聯(lián)，且

其中所述一或多個(gè)處理器經(jīng)配置以在確定定位于所述原始參考距離處的每個(gè)錨點(diǎn)與所述用戶的頭部之間的所述更新距離中的每一個(gè)之前，基于所述深度映射來確定所述錨點(diǎn)中的每一個(gè)的所述原始參考距離。

6.根據(jù)權(quán)利要求1所述的裝置，

其中包含深度映射的三維視頻數(shù)據(jù)與所述高階立體混響音頻數(shù)據(jù)相關(guān)聯(lián)，且

其中所述一或多個(gè)處理器經(jīng)配置以基于所述深度映射來獲取定位于所述原始參考距離處的每個(gè)錨點(diǎn)與所述用戶的頭部之間的更新距離。

7.根據(jù)權(quán)利要求1所述的裝置，

其中所述一或多個(gè)處理器耦合到所述裝置的揚(yáng)聲器，其中所述裝置是可穿戴式裝置，

其中所述一或多個(gè)處理器經(jīng)配置以將渲染器應(yīng)用于所述高階立體混響音頻數(shù)據(jù)以生成所述揚(yáng)聲器饋送，其中所述渲染器是雙耳渲染器，且

其中所述一或多個(gè)處理器進(jìn)一步經(jīng)配置以將所述揚(yáng)聲器饋送輸出到所述揚(yáng)聲器。

8.根據(jù)權(quán)利要求7所述的裝置，其中所述可穿戴式裝置為手表、眼鏡、頭戴式耳機(jī)、擴(kuò)增現(xiàn)實(shí)AR耳機(jī)、虛擬現(xiàn)實(shí)VR耳機(jī)或擴(kuò)展現(xiàn)實(shí)XR耳機(jī)。

9.根據(jù)權(quán)利要求1所述的裝置，

其中所述一或多個(gè)處理器進(jìn)一步經(jīng)配置以獲取指示與所述裝置介接的所述用戶的旋轉(zhuǎn)頭部移動(dòng)的旋轉(zhuǎn)指示，且

其中所述一或多個(gè)處理器經(jīng)配置以基于所述平移距離和所述旋轉(zhuǎn)指示來使所述聲場適應(yīng)所述平移距離和所述旋轉(zhuǎn)指示。

10.根據(jù)權(quán)利要求1所述的裝置，其中所述一或多個(gè)處理器經(jīng)配置以使用感測所述平移頭部移動(dòng)的運(yùn)動(dòng)傳感器來獲取所述平移距離。

11.根據(jù)權(quán)利要求1所述的裝置，其中所述一或多個(gè)處理器經(jīng)配置以基于由耦合到所述一或多個(gè)處理器的攝影機(jī)捕獲的圖像來獲取所述平移距離。

12.根據(jù)權(quán)利要求1所述的裝置，其中所述高階立體混響音頻數(shù)據(jù)包括與具有一或小于一的階數(shù)的球基函數(shù)相關(guān)聯(lián)的高階立體混響系數(shù)、與具有混合階數(shù)和子階數(shù)的球基函數(shù)相關(guān)聯(lián)的高階立體混響系數(shù)，或與具有大于一的階數(shù)的球基函數(shù)相關(guān)聯(lián)的高階立體混響系數(shù)。