[發(fā)明專利]空間音頻下混頻的方法及系統(tǒng)

有效

• 申請(qǐng)?zhí)枺?/td>: 201880057194.5
• 申請(qǐng)日: 2018-09-26
• 公開（公告）號(hào): CN111052770B
• 公開（公告）日: 2021-12-03
• 發(fā)明（設(shè)計(jì)）人: C·T·尤班克;M·S·康諾利;S·E·平托
• 申請(qǐng)（專利權(quán)）人: 蘋果公司
• 主分類號(hào): H04S7/00
• 分類號(hào): H04S7/00
• 代理公司: 北京市金杜律師事務(wù)所 11256
• 代理人: 羅利娜

1.一種用于處理空間音頻的計(jì)算機(jī)實(shí)現(xiàn)的方法，所述方法包括：

接收被編碼為保留一個(gè)或多個(gè)所記錄聲音的空間特征的空間音頻對(duì)象，其中，所述空間音頻對(duì)象包括表示所述一個(gè)或多個(gè)所記錄聲音的多個(gè)音頻數(shù)據(jù)信道，每個(gè)信道與方向和位置中的任何一者或多者相關(guān)聯(lián)；

呈現(xiàn)所述空間音頻對(duì)象的視覺(jué)表示，其中，所述多個(gè)音頻數(shù)據(jù)信道中的每者基于其相應(yīng)的方向或位置與所述視覺(jué)表示的一部分相關(guān)聯(lián)；

基于所述視覺(jué)表示的取向?qū)λ龆鄠€(gè)音頻數(shù)據(jù)信道中的每個(gè)信道進(jìn)行加權(quán)，其中，與所述視覺(jué)表示的被取向?yàn)槌蝾A(yù)先確定對(duì)象的一部分相關(guān)聯(lián)的信道受到的加權(quán)高于與所述視覺(jué)表示的被取向?yàn)楸畴x所述預(yù)先確定對(duì)象的一部分相關(guān)聯(lián)的信道受到的加權(quán)；

對(duì)加權(quán)音頻數(shù)據(jù)信道進(jìn)行下混頻；以及

基于下混頻加權(quán)信道呈現(xiàn)聲音。

2.根據(jù)權(quán)利要求1所述的計(jì)算機(jī)實(shí)現(xiàn)的方法，其中呈現(xiàn)所述視覺(jué)表示包括：

顯示與所述視覺(jué)表示的給定部分相對(duì)應(yīng)的圖像，所述圖像表示由所述多個(gè)音頻數(shù)據(jù)信道中的一個(gè)或多個(gè)信道表示的占主導(dǎo)的所記錄聲音，所述一個(gè)或多個(gè)信道與所述視覺(jué)表示的所述給定部分相關(guān)聯(lián)。

3.根據(jù)前述權(quán)利要求中任一項(xiàng)所述的計(jì)算機(jī)實(shí)現(xiàn)的方法，其中，對(duì)所述加權(quán)音頻數(shù)據(jù)信道進(jìn)行下混頻包括將所述加權(quán)音頻數(shù)據(jù)信道中的每者取向?yàn)榕c相應(yīng)加權(quán)音頻數(shù)據(jù)信道的初始取向不同的方向，并且對(duì)經(jīng)取向的加權(quán)音頻數(shù)據(jù)信道進(jìn)行下混頻。

4.根據(jù)權(quán)利要求1或2所述的計(jì)算機(jī)實(shí)現(xiàn)的方法，其中，基于所述下混頻加權(quán)信道來(lái)呈現(xiàn)聲音會(huì)將所述聲音模擬為源自對(duì)應(yīng)于所述視覺(jué)表示的位置。

5.根據(jù)權(quán)利要求1或2所述的計(jì)算機(jī)實(shí)現(xiàn)的方法，還包括：

接收用戶輸入，所述用戶輸入用以相對(duì)于所述用戶來(lái)重新取向所述視覺(jué)表示，使得所述視覺(jué)表示的不同部分對(duì)所述用戶可見(jiàn)。

6.根據(jù)權(quán)利要求5所述的計(jì)算機(jī)實(shí)現(xiàn)的方法，其中，所述視覺(jué)表示的對(duì)所述用戶可見(jiàn)的所述不同部分包括表示由與所述視覺(jué)表示的所述不同部分相關(guān)聯(lián)的信道表示的占主導(dǎo)的所記錄聲音的圖像。

7.根據(jù)權(quán)利要求1或2所述的計(jì)算機(jī)實(shí)現(xiàn)的方法，其中，基于所述視覺(jué)表示的所述取向?qū)λ龆鄠€(gè)音頻數(shù)據(jù)信道中的每個(gè)信道進(jìn)行加權(quán)是基于所述視覺(jué)表示的更新取向重復(fù)執(zhí)行的。

8.根據(jù)權(quán)利要求1或2所述的計(jì)算機(jī)實(shí)現(xiàn)的方法，其中，呈現(xiàn)所述視覺(jué)表示包括顯示表面具有多個(gè)圖像的屬于球體或多面體中的一者的球體，其中，每個(gè)圖像是所述視覺(jué)表示的不同部分并且表示由與所述不同部分相關(guān)聯(lián)的所述多個(gè)音頻數(shù)據(jù)信道中的一個(gè)或多個(gè)信道表示的不同的占主導(dǎo)的所記錄聲音。

9.根據(jù)權(quán)利要求1或2所述的計(jì)算機(jī)實(shí)現(xiàn)的方法，其中所述預(yù)先確定的對(duì)象是用戶或者表示用戶位置。

10.一種空間音頻處理計(jì)算機(jī)系統(tǒng)，所述系統(tǒng)包括：

處理器和存儲(chǔ)有指令的存儲(chǔ)器，所述指令在由所述處理器執(zhí)行時(shí)：

接收被編碼為保留多個(gè)所記錄聲音的空間特征的空間音頻對(duì)象，其中所述空間音頻對(duì)象包括表示所述所記錄聲音的多個(gè)音頻數(shù)據(jù)信道，每個(gè)信道與方向、位置或空間分布中的任何一者或多者相關(guān)聯(lián)；

呈現(xiàn)所述空間音頻對(duì)象的視覺(jué)表示，其中，所述所記錄聲音中的每者基于所述聲音的相應(yīng)方向或位置與所述視覺(jué)表示的一部分相關(guān)聯(lián)；

基于所述視覺(jué)表示的取向?qū)λ龆鄠€(gè)音頻數(shù)據(jù)信道中的每個(gè)信道進(jìn)行加權(quán)，從而對(duì)與所述視覺(jué)表示的被取向?yàn)槌蝾A(yù)先確定對(duì)象的一部分相關(guān)聯(lián)的聲音進(jìn)行突顯，所述突顯超過(guò)與所述視覺(jué)表示的被取向?yàn)楸畴x所述預(yù)先確定對(duì)象的一部分相關(guān)聯(lián)的另一聲音所受到的突顯；

對(duì)加權(quán)音頻數(shù)據(jù)信道進(jìn)行下混頻；以及

基于下混頻加權(quán)信道呈現(xiàn)聲音。