[發明專利]用于會議的子帶空間處理和串擾消除系統

有效

• 申請號: 201880079769.3
• 申請日: 2018-11-29
• 公開（公告）號: CN111466123B
• 公開（公告）日: 2022-02-01
• 發明（設計）人: 扎卡里·塞爾迪斯
• 申請（專利權）人: 云加速360公司
• 主分類號: H04S1/00
• 分類號: H04S1/00;H04R5/04
• 代理公司: 北京集佳知識產權代理有限公司 11227
• 代理人: 王萍;楊林森

實施方式涉及為客戶端裝置提供具有空間化音頻的會議。從客戶端裝置接收輸入音頻流。針對每個客戶端裝置，確定定義其他客戶端裝置在聲場內的空間位置的布置數據。通過根據布置數據對其他客戶端裝置的輸入音頻流進行混合和平移來生成用于客戶端裝置的包括左混合聲道和右混合聲道的混合流。通過對混合流的左混合聲道和右混合聲道應用子帶空間處理和串擾處理來生成包括用于左揚聲器的左增強聲道和用于右揚聲器的右增強聲道的空間增強流。

技術領域

本文描述的主題涉及音頻處理，并且更具體地涉及用于會議客戶端裝置的空間化音頻處理。

背景技術

電子裝置被使用以提供多個用戶之間的遠程會議。通常，生成用戶的音頻流以捕獲用戶的發言，而組合其他用戶的音頻流以提供供用戶收聽的聲音。例如，組合流可以是揚聲器的單聲道流。針對立體聲揚聲器，為左揚聲器和右揚聲器再現單聲道流。與當面會議(in-person meeting)不同，在單聲道流中不同的參與者沒有聲場的空間感，并且因此降低了語音區別和可理解度。

發明內容

實施方式涉及為客戶端裝置提供具有空間化音頻的會議。在一些實施方式中，從客戶端裝置接收輸入音頻流。針對客戶端裝置確定定義其他客戶端裝置在聲場內的空間位置的布置數據(placement data)。通過根據布置數據對其他客戶端裝置的輸入音頻流進行混合和平移(panning)來生成用于客戶端裝置的包括左混合聲道和右混合聲道的混合流。通過對混合流的左混合聲道和右混合聲道應用子帶空間處理和串擾處理來生成包括左增強聲道和右增強聲道的空間增強流。空間增強流被提供給客戶端裝置。

在一些實施方式中，提供了一種存儲有指令的非暫態計算機可讀介質，所述指令在由處理器執行時將該處理器配置為：從客戶端裝置接收輸入音頻流；針對客戶端裝置，確定定義其他客戶端裝置在聲場內的空間位置的布置數據；并且通過根據布置數據對其他客戶端裝置的輸入音頻流進行混合和平移來生成用于客戶端裝置的包括左混合聲道和右混合聲道的混合流。

在一些實施方式中，系統為客戶端裝置提供會議。該系統包括處理電路，該處理電路被配置成：從客戶端裝置接收輸入音頻流；針對客戶端裝置，確定定義其他客戶端裝置在聲場內的空間位置的布置數據；并且通過根據布置數據對其他客戶端裝置的輸入音頻流進行混合和平移來生成用于客戶端裝置的包括左混合聲道和右混合聲道的混合流。

其他方面包括與上述任何方面相關的部件、裝置、系統、改進、方法、過程、應用、計算機可讀介質和其他技術。

附圖說明

圖1是根據一些實施方式的音頻處理系統的示意性框圖。

圖2是根據一些實施方式的空間混合處理器的示意性框圖。

圖3是根據一些實施方式的具有串擾消除的空間增強處理器的示意性框圖。

圖4是根據一些實施方式的子帶空間處理器的示意性框圖。

圖5是根據一些實施方式的串擾補償處理器的示意性框圖。

圖6是根據一些實施方式的串擾消除處理器的示意性框圖。

圖7是根據一些實施方式的具有串擾模擬的空間增強處理器的示意性框圖。

圖8是根據一些實施方式的串擾模擬處理器的示意框圖。

圖9是根據一些實施方式的用于在客戶端裝置之間進行會議的過程的流程圖。

圖10是根據一些實施方式的音頻處理系統的圖。

圖11是根據一些實施方式的音頻處理系統的圖。

圖12是根據一些實施方式的音頻處理系統的圖。

圖13是根據一些實施方式的計算機系統的示意性框圖。