[發明專利]音頻混音方法、服務器及客戶端

有效

• 申請號: 201810234914.2
• 申請日: 2018-03-21
• 公開（公告）號: CN110299144B
• 公開（公告）日: 2021-05-28
• 發明（設計）人: 梁俊斌
• 申請（專利權）人: 騰訊科技（深圳）有限公司
• 主分類號: G10L19/008
• 分類號: G10L19/008;G10L19/16;G10L21/0208
• 代理公司: 北京勵誠知識產權代理有限公司 11647
• 代理人: 賈玉姣

1.一種音頻混音方法，其特征在于，包括：

接收各客戶端發送的第一音頻信號；

對接收到的所述第一音頻信號進行全混音處理，得到全混音音頻信號；

針對每個客戶端，從所述全混音音頻信號中，過濾來自所述客戶端的經過全混音處理后的所述第一音頻信號，得到所述客戶端對應的所述混音音頻信號；其中，所述混音音頻信號中攜帶其他客戶端經過全混音處理的所述第一音頻信號；

向所述客戶端發送所述混音音頻信號，以使所述客戶端進行播放；

所述從所述全混音音頻信號中，過濾來自所述客戶端的經過全混音處理后的所述第一音頻信號，得到所述客戶端對應的所述混音音頻信號，包括：

分別對所述全混音音頻信號和所述客戶端的第一音頻信號進行短時傅里葉變換，得到所述全混音音頻信號的第一功率譜和所述第一音頻信號的第二功率譜；

根據所述客戶端的增益系數、所述第一功率譜和所述第二功率譜，計算所述客戶端每個頻點上當前幀的濾波系數；

根據每個頻點上當前幀的濾波系數，對所述第二功率譜進行平滑濾波，得到第三功率譜；

對所述第三功率譜進行反傅里葉變換，得到所述客戶端的所述混音音頻信號；

所述對接收到的所述第一音頻信號進行全混音處理之前，還包括：

對所述第一音頻信號進行解碼處理，得到解碼后的所述第一音頻信號；

所述向所述客戶端發送所述混音音頻信號，包括：

將所述混音音頻信號進行編碼，得到混音音頻編碼信號發送給所述客戶端。

2.根據權利要求1所述的方法，其特征在于，所述第一音頻信號攜帶標識信息；所述標識信息包括所述客戶端的標識碼和所述第一音頻信號所對應的幀序列號；

則所述接收各客戶端發送的第一音頻信號之后，還包括：

緩存各客戶端的所述第一音頻信號；

所述從所述全混音音頻信號中，過濾來自所述客戶端的經過全混音處理后的所述第一音頻信號之前，還包括：

根據所述標識信息，從緩存區內獲取所述客戶端對應的所述第一音頻信號。

3.根據權利要求1所述的方法，其特征在于，所述對接收到的所述第一音頻信號進行全混音處理，得到全混音音頻信號，包括：

對所有客戶端的所述第一音頻信號進行防破音和線性疊加處理，得到所述全混音音頻信號；或者，

獲取每個客戶端上所述第一音頻信號的信號特征；

根據所述信號特征，從所有的所述第一音頻信號中選取出參與全混音處理的目標第一音頻信號；

對選取出的所有的所述目標第一音頻信號進行防破音和線性疊加處理，得到所述全混音音頻信號。

4.根據權利要求3所述的方法，其特征在于，所述進行防破音和線性疊加處理，包括：

獲取參與全混音處理的每個客戶端的增益系數；

將所述增益系數與對應客戶端上的所述第一音頻信號相乘，并將相乘后的結果進行線性疊加。

5.根據權利要求4所述的方法，其特征在于，所述獲取參與全混音處理的每個客戶端的增益系數，包括：

獲取參與全混音處理的客戶端的個數，根據所述客戶端的個數確定每個參與全混音處理的客戶端的所述增益系數。

6.根據權利要求1所述的方法，其特征在于，所述根據所述客戶端的增益系數、所述第一功率譜和所述第二功率譜，計算所述客戶端每個頻點上當前幀的濾波系數，包括：

針對所述客戶端的每個頻點，獲取所述頻點的前一幀的濾波系數；

計算所述第二功率譜在所述頻點上的功率值與所述第一功率譜在所述頻點上功率值的第一比值；

根據所述第一比值和所述增益系數，計算得到所述頻點的當前幀過濾濾波系數；

根據預設的平滑系數和所述過濾濾波系數，對所述前一幀濾波系數進行平滑處理，得到所述當前幀最終的所述濾波系數。