[發明專利]音頻數據處理方法、設備、會議系統及存儲介質

有效

• 申請號: 202010981837.4
• 申請日: 2020-09-17
• 公開（公告）號: CN112055166B
• 公開（公告）日: 2022-05-20
• 發明（設計）人: 郭少鵬;張麗;袁東升
• 申請（專利權）人: 杭州海康威視數字技術股份有限公司
• 主分類號: H04N7/15
• 分類號: H04N7/15;H04N21/2343;H04N21/4402
• 代理公司: 北京同立鈞成知識產權代理有限公司 11205
• 代理人: 張娜;臧建明

1.一種音頻數據處理方法，其特征在于，包括：

獲取至少一路第一音頻數據，其中，所述第一音頻數據來自發言者的會議終端；

對所述至少一路第一音頻數據進行混音處理，并將混音處理后的音頻數據編碼為至少一路第二音頻數據；其中，每路第二音頻數據的音頻格式互不相同，且每路第二音頻數據分別為目標音頻格式中的一種；

分別向各未發言者的會議終端發送與其所使用的音頻格式相同的一路第二音頻數據；

針對每路第一音頻數據，將所述至少一路第一音頻數據中，除該路第一音頻數據之外的其他路第一音頻數據進行混音處理，并將混音處理后的音頻數據編碼為一路第三音頻數據；

針對每路第一音頻數據，將其對應的一路第三音頻數據發送給該路第一音頻數據所來自的會議終端；每路第三音頻數據關聯一個第一類通道標識，所述第一類通道標識用于指示該路第三音頻數據所對應的第一音頻數據所來自的會議終端；每個第一類通道標識具有一個通道計數標記；

所述方法，還包括：

在當前幀待分發碼流存在與該第一類通道標識關聯的第三音頻數據時，將該第一類通道標識具有的通道計數標記賦值為預設幀數門限；在當前幀待分發碼流不存在與該第一類通道標識關聯的第三音頻數據時，將該第一類通道標識具有的通道計數標記減去預設數值；

將具有的通道計數標記不大于預設門限值的第一類通道標識所指示的會議終端，確定為未發言者的會議終端。

2.根據權利要求1所述的方法，其特征在于，所述目標音頻格式包括下述任一項：

會議所支持的音頻格式；

所有參與會議的會議終端所使用的音頻格式；

各未發言者的會議終端所使用的音頻格式。

3.根據權利要求1所述的方法，其特征在于，所述目標音頻格式包括各未發言者的會議終端所使用的音頻格式；將混音處理后的音頻數據編碼為至少一路第二音頻數據，包括：

確定所有參與會議的會議終端中，各未發言者的會議終端；

將各未發言者的會議終端所使用的音頻格式，確定為所述目標音頻格式；

針對每種目標音頻格式，將混音處理后的音頻數據分別編碼為一路該種目標音頻格式的第二音頻數據。

4.根據權利要求1所述的方法，其特征在于，每路第二音頻數據關聯一個第二類通道標識，其中，所述第二類通道標識用于指示該路第二音頻數據的音頻格式；

所述方法還包括：

獲取當前幀待分發碼流，所述待分發碼流包括至少一路待分發的第三音頻數據及其關聯的第一類通道標識，和/或至少一路待分發的第二音頻數據及其關聯的第二類通道標識；

針對每路第一音頻數據，將其對應的一路第三音頻數據發送給該路第一音頻數據所來自的會議終端，包括：

將所述至少一路待分發的第三音頻數據分發給其關聯的第一類通道標識所指示的會議終端；

分別向各未發言者的會議終端發送與其所使用的音頻格式相同的一路第二音頻數據，包括：

將所述至少一路待分發的第二音頻數據分發給目標會議終端，其中，所述目標會議終端為未發言者的會議終端中，所使用的音頻格式與該路待分發的第二音頻數據所關聯的第二類通道標識指示的音頻格式相同的會議終端。

5.根據權利要求1-3任一項所述的方法，其特征在于，獲取至少一路第一音頻數據，包括：

接收并解碼多個會議終端發送的多路音頻數據；

將所述多路音頻數據中音量最大的前預設路數的音頻數據，或者音量超過預設音量門限的音頻數據，確定為所述第一音頻數據。