[發明專利]視頻通信方法、裝置、系統、服務器、客戶端及存儲介質

有效

• 申請號: 201910493087.3
• 申請日: 2019-06-06
• 公開（公告）號: CN112055165B
• 公開（公告）日: 2022-06-03
• 發明（設計）人: 王興鶴;辛安民;陳杰
• 申請（專利權）人: 杭州?？低晹底旨夹g股份有限公司
• 主分類號: H04N7/15
• 分類號: H04N7/15;H04N19/146;H04N21/2662;H04N21/2343
• 代理公司: 北京柏杉松知識產權代理事務所(普通合伙) 11413
• 代理人: 李欣;丁蕓

1.一種視頻通信系統，其特征在于，所述系統包括：

服務器及多個客戶端；

所述客戶端用于，向所述服務器發送視頻流和/或音頻流，其中，所述視頻流包括主視頻流和/或輔視頻流，所述輔視頻流為操作演示的視頻流；

所述服務器用于，獲取各所述客戶端發送的數據流；按照當前服務模式與預測輸出碼率的對應關系，分別確定針對各所述客戶端的預測輸出碼率；按照所述當前服務模式與目標視頻碼率的對應關系，根據各所述預測輸出碼率，確定目標視頻碼率；按照所述目標視頻碼率對各所述客戶端的數據流進行合并及編碼，得到合成后的數據流；確定所述當前的服務模式對應的目標抗丟包算法及目標碼流平滑算法，按照所述目標抗丟包算法及所述目標碼流平滑算法，分別向各所述客戶端發送所述合成后的數據流，其中，所述服務模式包括實時優先模式及流暢優先模式；所述實時優先模式對應的碼流平滑算法的最大抖動延時閾值，小于所述流暢優先模式對應的碼流平滑算法的最大抖動延時閾值；所述實時優先模式對應的帶寬預測算法的靈敏度，大于所述流暢優先模式對應的帶寬預測算法的靈敏度；所述實時優先模式對應的抗丟包算法中丟包重傳NACK的最大重傳次數，小于所述流暢優先模式對應的抗丟包算法中NACK的最大重傳次數。

2.根據權利要求1所述的系統，其特征在于，所述按照當前服務模式與預測輸出碼率的對應關系，分別確定針對各所述客戶端的預測輸出碼率，包括：

確定當前服務模式對應的目標帶寬預測算法，利用所述目標帶寬預測算法，分別計算針對各所述客戶端的預測輸出碼率；

所述按照所述當前服務模式與目標視頻碼率的對應關系，根據各所述預測輸出碼率，確定目標視頻碼率，包括：

確定所述當前服務模式對應的目標碼率分配算法，按照各所述客戶端的預測輸出碼率，利用所述目標碼率分配算法，確定的目標視頻碼率。

3.根據權利要求2所述的系統，其特征在于，在所述當前的服務模式為所述實時優先模式時，所述目標抗丟包算法包括NACK及幀內向前糾錯FEC算法；所述按照各所述客戶端的預測輸出碼率，利用所述目標碼率分配算法，確定的目標視頻碼率，包括：

按照各所述客戶端的預測輸出碼率，利用所述目標碼率分配算法，分別確定各所述客戶端對應的NACK重傳碼率的最大值、幀內FEC碼率的最大值及視頻碼率；

在各所述客戶端的視頻碼率中，選取最小的視頻碼率，得到目標視頻碼率。

4.根據權利要求3所述的系統，其特征在于，所述服務器還用于：在所述當前的服務模式為所述實時優先模式時，當與指定客戶端的往返時延大于預設時延閾值時，將針對所述指定客戶端的NACK的最大重傳次數設置為零。

5.根據權利要求1所述的系統，其特征在于，在所述當前的服務模式為所述流暢優先模式時，所述流暢優先模式對應的目標抗丟包算法包括NACK及FEC算法，所述FEC算法包括幀內FEC算法及跨幀FEC算法；所述按照各所述客戶端的預測輸出碼率，利用所述目標碼率分配算法，確定的目標視頻碼率，包括：

按照各所述客戶端的預測輸出碼率，利用所述目標碼率分配算法，分別確定各所述客戶端對應的NACK重傳碼率的最大值、FEC碼率的最大值及視頻碼率；

計算各所述客戶端的視頻碼率的平均值，得到目標視頻碼率。

6.根據權利要求1所述的系統，其特征在于，所述客戶端具體用于：

按照當前服務模式與預測輸出碼率的對應關系，確定針對所述服務器的預測輸出碼率；

按照所述當前服務模式與目標視頻碼率的對應關系，根據各所述預測輸出碼率，確定目標視頻碼率；

按照所述目標視頻碼率，分別對主視頻流及音頻流進行編碼，或分別對主視頻流、輔視頻流及音頻流進行編碼，得到各路編碼后的碼流；

向所述服務器發送各所述編碼后的碼流。