[發明專利]一種視頻混流方法、視頻系統及服務器

在審

• 申請號: 202011378940.6
• 申請日: 2020-11-30
• 公開（公告）號: CN112532913A
• 公開（公告）日: 2021-03-19
• 發明（設計）人: 林正顯
• 申請（專利權）人: 廣州虎牙科技有限公司
• 主分類號: H04N7/15
• 分類號: H04N7/15
• 代理公司: 北京博思佳知識產權代理有限公司 11415
• 代理人: 王茹

1.一種視頻混流方法，應用于服務器，所述服務器與至少兩個客戶端連接，其特征在于，所述方法包括：

接收至少兩個客戶端發送的視頻流，所述視頻流中攜帶與所述客戶端對應的標識信息以及第一視頻圖像；

將所接收到的至少兩路視頻流進行混流處理，得到混合視頻流；

基于所述第一視頻圖像在所述混合視頻流的視頻畫面中的顯示位置，確定所述顯示位置與所述標識信息的關聯信息；

將所述混合視頻流與所述關聯信息下發至與所述標識信息對應的客戶端，以使所述客戶端基于所述關聯信息，在所述混合視頻流的視頻畫面中查找與所述標識信息相應的第一目標顯示位置，并在所述第一目標顯示位置上將所述第一視頻圖像替換為實時采集的第二視頻圖像。

2.根據權利要求1所述的方法，其特征在于，所述方法還包括：

接收客戶端發送的音頻流，所述音頻流攜帶所述標識信息；

向所述至少兩個客戶端下發所述音頻流，以使所述客戶端基于所述關聯信息，在所述混合視頻流的視頻畫面中查找所述音頻流所攜帶的標識信息對應的第二目標顯示位置，并在所述第二目標顯示位置的區域內添加音頻圖標。

3.根據權利要求1所述的方法，其特征在于，所述服務器還與其他服務器連接，所述方法還包括：

接收其他服務器發送的混合視頻流；

將所述混合視頻流與所述關聯信息以及其他服務器發送的混合視頻流下發至與所述標識信息對應的客戶端；

所述客戶端查找所述第一目標顯示位置之前，還包括：

將接收到的所有混合視頻流的視頻畫面進行合并，得到合并視頻畫面，并確定所有混合視頻流的視頻畫面在所述合并視頻畫面中的顯示位置。

4.根據權利要求3所述的方法，其特征在于，所述其他服務器發送的混合視頻流還攜帶有：

其他客戶端的第一視頻圖像在混合視頻流的視頻畫面中的顯示位置與其他客戶端對應的標識信息的關聯信息；

所述關聯信息還攜帶流標識，所述流標識用于標識生成所述混合視頻流的服務器；

所述客戶端查找所述第一目標顯示位置之前，還包括：

根據所述流標識查找對應的關聯信息。

5.一種視頻混流方法，應用于客戶端，其特征在于，所述方法包括：

采集第一視頻圖像；

向服務器上傳視頻流，所述視頻流攜帶與所述客戶端對應的標識信息以及第一視頻圖像，以使所述服務器將至少兩個客戶端采集的視頻流進行混流處理，得到混合視頻流；并基于所述第一視頻圖像在所述混合視頻流的視頻畫面中的顯示位置，確定所述顯示位置與所述標識信息的關聯信息；

接收所述服務器下發的所述混合視頻流與所述關聯信息；

基于所述關聯信息，在所述混合視頻流的視頻畫面中查找與所述標識信息相應的第一目標顯示位置；

將所述第一目標顯示位置上的第一視頻圖像替換為實時采集的第二視頻圖像。

6.根據權利要求5所述的方法，其特征在于，所述方法還包括：

接收所述服務器下發的音頻流，所述音頻流攜帶所述標識信息；

基于所述關聯信息，在所述混合視頻流的視頻畫面中查找所述音頻流所攜帶的標識信息對應的第二目標顯示位置，并在所述第二目標顯示位置的區域內添加音頻圖標。

7.根據權利要求6所述的方法，其特征在于，所述接收所述服務器下發的音頻流前，還包括：

在確定本端客戶端為發言方的情況下，向所述服務器上傳音頻流，所述音頻流攜帶所述標識信息。

8.根據權利要求5所述的方法，其特征在于，所述服務器還與其他服務器連接，并接收其他服務器發送的混合視頻流；所述方法還包括：

接收所述服務器下發的來自其他服務器的混合視頻流，

查找所述第一目標顯示位置之前，還包括：

將所有接收到的混合視頻流的視頻畫面進行合并，得到合并視頻畫面；

確定所有混合視頻流的視頻畫面在所述合并視頻畫面中的顯示位置。