[發明專利]一種多路視頻的智能混屏方法和系統

有效

• 申請號: 202010886788.6
• 申請日: 2020-08-28
• 公開（公告）號: CN111970474B
• 公開（公告）日: 2022-06-21
• 發明（設計）人: 陳威;孫昌勛
• 申請（專利權）人: 北京容聯易通信息技術有限公司
• 主分類號: H04N7/15
• 分類號: H04N7/15;H04N5/265;H04N5/262;G06V40/16
• 代理公司: 北京天達知識產權代理事務所(普通合伙) 11386
• 代理人: 馬東偉

1.一種多路視頻的智能混屏方法，其特征在于，包括以下步驟：

創建一個混屏容器，加入待混屏的多路視頻，并通過所述混屏容器為每路視頻配置相應的解碼資源和人像識別資源；

接收所述待混屏的多路視頻后，利用所述解碼資源分別對相應的每路視頻一一解碼，并采用所述人像識別資源對每路解碼后的視頻進行人像識別，并根據人像識別結果計算出每路視頻中的人像位置；

對所述創建的混屏容器設置對應參數不同的輸出的多個容器布局，并根據輸出規格和輸入視頻路數進行平面的均勻分布劃分得到混屏顯示時每路視頻的布局位置；其中，每個參數不同的輸出對應一個布局位置，所述參數包括輸入視頻路數、編碼類型和輸出規格；

根據所述人像位置和所述布局位置計算并優化裁剪位置，并根據所述裁剪位置將裁剪后的多路視頻送入混屏容器，再經編碼后發送至遠端；

根據所述人像位置和所述布局位置計算并優化裁剪位置包括：當任一路視頻的人像位置改變后，重新計算該路視頻的人像位置；

若所述人像位置仍在前次計算的布局位置范圍內時，不改變裁剪位置仍對標所述布局位置；

若所述人像位置超出前次計算的布局位置范圍時，調整裁剪位置以適配所述布局位置。

2.根據權利要求1所述的方法，其特征在于，創建一個混屏容器時，分配混屏容器資源，包括cpu和內存。

3.根據權利要求1所述的方法，其特征在于，所述混屏容器加入待混屏的多路視頻時，設置包括視頻路數和解碼類型在內的參數，并分配系統接收端的網絡端口，為每路視頻分配包括cpu和內存在內的解碼資源。

4.根據權利要求1所述的方法，其特征在于，對所述混屏容器設置多個參數不同的輸出時，設置包括視頻路數、編碼類型和輸出規格在內的參數，并分配遠端端口地址。

5.一種多路視頻的智能混屏系統，其特征在于，包括接收器、解碼器、計算器、混屏容器、編碼器和發送器；

所述混屏容器，用于加入待混頻的多路視頻，并為每路視頻配置相應的解碼資源和人像識別資源；還用于對所述混屏容器設置對應參數不同的輸出的多個容器布局，并根據輸出規格和輸入視頻路數進行平面的均勻分布劃分得到混屏顯示時每路視頻的布局位置；其中，每個參數不同的輸出對應一個布局位置，所述參數包括輸入視頻路數、編碼類型和輸出規格；

所述接收器，用于所述混屏容器加入待混頻的多路視頻后，接收所述待混屏的多路視頻；

所述解碼器，用于利用所述解碼資源分別對相應的每路視頻進行一一解碼；

所述計算器，用于采用所述人像識別資源對每路解碼后的視頻進行人像識別，并根據人像識別結果計算出每路視頻中的人像位置；還用于根據所述人像位置和所述布局位置計算并優化裁剪位置，并根據所述裁剪位置將裁剪后的多路視頻送入所述混屏容器；

所述編碼器，用于對混屏后的多路視頻進行編碼，并輸送給連接遠端的發送器。

6.根據權利要求5所述的系統，其特征在于，根據所述人像位置和所述布局位置計算并優化裁剪位置包括：當任一路視頻的人像位置改變后，重新計算該路視頻的人像位置；

若所述人像位置仍在前次計算的布局位置范圍內時，不改變裁剪位置仍對標所述布局位置；

若所述人像位置超出前次計算的布局位置范圍時，調整裁剪位置以適配所述布局位置。

7.根據權利要求5所述的系統，其特征在于，對所述混屏容器分配混屏容器資源，包括cpu和內存。

8.根據權利要求5所述的系統，其特征在于，所述混屏容器加入待混屏的多路視頻時，設置包括視頻路數和解碼類型在內的參數，并分配所述接收器的網絡端口，為每路視頻分配包括cpu和內存在內的解碼資源。

9.根據權利要求5所述的系統，其特征在于，對所述混屏容器設置多個參數不同的輸出時，設置包括視頻路數、編碼類型和輸出規格在內的參數，并分配所述發送器連接的遠端端口地址。