[發明專利]對網絡視頻流圖像拼接的方法和裝置

在審

• 申請號: 202010091946.9
• 申請日: 2020-02-13
• 公開（公告）號: CN111277896A
• 公開（公告）日: 2020-06-12
• 發明（設計）人: 張鵬程;樊治國;黃惠南;陳忠平
• 申請（專利權）人: 上海高重信息科技有限公司
• 主分類號: H04N21/4402
• 分類號: H04N21/4402;H04N21/44;H04N21/8547
• 代理公司: 北京卓唐知識產權代理有限公司 11541
• 代理人: 卜榮麗

本發明提供一種對網絡視頻流圖像拼接的方法和裝置，該方法包括：獲取至少兩路網絡視頻流信息，并基于網絡視頻流信息創建幀數據的各緩沖隊列；其中，各緩沖隊列內存儲至少一幀圖像；對至少兩路網絡視頻流信息內的幀數據進行并行解碼；獲取解碼后的幀圖像時間戳；根據幀圖像時間戳與時間戳權重系數，確定各路網絡視頻流信息之間是否存在同步；若同步，則將同步對應的網絡視頻流信息進行圖像拼接。本發明通過對獲取的網絡視頻流信息進行解碼以及將獲取的時間戳與時間戳權重系數進行比較，進而確定網絡視頻流之間是否存在同步情況，進而將同步網絡視頻流信息進行圖像的拼接，這樣使得拼接形成的圖像較為完整，減少了產生錯位和重影的概率。

技術領域

本發明涉及計算機技術領域，尤其涉及一種對網絡視頻流圖像拼接的方法和裝置。

背景技術

多路網絡視頻流圖像拼接是解決單路視頻流視角不足以覆蓋全景的一種方法，在一些機場、廣場、公園等需要全景視角的場景有著廣泛的需求。

在實際的場景中，多路網絡視頻流在傳輸的過程中，可能由于多種多樣的原因，使得視頻流解碼后的幀圖像，在時間軸的位置上并不一致，如果不加以判別，最終拼接形成的圖像可能產生錯位或重影，甚至有可能造成拼接失敗等問題。

發明內容

為了解決現有技術中視頻流解碼后的幀圖像，在時間軸的位置上不一致，導致拼接形成的圖像產生錯位或重影的問題，本發明提供一種對網絡視頻流圖像拼接的方法和裝置。

第一方面，本發明提供一種對網絡視頻流圖像拼接的方法，該方法包括：

獲取至少兩路網絡視頻流信息，并基于網絡視頻流信息創建幀數據的各緩沖隊列；其中，各緩沖隊列內存儲至少一幀圖像；

對至少兩路網絡視頻流信息內的幀數據進行并行解碼；

獲取解碼后的幀圖像時間戳；

根據幀圖像時間戳與時間戳權重系數，確定各路網絡視頻流信息之間是否存在同步；

若同步，則將同步對應的網絡視頻流信息進行圖像拼接。

進一步地，對至少兩路網絡視頻流信息內的幀數據進行并行解碼之后還包括：

將解碼后的幀圖像加入各緩沖隊列；

比較緩沖隊列內存儲幀數據的最大值與加入解碼后的幀圖像的各緩沖隊列的幀數據數值，確定是否丟棄當前幀圖像。

進一步地，根據幀圖像時間戳與時間戳權重系數，確定各路網絡視頻流信息之間是否存在同步包括：

獲取每次并行拉取各緩沖隊列中的幀圖像個數之和；

當幀圖像個數之和等于各緩沖隊列數量時，則對當前緩沖隊列中的幀數據進行解碼，進而獲得多個幀圖像時間戳；

獲取多個幀圖像時間戳與時間戳權重系數乘積的整數部分；

將存在整數部分數值相同的網絡視頻流信息確定為同步圖像，完成圖像拼接。

進一步地，該方法還包括：

獲取預設的每秒處理的幀數；

根據預設的每秒處理的幀數，確定時間戳權重系數。

第二方面，本發明提供一種對網絡視頻流圖像拼接的裝置，該裝置包括：

創建各緩沖隊列模塊，用于獲取至少兩路網絡視頻流信息，并基于網絡視頻流信息創建幀數據的各緩沖隊列；其中，各緩沖隊列內存儲至少一幀圖像；

并行解碼模塊，用于對至少兩路網絡視頻流信息內的幀數據進行并行解碼；

幀圖像時間戳獲取模塊，用于獲取解碼后的幀圖像時間戳；