[發明專利]一種全景視頻融合方法及裝置

有效

• 申請號: 201611176064.2
• 申請日: 2016-12-16
• 公開（公告）號: CN108205797B
• 公開（公告）日: 2021-05-11
• 發明（設計）人: 張欣;林耀冬;陳杰
• 申請（專利權）人: 杭州海康威視數字技術股份有限公司
• 主分類號: G06T3/00
• 分類號: G06T3/00;G06T3/40
• 代理公司: 北京國昊天誠知識產權代理有限公司 11315
• 代理人: 許志勇

本發明涉及圖像處理技術領域，尤其涉及一種全景視頻融合方法及裝置，用以解決采用拼接方式形成的全景視頻圖像中全景視頻圖像不完整的問題。獲取全景視頻圖像，該全景視頻圖像根據至少兩個長方體三維圖像拼接形成；從所述至少兩個長方體三維圖像中提取運動目標；對全景視頻圖像和運動目標進行圖像融合處理，形成融合有運動目標的全景視頻圖像。從而，避免了采用長方體三維模型生成的全景視頻圖像中運動目標全部或部分消失以及重疊等問題，保證了全景視頻圖像的完整性，提升了全景視頻圖像的品質。

技術領域

本申請涉及圖像處理技術領域，尤其涉及一種全景視頻融合方法及裝置。

背景技術

隨著圖像處理技術的快速發展，全景視頻越來越多的應用在各個領域。全景視頻圖像是利用攝像頭從不同角度對預設場景進行拍攝，之后將拍攝得到的視頻圖像進行拼接，形成該預設場景的全景視頻圖像。全景視頻圖像可以讓觀賞者通過一幅視頻圖像方便地瀏覽該預設場景的全部角度的場景。

由于將多個視頻圖像拼接生成全景視頻圖像，需要利用長方體三維模型先將多個視頻圖像轉化為多個長方體三維圖像，在拼接這些長方體三維圖像時，相鄰長方體三維圖像的拼接貼合面會被裁減掉，因此，拼接貼合面上的圖像也會被裁減掉，這樣，融合后的全景視頻圖像中，運動目標移動到拼接貼合面時的圖像被裁減掉了，進而導致運動目標在經過拼接處時或者到達拼接處附近時消失。

具體地，參照圖1所示，為相關技術中運動目標顯示異常的簡單示意圖；該圖1中，簡單示出具有一定高度的人形作為運動目標，該運動目標由左至右在預設場景(該預設場景包含魚眼1號和魚眼1號分別所在的兩個局部空間)中行走，當運動目標行走至A點，魚眼1號和魚眼2號分別采集相應的視頻圖像，虛線表示從各自魚眼攝像頭所在位置獲取運動目標的采集視線的邊界，此時通過進一步分析可知，在魚眼1號的采集視線中，運動目標的投影均位于地板上，如圖中黑色粗線段表示；在魚眼2號的采集視線中，運動目標的投影均位于拼接處上，如圖中黑色粗線段表示。當運動目標行走至B點，在魚眼1號的采集視線中，運動目標的投影部分位于地板上，部分位于拼接處，如圖中黑色粗線段表示；在魚眼2號的采集視線中，運動目標的投影位于拼接處，如圖中黑色粗線段表示。由此可知，在將兩個局部空間的視頻圖像進行拼接時，拼接處的視頻圖像會被剪裁掉，從而，導致位于預設拼接區域的運動目標消失，使得生成的全景視頻圖像不完整。

發明內容

本申請實施例提供一種全景視頻融合方法，用以解決采用拼接方式形成的全景視頻圖像中全景視頻圖像不完整的問題。

本申請實施例還提供一種全景視頻融合裝置，用以解決采用拼接方式形成的全景視頻圖像中全景視頻圖像不完整的問題。

本申請實施例采用下述技術方案：

一種全景視頻融合方法，包括：

獲取全景視頻圖像，其中，所述全景視頻圖像根據至少兩個長方體三維圖像拼接形成；

從所述至少兩個長方體三維圖像中提取運動目標；

對所述全景視頻圖像和所述運動目標進行圖像融合處理，形成融合有運動目標的全景視頻圖像。

通過上述技術方案，針對采用長方體三維模型生成的全景視頻圖像，從生成全景視頻圖像時采用的長方體三維圖像中提取運動目標，之后，將該運動目標融合到全景視頻圖像中，從而，避免了由于采用長方體三維模型生成的全景視頻圖像而導致運動目標顯示異常的問題，保證了全景視頻圖像的畫面完整性。

可選地，從所述至少兩個長方體三維圖像中提取運動目標，具體包括：

當檢測到所述全景視頻圖像中有運動目標在拼接區域顯示異常時，從所述至少兩個長方體三維圖像中提取所述運動目標。

通過該方案可以針對性地提取存在異常的運動目標，而不對正常顯示的運動目標進行額外處理，提升了提取的效率及準確性，且降低了提取的繁瑣性。