[發明專利]一種視頻拼接方法及裝置

在審

• 申請號: 201611145816.9
• 申請日: 2016-12-13
• 公開（公告）號: CN106851130A
• 公開（公告）日: 2017-06-13
• 發明（設計）人: 馬茜
• 申請（專利權）人: 北京搜狐新媒體信息技術有限公司
• 主分類號: H04N5/265
• 分類號: H04N5/265;G06T3/00;G06T3/40
• 代理公司: 北京集佳知識產權代理有限公司11227
• 代理人: 王雪,王寶筠

技術領域

本發明涉及數據處理領域，具體涉及一種視頻拼接方法及裝置。

背景技術

隨著虛擬現實應用的熱度不斷升溫，人們對于全景視頻圖像的需求越來越多。然而由于采集設備的硬件限制，在使用普通相機來獲取寬視野的場景圖像時，必須調節相機焦距，通過縮放鏡頭以得到完整的場景，但是由于相機的分辨率一定，因此拍攝的場景越大，我們得到的圖像分辨率密度就越低。對于一些超大尺寸的場景或者物體，即使我們調整焦距也無法用一張照片采集得到。于是，為了獲取高分辨率的大廣角的場景需要將不同角度成像的圖像進行平滑無縫的拼接融合。

視頻拼接技術在民用、遙感、探測、虛擬現實、視頻檢索等方面都有著廣泛的應用前景，目前國內外對視頻拼接的方法展開了諸多研究，但是在快速性、準確性方面仍然不能滿足實際應用的需求。

發明內容

為解決上述問題，本發明提供了一種視頻拼接方法及裝置，能夠在快速性、準確性方面對視頻拼接進行保障。

本發明提供了一種視頻拼接方法，所述方法包括：

將多視點視頻組進行同步，并按照視頻內容空間順序進行排序；

提取所述多視點視頻組的任意同時刻的一組圖像，作為第一圖像組；

分別將所述第一圖像組中相鄰的兩張圖像進行特征點的提取與匹配，得到所述第一圖像組中各個圖像的投影變換矩陣；

依據所述第一圖像組中各個圖像的投影變換矩陣，分別對所述多視點視頻組中的各個圖像進行投影變換；

分別對所述多視點視頻組中同時刻的相鄰的圖像進行融合拼接，完成對所述多視點視頻組的視頻拼接。

優選地，所述分別將所述第一圖像組中相鄰的兩張圖像進行特征點的提取與匹配，得到所述第一圖像組中各個圖像的投影變換矩陣之前，還包括：

根據拍攝所述多視點視頻組中的各個視頻的相機參數信息，確定所述第一圖像組中各個圖像是否屬于魚眼圖像；

將所述第一圖像組中屬于魚眼圖像的圖像進行魚眼圖像校正。

優選地，所述方法還包括：

對所述第一圖像組中的各個圖像進行圖像色彩校正，并生成各個圖像對應的色彩校正參數。

優選地，所述依據所述第一圖像組中各個圖像的投影變換矩陣，分別對所述多視點視頻組中的各個圖像進行投影變換之前，還包括：

根據拍攝所述多視點視頻組中的各個視頻的相機參數信息，確定所述多視點視頻組中各個視頻中的圖像是否屬于魚眼圖像；

將所述多視點視頻組中的各個視頻中屬于魚眼圖像的圖像進行魚眼圖像校正。

優選地，所述方法還包括：

根據所述第一圖像組中的各個圖像對應的色彩校正參數，對所述多視點視頻組中對應的視頻中的圖像進行圖像色彩校正。

優選地，所述方法還包括：

判斷經過圖像色彩校正的所述多視點視頻組中的各個圖像的色彩誤差是否高于閾值；

重新對高于所述閾值的圖像進行圖像色彩校正，并生成色彩校正參數；

利用所述色彩校正參數，更新所述第一圖像組中對應的圖像的色彩校正參數。

本發明還提供了一種視頻拼接裝置，所述裝置包括：

同步排序模塊，用于將多視點視頻組進行同步，并按照視頻內容空間順序進行排序；

提取模塊，用于提取所述多視點視頻組的任意同時刻的一組圖像，作為第一圖像組；

提取匹配模塊，用于分別將所述第一圖像組中相鄰的兩張圖像進行特征點 的提取與匹配，得到所述第一圖像組中各個圖像的投影變換矩陣；

投影變換模塊，用于依據所述第一圖像組中各個圖像的投影變換矩陣，分別對所述多視點視頻組中的各個圖像進行投影變換；

融合拼接模塊，用于分別對所述多視點視頻組中同時刻的相鄰的圖像進行融合拼接，完成對所述多視點視頻組的視頻拼接。

優選地，所述裝置還包括：

第一確定模塊，用于根據拍攝所述多視點視頻組中的各個視頻的相機參數信息，確定所述第一圖像組中各個圖像是否屬于魚眼圖像；

第一魚眼矯正模塊，用于將所述第一圖像組中屬于魚眼圖像的圖像進行魚眼圖像校正。

優選地，所述裝置還包括：

第一色彩校正模塊，用于對所述第一圖像組中的各個圖像進行圖像色彩校正，并生成各個圖像對應的色彩校正參數。

優選地，所述裝置還包括：

第二確定模塊，用于根據拍攝所述多視點視頻組中的各個視頻的相機參數信息，確定所述多視點視頻組中各個視頻中的圖像是否屬于魚眼圖像；