[發明專利]一種全景視頻拼接方法、電子設備及存儲介質

有效

• 申請號: 202110520302.1
• 申請日: 2021-05-13
• 公開（公告）號: CN113256492B
• 公開（公告）日: 2023-09-12
• 發明（設計）人: 宓超;馬逸銘;黃世鳳;沈天行;劉熠;陳蘊菲;楊菊;倪昭鑫
• 申請（專利權）人: 上海海事大學
• 主分類號: G06T3/40
• 分類號: G06T3/40;G06V10/44;G06N3/04;G06N3/08
• 代理公司: 上海元好知識產權代理有限公司 31323
• 代理人: 張雙紅;曹媛

本發明公開了一種全景視頻拼接方法、電子設備及存儲介質，其用于對高速公路服務區的視頻進行拼接，所述包括：獲取多個待拼接的背景圖像和待拼接的視頻；對多個所述待拼接的背景圖像進行預拼接處理，得到預拼接的背景圖像；對所述待拼接的視頻與所述預拼接的背景圖像進行實時視頻拼接處理，得到所述高速公路服務區的全景視頻。本發明能夠提高拼接的精度和速度。

技術領域

本發明涉及視頻圖像處理技術領域，特別涉及一種全景視頻拼接方法、電子設備及存儲介質。

背景技術

高速公路服務區是在高速公路沿線按適當間距設置的專為駕乘人員提供休息，為車輛提供加油維護和修理等服務的場所。隨著高速公路的建設，作為高速公路配套服務設施的高速公路服務區的發展也應當引起相應的重視。為了高速公路服務區能更好地服務于駕乘人員，對于服務區內的車輛、人員、設施等的監控是非常有必要的。

高速公路服務區通常包含停車場、公共廁所、加油站、車輛修理所、餐飲與小賣部等設施。目前絕大部分的高速公路服務區采用分別對每個區域進行監控的模式，這樣一來對于服務區內的整體情況缺乏直觀的感受，也無法對服務區內的車輛與人員情況進行統計，對高速公路服務區進行全景拍攝是解決上述問題的一個有效措施。但是單個攝像頭視野有限，無法實現全景的拍攝，需要采用圖像拼接技術將多個攝像頭拍攝的有重疊區域的圖像拼接成視野更大、清晰度更高的畫面。但是傳統的視頻拼接算法由于對圖片的內容事先一無所知，所以需要大量的計算去計算每一幀的圖片，最后變成視頻，由此導致拼接速度減慢的問題。

發明內容

本發明的目的在于提供一種全景視頻拼接方法、電子設備及存儲介質，以解決全景視頻拼接速度減慢的問題。

為了實現以上目的，本發明通過以下技術方案實現：

一種全景視頻拼接方法，其用于對高速公路服務區的視頻進行拼接，包括：

步驟S1、獲取多個待拼接的背景圖像和待拼接的視頻；

步驟S2、對多個所述待拼接的背景圖像進行預拼接處理，得到預拼接的背景圖像；

步驟S3、對所述待拼接的視頻與所述預拼接的背景圖像進行實時視頻拼接處理，得到所述高速公路服務區的全景視頻。

優選地，所述步驟S2包括：

步驟S2.1、對每一所述待拼接的背景圖像進行預處理，得到第一高斯金字塔；

步驟S2.2、判斷所述第一高斯金字塔中的每一層圖像中的每一個像素點是否為特征點，若是，得到該特征點在對應的所述待拼接的背景圖像中的位置；若否，則跳過此像素點，并對下一個像素點進行判斷，直至判斷完所有像素點；

步驟S2.3、對所述第一高斯金字塔中每一層的圖像進行積分平滑處理；

步驟S2.4、在第k個特征點P_ck的周圍31×31的鄰域內，隨機選取256對像素點(X_i,Y_i)，i∈[1,···,256]；

步驟S2.5、根據第k個特征點P_ck對應的向量計算出對應的主方向角度θ_k和旋轉矩陣R_θk，根據所述主方向角度θ_k和旋轉矩陣R_θk對特征點P_ck所處的鄰域進行旋轉；

步驟S2.6、對于旋轉后的第i對像素點中的X_i像素點和Y_i像素點分別取一個5×5的高斯窗口，并將所述5×5的高斯窗口中心分別對準旋轉后的X_i像素點和Y_i像素點進行加權求和；