[發明專利]一種音視頻同步播放系統的邊緣融合方法及其裝置

有效

• 申請號: 202011501339.1
• 申請日: 2020-12-17
• 公開（公告）號: CN112637488B
• 公開（公告）日: 2022-02-22
• 發明（設計）人: 楊培春
• 申請（專利權）人: 深圳市普匯智聯科技有限公司
• 主分類號: H04N5/232
• 分類號: H04N5/232;H04N9/31;H04N5/265;H04N5/268;H04N5/04;G06T3/40;G06T5/50
• 代理公司: 北京冠和權律師事務所 11399
• 代理人: 吳金水

本發明提出了一種音視頻同步播放系統的邊緣融合方法及其裝置，所述邊緣融合方法包括：控制多個攝像機獲取視頻范圍內的對應的視頻圖像，并將所述視頻圖像對應的數據流傳送至邊緣融合處理器進行邊緣融合，獲得邊緣融合處理后的全景視頻圖像；根據投影儀的數量對全景圖像進行分割，并利用所述投影儀對所述圖像進行對應投射；提取視頻對應的音頻數據，實時監控視頻和音頻播放進度，并根據進度進行視頻與音頻的一致性調整。所述裝置包括與所述方法的步驟對應的模塊。

技術領域

本發明提出了一種音視頻同步播放系統的邊緣融合方法及其裝置，屬于視頻處理技術領域。

背景技術

隨著科技發展，追求亮麗的超大畫面、純真的色彩、高分辨率的顯示效果，歷來是人們對視覺感受的一種潛在要求。對大畫面、多色彩、高亮度、高分辨率顯示效果的渴望越來越強烈，而傳統的電視墻、投影硬拼接屏和箱體拼接墻等有縫拼接方式缺乏畫面完整性與亮度色彩均勻性，很難滿足人們在這方面的要求。而最近迅速崛起的邊緣融合技術是近年來興起的一個新的無縫拼接技術，它更好的改善了拼接圖像的視覺效果，已經成為適應這一需求的最有效方式。邊緣融合技術就是將一組投影機投射出的畫面進行邊緣重疊，并通過融合技術顯示出一個沒有縫隙，更加明亮、超大、高分辨率的整幅畫面，畫面的效果就好像是一臺投影機投射的畫質。當兩臺或多臺投影機組合投射一幅兩面時，會有一部分影像燈光重疊，邊緣融合的最主要功能就是把兩臺投影機重疊部分的燈光進行漸變調整，使重疊區的亮度對比度與周邊圖像一致，從而使整副畫面完整統一，絲毫看不出是多臺投影機拼接的結果。但是，現有的這對視頻播放的邊緣融合過程中，常出現重疊區域達不到標準而導致的投影成像效果不佳的問題，以及音頻視頻播放不同步的問題。

發明內容

本發明提供了一種音視頻同步播放系統的邊緣融合方法及其裝置，用以解決重疊區域達不到標準而導致的投影成像效果不佳，以及音頻視頻播放不同步的問題：

本發明提出的一種音視頻同步播放系統的邊緣融合方法，所述邊緣融合方法包括：

控制多個攝像機獲取視頻范圍內的對應的視頻圖像，并將所述視頻圖像對應的數據流傳送至邊緣融合處理器進行邊緣融合，獲得邊緣融合處理后的全景視頻圖像；

根據投影儀的數量對全景圖像進行分割，并利用所述投影儀對所述圖像進行對應投射；

提取視頻對應的音頻數據，實時監控視頻和音頻播放進度，并根據進度進行視頻與音頻的一致性調整。

進一步地，所述根據投影儀的數量對全景圖像進行分割，并利用所述投影儀對所述圖像進行對應投射，包括：

根據投影儀的數量確定所要獲得的分割圖像塊的數量，所述分割圖像塊的數量與所述投影儀的數量一致；

根據分割圖像塊的比例和個數確定相鄰兩個投影儀之間的重疊區域范圍；

根據所述分割圖像塊的個數和重疊區域對所述全景圖像進行分割，獲得對應的分割圖像塊；通過邊緣融合處理器對每相鄰的兩個分割圖像塊的邊緣部分進行圖像融合處理，獲得邊緣融合處理后的分割圖像塊；

利用所述重疊區域范圍調整每相鄰兩個投影儀之間的距離和夾角，使投影儀投射出的各分割圖像塊之間的重疊部分與所述重疊區域范圍一致；

將邊緣融合處理后的分割圖像塊發送至對應的投影儀進行投射。

進一步地，通過如下公式獲取相鄰兩個投影儀之間的重疊區域范圍：

其中，S_c不表示重疊區域范圍的面積；S_f表示分割圖像塊的面積，S表示全景圖像對應的面積，D表示分割圖像塊的寬度；L表示分割圖像塊的長度；λ表示面積調整系數，所述面積調整系數的取值范圍為0.78-0.87，其中，優選為0.81。