[發明專利]一種對視頻中的背景畫面的擴充方法和設備

在審

• 申請號: 201810878137.5
• 申請日: 2018-08-03
• 公開（公告）號: CN109102459A
• 公開（公告）日: 2018-12-28
• 發明（設計）人: 胡事民;汪淼;楊國燁;林錦坤;楊國煒
• 申請（專利權）人: 清華大學
• 主分類號: G06T3/00
• 分類號: G06T3/00;G06T3/40;G06T5/50
• 代理公司: 北京路浩知識產權代理有限公司 11002
• 代理人: 王瑩;吳歡燕

本發明實施例提供一種對視頻中的背景畫面的擴充方法和設備，包括：將目標視頻的每幀視頻幀圖像按播放順序排列組成視頻圖像序列，根據視頻圖像序列確定背景圖像序列，并按照對應關系逐一對視頻幀圖像和對應的背景圖像進行配準和融合處理，以獲得每一視頻幀圖像對應的背景畫面擴充圖像，將每一視頻幀圖像對應的背景畫面擴充圖像作為背景畫面擴充后的視頻的一幀視頻幀圖像。本方法和設備無需在拍攝過程中按嚴格拍攝方式來獲取背景圖像，而是根據視頻圖像序在眾多的移動設備采集的視頻的視頻幀圖像中選擇滿足條件的背景圖像組成背景圖像序列，并通過視頻圖像序列和背景圖像序列來完成對視頻的畫面的擴充，從而克服了現有視頻畫面擴充技術的不足。

技術領域

本發明實施例涉及視頻圖像處理技術領域，更具體地，涉及一種對視頻中的背景畫面的擴充方法和設備。

背景技術

目前，隨著移動設備與社交網絡的快速發展，使用手機等移動設備拍攝視頻成為了常見的網絡媒體形式之一。然而，由于移動設備的局限性，移動設備上的視頻拍攝工具的視場有限，拍攝到的視頻中背景畫面所包含的場景信息往往達不到用戶的要求，在拍攝過程中，一些具有紀念意義的場景信息往往在視頻拍攝工具的視場所能覆蓋的背景畫面之外，這就要求需要對視頻中的背景畫面進行擴充。

在視頻畫面擴充領域，Agarwala等人在2005年提出了靜態相機拍攝視頻的畫面擴充技術；Perazzi等人在2015年提出了相對固定的相機矩陣在共同運動條件下的視頻畫面擴充技術，其中一個相機拍攝的是源視頻，其它相機拍攝的是輔助視頻，從輔助視頻中提取背景圖像來實現對源視頻中視頻幀圖像的畫面進行擴充。

然而，上述的視頻畫面擴充技術，均要求在拍攝過程中有嚴格拍攝方式來獲取背景圖像，以實現對源視頻中視頻幀圖像的畫面的擴充；而移動設備是以手持的方式拍攝視頻，在拍攝過程中難以按嚴格拍攝方式來獲取背景圖像，因此現有的視頻畫面擴充技術難以實現對通過移動設備拍攝的視頻的畫面的擴充。

發明內容

為了克服上述問題或者至少部分地解決上述問題，本發明實施例提供一種對視頻中的背景畫面的擴充方法和設備。

本發明實施例提供一種對視頻中的背景畫面的擴充方法，包括：將目標視頻的每幀視頻幀圖像按播放順序排列組成視頻圖像序列，根據視頻圖像序列確定背景圖像序列，以使背景圖像序列中的背景圖像按排列順序分別與目標視頻的視頻幀圖像相對應，其中，背景圖像序列中的背景圖像來自移動設備采集的視頻中的視頻幀圖像；對于任一視頻幀圖像，將所述任一視頻幀圖像作為目標視頻幀圖像，將目標視頻幀圖像相對應的背景圖像作為目標背景圖像，根據目標視頻幀圖像中的特征點和目標背景圖像中的特征點對目標視頻幀圖像和目標背景圖像進行配準處理，獲得目標配準圖像，確定目標配準圖像中目標視頻幀圖像和目標背景圖像之間的重疊區域；在目標配準圖像中將目標視頻幀圖像在重疊區域內的圖像元素與目標背景圖像在重疊區域內的圖像元素進行融合，將融合后的目標配準圖像作為目標視頻幀圖像對應的背景畫面擴充圖像；將每一視頻幀圖像對應的背景畫面擴充圖像作為背景畫面擴充后的視頻的一幀視頻幀圖像。

本發明實施例提供一種對視頻中的背景畫面的擴充設備，包括：至少一個處理器、至少一個存儲器和數據總線；其中：處理器與存儲器通過數據總線完成相互間的通信；存儲器存儲有可被處理器執行的程序指令，處理器調用程序指令以執行上述方法。

本發明實施例提供一種非暫態計算機可讀存儲介質，該非暫態計算機可讀存儲介質存儲計算機程序，該計算機程序使計算機執行上述的方法。