[發明專利]視頻生成方法、裝置和系統

在審

• 申請號: 201711487230.5
• 申請日: 2017-12-29
• 公開（公告）號: CN109996107A
• 公開（公告）日: 2019-07-09
• 發明（設計）人: 劉凡平;陳相禮;郭武彪;楊華
• 申請（專利權）人: 百度在線網絡技術（北京）有限公司
• 主分類號: H04N21/431
• 分類號: H04N21/431;H04N21/466;H04N21/81;G06Q30/02
• 代理公司: 北京清亦華知識產權代理事務所(普通合伙) 11201
• 代理人: 宋合成

1.一種視頻生成方法，其特征在于，包括以下步驟：

獲取原始視頻的各幀原始圖像；

針對各幀原始圖像，采用經過訓練的圖像實例分割模型，識別得到所述原始圖像中依據呈現對象分割得到的圖像塊，以及所述圖像塊中待呈現推送信息的目標區域；

針對每一幀原始圖像，根據所述原始圖像的圖像塊，在所述圖像塊的目標區域內呈現所述推送信息，以得到所述原始圖像對應的目標圖像；

根據各幀原始圖像對應的目標圖像進行合成，得到所需目標視頻。

2.根據權利要求1所述的視頻生成方法，其特征在于，所述根據所述原始圖像的圖像塊，在所述圖像塊的目標區域內呈現所述推送信息，以得到所述原始圖像對應的目標圖像，包括：

對所述目標區域所屬圖像塊中呈現的對象，識別拍攝視角；

根據所述拍攝視角，對呈現有所述推送信息的視圖進行透視轉換；

利用透視轉換后的視圖覆蓋所述原始圖像的目標區域，得到所述原始圖像對應的目標圖像。

3.根據權利要求1所述的視頻生成方法，其特征在于，所述針對各幀原始圖像，采用經過訓練的圖像實例分割模型，識別得到所述原始圖像中依據呈現對象分割得到的圖像塊，以及所述圖像塊中待呈現推送信息的目標區域之前，還包括：

獲取多個被攝對象的樣本圖像；所述樣本圖像，標注有所述目標區域；其中，在所述樣本圖像中，所述目標區域與所述對象的成像區域相鄰，或者，所述目標區域處于所述對象的成像區域內部；

采用所述樣本圖像對所述圖像實例分割模型進行訓練。

4.根據權利要求2所述的視頻生成方法，其特征在于，所述根據所述拍攝視角，對呈現有所述推送信息的視圖進行透視轉換之前，還包括：

識別所述原始圖像所屬的場景類別；

根據所述場景類別，查詢各個推送信息的標簽，得到標簽與所述場景類別匹配的推送信息。

5.根據權利要求4所述的視頻生成方法，其特征在于，所述識別所述原始圖像所屬的場景類別，包括：

根據所述原始圖像所呈現的對象，查詢各場景類別對應的對象，識別所述原始圖像所述的場景類別。

6.根據權利要求4所述的視頻生成方法，其特征在于，所述識別所述原始圖像所屬的場景類別，包括：

對所述原始圖像，采用經過訓練的圖像場景識別模型，識別得到所述原始圖像所屬的場景類別；其中，所述圖像場景識別模型，是在每一場景類別下拍攝多張圖像作為訓練樣本并采用對應場景類別對所述訓練樣本進行標注，根據經過標注的訓練樣本進行訓練得到的。

7.一種視頻生成系統，其特征在于，包括：

離線訓練節點，用于獲取經過訓練的圖像分割模型；

基礎視頻分析節點，用于獲取原始視頻的各幀原始圖像；

服務節點，用于針對各幀原始圖像，采用經過訓練的圖像實例分割模型，識別得到所述原始圖像中依據呈現對象分割得到的圖像塊，以及所述圖像塊中待呈現推送信息的目標區域；針對每一幀原始圖像，根據所述原始圖像的圖像塊，在所述圖像塊的目標區域內呈現所述推送信息，以得到所述原始圖像對應的目標圖像；

所述基礎視頻分析節點，還用于根據各幀原始圖像對應的目標圖像進行合成，得到所需目標視頻。

8.一種視頻生成裝置，其特征在于，包括

獲取模塊，用于獲取原始視頻的各幀原始圖像；

區域識別模塊，用于針對各幀原始圖像，采用經過訓練的圖像分割模型，識別得到所述原始圖像中依據呈現對象分割得到的圖像塊，以及所述圖像塊中待呈現推送信息的目標區域；

合成模塊，用于針對每一幀原始圖像，根據所述原始圖像的圖像塊，在所述圖像塊的目標區域內呈現所述推送信息，以得到所述原始圖像對應的目標圖像；根據各幀原始圖像對應的目標圖像進行合成，得到所需目標視頻。

9.一種計算機設備，其特征在于，包括存儲器、處理器及存儲在存儲器上并可在處理器上運行的計算機程序，所述處理器執行所述程序時，實現如權利要求1-6中任一所述的視頻生成方法。