[發明專利]在視頻中插入數字內容

在審

• 申請號: 202011259709.5
• 申請日: 2020-11-12
• 公開（公告）號: CN114501097A
• 公開（公告）日: 2022-05-13
• 發明（設計）人: 孫國勝;張祺;張高遠;劉偉;陽杰;張月嬌
• 申請（專利權）人: 微軟技術許可有限責任公司
• 主分類號: H04N21/431
• 分類號: H04N21/431;H04N21/44;H04N21/81
• 代理公司: 永新專利商標代理有限公司 72002
• 代理人: 張立達

1.一種用于在視頻中插入數字內容的方法，包括：

獲得視頻；

從所述視頻中提取至少一個目標區域；

獲得與所述視頻相對應的關鍵詞；

至少基于所述關鍵詞來確定至少一項數字內容；以及

在所述至少一個目標區域中添加所述至少一項數字內容。

2.根據權利要求1所述的方法，其中，所述提取至少一個目標區域包括以下至少之一：

在所述視頻中檢測四邊形區域；以及

在所述視頻中檢測平面區域，并且在所述平面區域中創建四邊形區域。

3.根據權利要求1所述的方法，其中，

所述至少一個目標區域的面積高于面積閾值，和/或

所述至少一個目標區域在所述視頻中的持續時間高于持續時間閾值。

4.根據權利要求1所述的方法，還包括：

從所述視頻中識別關鍵場景，并且

其中，所述至少一個目標區域是從所述視頻中的與所述關鍵場景相對應的部分中提取的。

5.根據權利要求4所述的方法，其中，所述關鍵場景是基于以下至少之一來識別的：

所述視頻的音頻信息、所述視頻的圖像信息、以及所述視頻與觀看者之間的交互信息。

6.根據權利要求1所述的方法，還包括：

從所述視頻中識別包含預定內容或者包含與所述預定內容相匹配的圖片的保留區域，所述預定內容包括預定的圖片或文字，并且

其中，所述至少一個目標區域是在所述保留區域外部提取的。

7.根據權利要求1所述的方法，其中，所述獲得關鍵詞包括：

基于所述視頻的觀看者的簡檔或者所述視頻的發布者的關注者的簡檔來生成所述關鍵詞。

8.根據權利要求1所述的方法，其中，所述獲得關鍵詞包括：

基于所述視頻的上下文來生成初始詞，所述上下文包括音頻信息、圖像信息和視頻類別中至少之一；以及

通過預定映射配置將所述初始詞轉換成所述關鍵詞。

9.根據權利要求8所述的方法，其中，

所述上下文是從所述視頻中的與所述至少一個目標區域相對應的部分中提取的。

10.根據權利要求1所述的方法，其中，所述關鍵詞是預先為所述視頻指定的。

11.根據權利要求1所述的方法，其中，所述至少一項數字內容是從一組候選數字內容中選擇的，并且所述一組候選數字內容是隨時間更新的。

12.根據權利要求1所述的方法，其中，所述至少一項數字內容是從一組候選數字內容中選擇的，所述一組候選數字內容的排序是隨時間更新的，并且所述確定至少一項數字內容還基于所述排序。

13.根據權利要求1所述的方法，其中，所述添加所述至少一項數字內容包括：

對所述至少一項數字內容的格式進行變換，所述格式包括形狀、位置、顏色和亮度中至少之一；以及

在所述至少一個目標區域中添加經變換的至少一項數字內容。

14.一種用于在視頻中插入數字內容的裝置，包括：

視頻獲得模塊，用于獲得視頻；

目標區域提取模塊，用于從所述視頻中提取至少一個目標區域；

關鍵詞獲得模塊，用于獲得與所述視頻相對應的關鍵詞；

數字內容確定模塊，用于至少基于所述關鍵詞來確定至少一項數字內容；以及

數字內容添加模塊，用于在所述至少一個目標區域中添加所述至少一項數字內容。