[發明專利]基于增強現實的視頻數據處理方法、裝置和存儲介質

有效

• 申請號: 201810079019.8
• 申請日: 2018-01-26
• 公開（公告）號: CN108255304B
• 公開（公告）日: 2022-10-04
• 發明（設計）人: 鄔振海
• 申請（專利權）人: 騰訊科技（深圳）有限公司
• 主分類號: G06F3/01
• 分類號: G06F3/01;G06F3/0487;A63F13/42;G06T7/194;G06T7/11
• 代理公司: 深圳翼盛智成知識產權事務所(普通合伙) 44300
• 代理人: 黃威

1.一種基于增強現實的視頻數據處理方法，其特征在于，包括：

在接收到關于增強現實場景的互動請求時，對用戶進行視頻數據采集；

根據所述互動請求獲取增強現實場景下的虛擬物品標識和目標對象標識；

根據所述虛擬物品標識獲取虛擬物品，并通過攝像進程檢測并跟蹤用戶的手勢作為啟動指令；若所述手勢符合預設條件，根據所述目標對象標識從所述視頻數據中提取目標對象；

確定所述虛擬物品和目標對象之間的互動狀態，得到當前互動狀態；

獲取當前互動狀態對應的操作內容，并執行所述操作內容；

基于所述操作內容的執行過程生成互動效果視頻；

其中所述獲取當前互動狀態對應的操作內容，并執行所述操作內容，包括：

獲取當前互動狀態對應的操作內容，所述操作內容包括動效指令和控制指令；其中動效指令用于指示互動狀態和動作效果內容的對應關系；控制指令用于指示下一步的執行步驟；

若所述控制指令指示繼續執行，則在根據動效指令顯示相應的動效后，返回執行根據所述目標對象標識從所述視頻數據中提取目標對象的操作，并執行對用戶基于虛擬物品所作出的動作進行圖像采集；

若所述控制指令指示結束執行，則在根據動效指令顯示相應的動效后，顯示預設的結束提示信息。

2.根據權利要求1所述的方法，其特征在于，所述根據所述目標對象標識從所述視頻數據中提取目標對象，包括：

獲取所述目標對象標識對應的特征信息；

從所述視頻數據中選取包含所述特征信息的幀，得到候選幀；

根據所述特征信息從所述候選幀中提取目標對象。

3.根據權利要求2所述的方法，其特征在于，所述根據所述特征信息從所述候選幀中提取目標對象，包括：

采用預設的人像分割算法分別對所述候選幀進行分割，得到背景區域和人像區域；

根據所述特征信息從所述人像區域中提取目標對象。

4.根據權利要求3所述的方法，其特征在于，所述采用預設的人像分割算法分別對所述候選幀進行分割，得到背景區域和人像區域之前，還包括：

將所述候選幀的尺寸按照預設策略進行縮小；

所述采用預設的人像分割算法分別對所述候選幀進行分割，得到背景區域和人像區域，具體為：采用預設的人像分割算法分別對縮小后的候選幀進行分割，將分割后的候選幀的尺寸恢復為原幀大小，得到背景區域和人像區域。

5.根據權利要求3或4所述的方法，其特征在于，所述確定所述虛擬物品和目標對象之間的互動狀態，得到當前互動狀態，包括：

將虛擬物品疊加至所述目標對象所在的幀的背景區域，得到疊加結果；

根據疊加結果確定所述虛擬物品與目標對象的互動狀態，得到當前互動狀態。

6.根據權利要求5所述的方法，其特征在于，所述根據疊加結果確定所述虛擬物品與目標對象的互動狀態，得到當前互動狀態，包括：

根據疊加結果確定所述虛擬物品與目標對象之間的位置關系和/或形狀關系；

根據所述位置關系和/或形狀關系確定所述虛擬物品與目標對象的互動狀態，得到當前互動狀態。

7.根據權利要求6所述的方法，其特征在于，所述根據疊加結果確定所述虛擬物品與目標對象之間的位置關系和/或形狀關系，包括：

根據疊加結果分別獲取虛擬物品的坐標與目標對象的坐標，根據虛擬物品的坐標與目標對象的坐標確定所述虛擬物品與目標對象之間的位置關系；和/或，

根據疊加結果分別對虛擬物品的形狀和目標對象的形狀進行識別，根據虛擬物品的形狀和目標對象的形狀確定所述虛擬物品與目標對象之間的形狀關系。

8.根據權利要求5所述的方法，其特征在于，所述將虛擬物品疊加至所述目標對象所在的幀的背景區域之前，還包括：

對所述目標對象所在的幀的背景區域進行預設濾鏡處理；

所述將虛擬物品疊加至所述目標對象所在的幀的背景區域，得到疊加結果具體為：將虛擬物品疊加至濾鏡處理后的背景區域中，得到疊加結果。