[發明專利]增強現實場景的處理方法、裝置及設備、計算機存儲介質

在審

• 申請號: 201710787487.6
• 申請日: 2017-09-04
• 公開（公告）號: CN107590453A
• 公開（公告）日: 2018-01-16
• 發明（設計）人: 項小明
• 申請（專利權）人: 騰訊科技（深圳）有限公司
• 主分類號: G06K9/00
• 分類號: G06K9/00;G06T15/06
• 代理公司: 廣州三環專利商標代理有限公司44202
• 代理人: 郝傳鑫,熊永強

1.一種增強現實場景的處理方法，其特征在于，包括：

獲取由攝像裝置拍攝的第一視頻幀中與目標標記圖像相關的第一特征點信息；

確定第一視頻幀和第二視頻幀之間的光流場；

基于光流場上各個點的運動矢量以及第一特征點在第一視頻幀中的位置，確定預估位置；

以第一特征點在第一視頻幀中的位置確定出模板圖像，以預估位置在第二視頻幀上的位置確定出搜索圖像；

根據所述第一視頻幀上的模板圖像在所述第二視頻幀的搜索圖像上搜索；

如果在所述第二視頻幀的搜索圖像上搜索出子圖像，則將所述預估位置對應的點確定為第二特征點，并將該預估位置確定為第二特征點信息；

其中，所述子圖像與所述模板圖像的圖像相似度大于預設的相似度閾值；構建第二視頻幀與目標標記圖像的單映射矩陣，所述單映射矩陣是根據各個第二特征點信息與所述目標標記圖像的源特征點構建的；

對所述單映射矩陣進行處理，確定所述攝像裝置在拍攝第二視頻幀時的外參矩陣；

基于外參矩陣對所述第二視頻幀進行增強現實處理。

2.如權利要求1所述的方法，其特征在于，在所述獲取由攝像裝置拍攝的第一視頻幀中與目標標記圖像相關的第一特征點信息之前，還包括：

獲取由攝像裝置拍攝的第一視頻幀中的特征描述信息；根據獲取的特征描述信息到屬性數據庫中進行檢索；根據檢索結果確定目標標記圖像；

其中，所述目標標記圖像的N個特征點的特征描述信息與所述第一視頻幀相應的N個特征點的特征描述信息之間的相似度滿足相似條件，N為正整數。

3.如權利要求1所述的方法，其特征在于，所述獲取由攝像裝置拍攝的第一視頻幀中與目標標記圖像相關的第一特征點信息，包括：

獲取由攝像裝置拍攝的第一視頻幀與目標標記圖像之間的初始單映射矩陣；

基于所述初始單映射矩陣對所述目標標記圖像進行變換處理，得到變換后的目標標記圖像；

根據變換后的目標標記圖像中源特征點的位置確定出所述第一視頻幀中的第一特征點，并獲取該第一特征點在所述第一視頻幀中的位置信息。

4.如權利要求3所述的方法，其特征在于，所述根據變換后的目標標記圖像中源特征點的位置確定出所述第一視頻幀中的第一特征點，包括：

以源特征點在變換后的目標標記圖像中的位置確定模板圖像；

以第一視頻幀中與所述源特征點關聯的初始特征點的位置確定搜索圖像；

根據所述目標標記圖像的模板圖像在所述第一視頻幀的搜索圖像中進行圖像搜索；

如果在所述第一視頻幀的搜索圖像中搜索出子圖像，則將所述初始特征點作為第一特征點；其中，所述子圖像與所述模板圖像的圖像相似度大于預設的相似度閾值。

5.如權利要求2所述的方法，其特征在于，所述獲取由攝像裝置拍攝的第一視頻幀中的特征描述信息之前，還包括：

對目標標記圖像進行預處理，得到預處理標記圖像，所述預處理標記圖像的圖像尺寸大于所述第一視頻幀，并且為灰度圖；

從預處理標記圖像中確定特征點，并獲取所述確定的各個特征點的特征描述信息；

將各個特征描述信息存儲到屬性數據庫中。

6.如權利要求1所述的方法，其特征在于，所述確定在所述攝像裝置拍攝的第二視頻幀中的第二特征點信息之后，還包括：

判斷確定的第二特征點信息的數量是否小于數量閾值；

如果小于數量閾值，則從目標標記圖像中確定出新的源特征點；

根據變換后的目標標記圖像中所述新的源特征點的位置從第二視頻幀中確定出新的第二特征點，獲取該新的第二特征點在所述第二視頻幀中的位置信息。