[發明專利]增強現實場景的處理方法、裝置及設備、計算機存儲介質

在審

• 申請號: 201710787487.6
• 申請日: 2017-09-04
• 公開（公告）號: CN107590453A
• 公開（公告）日: 2018-01-16
• 發明（設計）人: 項小明
• 申請（專利權）人: 騰訊科技（深圳）有限公司
• 主分類號: G06K9/00
• 分類號: G06K9/00;G06T15/06
• 代理公司: 廣州三環專利商標代理有限公司44202
• 代理人: 郝傳鑫,熊永強

本發明實施例公開了一種增強現實場景的處理方法、裝置及設備，其中，方法包括：獲取由攝像裝置拍攝的第一視頻幀中與目標標記圖像相關的第一特征點信息；按照光流跟蹤算法對各個第一特征點信息所對應的第一特征點進行跟蹤，確定在所述攝像裝置拍攝的第二視頻幀中的第二特征點信息；構建第二視頻幀與目標標記圖像的單映射矩陣，所述單映射矩陣是根據各個第二特征點信息與所述目標標記圖像的源特征點構建的；根據所述單映射矩陣對所述第二視頻幀進行增強現實處理。采用本發明實施例，降低了目標識別時間，節省了軟硬件資源，提高了視頻幀中目標識別的效率，使AR場景的實現更快捷準確。

技術領域

本發明涉及增強現實技術領域，尤其涉及一種增強現實場景的處理方法、裝置及設備、計算機存儲介質。

背景技術

增強現實技術(Augmented Reality，AR)是一種通過實時地計算拍攝到的圖像中目標對象的位置，然后在相應的圖像位置處加上虛擬圖像、虛擬視頻等虛擬內容的技術，基于AR技術，可以將虛擬場景與現實環境相結合，并進行有效的互動。

可以基于圖像識別技術的實現方式來實現AR場景，也就是說，通過圖像識別技術分別在攝像裝置拍攝到的各個視頻幀中識別出某個需要疊加虛擬內容的圖像對象，再確定該圖像對象在視頻幀中的位置，根據確定的位置疊加虛擬內容，例如，需要圖像識別技術在拍攝到的視頻幀中識別出桌子等對象，根據桌子在圖像中的位置，疊加書本、電腦等虛擬內容在該桌子的桌面上。

通過上述的AR實現方式需要對拍攝到的每張視頻幀進行圖像分析識別，所損耗的設備軟硬件資源較多，并且圖像識別需要對整張視頻幀進行分析識別，消耗的時長較大，特別是在拍攝到的現實環境的圖像較為復雜時，識別出圖像對象所耗費的時長更長。

發明內容

本發明實施例提供一種增強現實場景的處理方法、裝置及設備、計算機存儲介質，可較為快捷地完成AR場景處理。

一方面，本發明實施例提供了一種增強現實場景的處理方法，包括：

獲取由攝像裝置拍攝的第一視頻幀中與目標標記圖像相關的第一特征點信息；

按照光流跟蹤算法對第一特征點信息所對應的第一特征點進行跟蹤，確定在所述攝像裝置拍攝的第二視頻幀中的第二特征點信息；

構建第二視頻幀與目標標記圖像的單映射矩陣，所述單映射矩陣是根據各個第二特征點信息與所述目標標記圖像的源特征點構建的；

根據所述單映射矩陣對所述第二視頻幀進行增強現實處理。

另一方面，本發明實施例還提供了一種增強現實場景的處理裝置，包括：

獲取模塊，用于獲取由攝像裝置拍攝的第一視頻幀中與目標標記圖像相關的第一特征點信息；

確定模塊，用于按照光流跟蹤算法對第一特征點信息所對應的第一特征點進行跟蹤，確定在所述攝像裝置拍攝的第二視頻幀中的第二特征點信息；

構建模塊，用于構建第二視頻幀與目標標記圖像的單映射矩陣，所述單映射矩陣是根據各個第二特征點信息與所述目標標記圖像的源特征點構建的；

處理模塊，用于根據所述單映射矩陣對所述第二視頻幀進行增強現實處理。

再一方面，本發明實施例還提供了一種智能設備，包括：處理器和存儲裝置；

所述存儲裝置，用于存儲計算機程序指令；

所述處理器，調用所述計算機程序指令，用于

獲取由攝像裝置拍攝的第一視頻幀中與目標標記圖像相關的第一特征點信息；

按照光流跟蹤算法對第一特征點信息所對應的第一特征點進行跟蹤，確定在所述攝像裝置拍攝的第二視頻幀中的第二特征點信息；