[發明專利]基于AR模型的交互方法、裝置、設備和存儲介質

有效

• 申請號: 201910576731.3
• 申請日: 2019-06-28
• 公開（公告）號: CN110321008B
• 公開（公告）日: 2023-10-24
• 發明（設計）人: 龐文杰
• 申請（專利權）人: 北京百度網訊科技有限公司
• 主分類號: G06F3/01
• 分類號: G06F3/01;G06V20/40;G06V40/20
• 代理公司: 北京同立鈞成知識產權代理有限公司 11205
• 代理人: 朱穎;臧建明

本申請提供一種基于AR模型的交互方法、裝置、設備和存儲介質，其中，該方法，包括：獲取視頻流，并識別視頻流中的對象的關鍵點和關鍵點運動信息；根據關鍵點與AR模型的動作點之間的對應關系，確定與關鍵點對應的動作點；根據關鍵點運動信息，控制AR模型的動作點進行動作，以控制AR模型進行動作。不需要額外動作捕捉設備，就可以實現用戶與終端設備上的AR模型之間的交互，完成AR模型的動作，可以降低成本；并且，由于將視頻流中的對象的關鍵點與AR模型的動作點之間，建立了對應關系，可以依據該對應關系，控制AR模型的動作點做出各種相應的動作；提升了AR模型的動作多樣性。

技術領域

本申請實施例涉及終端技術領域，尤其涉及一種基于AR模型的交互方法、裝置、設備和存儲介質。

背景技術

隨著智能技術的發展，增強現實技術(Augmented Reality，簡稱AR)模型開始出現和發展。AR模型可以根據用戶的需求，呈現出各種動作。目前，提供了動作捕捉設備，可以將動作捕捉設備與用戶的身體連接，進而動作捕捉設備將用戶的動作傳遞給終端設備；終端設備根據接收到的信息，控制AR模型進行運動。

現有技術中，在用戶與終端設備之間進行交互，以實現AR模型的動作的情況下，也可以采用現有的動作捕捉設備，捕捉用戶的動作，以賦予AR模型的動作。

然而現有技術中，采用現有的動作捕捉設備，捕捉用戶的動作，以賦予AR模型動作，這樣的方式，需要昂貴的動作捕捉設備。在用戶使用終端設備時，對于用戶與終端設備之間交互以完成AR模型的動作來說，現有技術的方式還需要額外的動作捕捉設備，不便于用戶與終端設備之間的交互，無法及時的完成AR模型的動作，并且成本較高。

發明內容

本申請實施例提供一種基于AR模型的交互方法、裝置、設備和存儲介質，用于解決現有技術中還需要額外的動作捕捉設備，不便于用戶與終端設備之間的交互，無法及時的完成AR模型的動作，并且成本較高的問題。

本申請第一方面提供一種基于AR模型的交互方法，所述方法應用于終端設備，所述方法，包括：

獲取視頻流，并識別所述視頻流中的對象的關鍵點和關鍵點運動信息；

根據所述關鍵點與AR模型的動作點之間的對應關系，確定與所述關鍵點對應的動作點；

根據所述關鍵點運動信息，控制所述AR模型的動作點進行動作，以控制所述AR模型進行動作。

進一步地，根據所述關鍵點運動信息，控制所述AR模型的動作點進行動作，包括：

根據各所述關鍵點，確定不同的關鍵點之間的連動關系；

根據所述連動關系和各所述關鍵點的關鍵點運動信息，控制與各所述關鍵點對應的各動作點進行動作。

進一步地，根據各所述關鍵點，確定不同的關鍵點之間的連動關系，包括：

根據預設的數據庫，其中，所述數據庫中包括多個連動關系，所述多個連動關系中的每一個連動關系為至少兩個關鍵點之間的關系，查詢各所述關鍵點所對應的連動關系。

進一步地，每一所述關鍵點為手指上的一預設點；

每一所述連動關系為同一手指上的各預設點之間連動關系，或者，每一所述連動關系為不同手指之間的連動關系。

進一步地，每一所述關鍵點為面部器官上的一預設點；

每一所述連動關系為同一面部器官上的各預設點之間連動關系，或者，每一所述連動關系為不同面部器官之間的連動關系。

進一步地，根據所述關鍵點運動信息，控制所述AR模型的動作點進行動作，包括：

根據所述關鍵點運動信息，確定各所述關鍵點之間的連動關系；