[發明專利]一種基于AR的交互方法、裝置、存儲介質及電子設備

有效

• 申請號: 201911130116.6
• 申請日: 2019-11-18
• 公開（公告）號: CN110928411B
• 公開（公告）日: 2021-03-26
• 發明（設計）人: 劉園華
• 申請（專利權）人: 珠海格力電器股份有限公司
• 主分類號: G06F3/01
• 分類號: G06F3/01
• 代理公司: 北京聿宏知識產權代理有限公司 11372
• 代理人: 吳大建;張杰

1.一種基于AR的交互方法，應用于電子設備，其特征在于，所述交互方法包括：

在獲取到目標情景效果以及與所述目標情景效果對應的目標虛擬互動主體時，獲取拍攝畫面并識別該拍攝畫面是否存在目標真實互動主體；

在識別到與所述目標情景效果對應的目標真實互動主體時，開啟所述電子設備的AR功能模式；

在所述AR功能模式開啟時，根據所述目標情景效果、所述目標虛擬互動主體以及所述目標真實互動主體，以生成交互視頻或交互圖像并顯示，

其中，在目標情景效果包括真實生物與虛擬物品的交互情景時，若未能獲取到與該目標情景效果對應的目標虛擬互動主體時，根據當前拍攝畫面中的目標真實主體的當前動作的形態特征信息，生成一個待交互媒體數據，根據當前動作的形態特征信息匹配一個與當前動作的形態特征信息對應的目標匹配虛擬互動主體，根據該目標匹配虛擬互動主體和待交互媒體數據，生成交互視頻或圖像，

其中，所述根據所述目標情景效果、所述目標虛擬互動主體以及所述目標真實互動主體，以生成交互視頻或交互圖像并顯示的步驟包括：

在所述目標情景效果包括真實生物與虛擬角色的交互情景時，獲取所述目標真實互動主體當前動作的形態特征信息和所述目標虛擬互動主體的預設基礎動作；

根據所述當前動作的形態特征信息、所述預設基礎動作、所述目標情景效果的基礎動態，進行情景匹配；

在情景匹配成功時，根據所述當前動作的形態特征信息、所述預設基礎動作，以生成交互視頻或交互圖像并顯示；

在情景匹配失敗時，根據所述當前動作的形態特征信息獲取所述目標虛擬互動主體在本地動作庫中的預設交互動作，并根據所述當前動作的形態特征信息和該預設交互動作，以生成交互視頻或交互圖像并顯示，

所述交互方法還包括：

基于模式變更指令將電子設備調整至預設模式時，獲取到目標真實互動主體的骨點信息，根據所述骨點信息生成待處理媒體數據；

根據所述待處理媒體數據和所述目標虛擬互動主體，以生成目標虛擬互動主體的自設定動作，

在接收到本地保存指令時，將所述自設定動作作為所述目標虛擬互動主體的預設交互動作并保存至本地動作庫，以更新所述本地動作庫。

2.如權利要求1所述的交互方法，其特征在于，所述根據所述目標情景效果、所述目標虛擬互動主體以及所述目標真實互動主體，以生成交互視頻或交互圖像并顯示的步驟包括：

在所述目標情景效果包括真實場景與虛擬角色的交互情景時，獲取所述目標真實互動主體的場景特征信息和所述目標虛擬互動主體在本地動作庫中的預設交互動作；

根據所述場景特征信息和所述預設交互動作，以生成交互視頻或交互圖像并顯示。

3.如權利要求1所述的交互方法，其特征在于，所述根據所述目標情景效果、所述目標虛擬互動主體以及所述目標真實互動主體，以生成交互視頻或交互圖像并顯示的步驟包括：

在所述目標情景效果包括真實生物與虛擬物品的交互情景時，獲取所述目標真實互動主體當前動作的形態特征信息；

根據所述當前動作的形態特征信息和所述目標虛擬互動主體，以生成交互視頻或交互圖像并顯示。

4.如權利要求1所述的交互方法，其特征在于，所述交互方法還包括：

在接收到云端保存指令時，獲取所述自設定動作的名稱特征信息；

將所述名稱特征信息與預設關鍵詞進行相似度分析，以得到第一相似度；

在所述第一相似度小于第一預設閾值時，將所述自設定動作作為目標虛擬互動主體的預設交互動作并保存至云動作庫，以更新所述云動作庫。

5.如權利要求1所述的交互方法，其特征在于，所述交互方法還包括：

在接收到云端保存指令時，獲取所述自設定動作的第一動作特征信息，以及獲取所述目標虛擬互動主體在云動作庫中的至少一個預設交互動作的第二動作特征信息；

將所述第一動作特征信息和每個所述第二動作特征信息進行相似度分析，以得到與所述第二動作特征信息對應的第二相似度值；

在所述第二相似度小于第二預設閾值時，將所述自設定動作作為目標虛擬互動主體的預設交互動作并保存至云動作庫，以更新所述云動作庫。