[發明專利]一種人機交互方法及電子設備

在審

• 申請號: 202010420768.X
• 申請日: 2020-05-18
• 公開（公告）號: CN111638783A
• 公開（公告）日: 2020-09-08
• 發明（設計）人: 崔穎
• 申請（專利權）人: 廣東小天才科技有限公司
• 主分類號: G06F3/01
• 分類號: G06F3/01;G06K9/00;G10L15/22;G06N20/10;G09B5/06
• 代理公司: 廣州德科知識產權代理有限公司 44381
• 代理人: 萬振雄;楊中強

1.一種人機交互方法，其特征在于，所述方法包括：

以目標語種輸出第一動作指令；

獲取采集的用戶圖像，并識別所述用戶圖像中包括的肢體動作；

在識別出所述肢體動作與所述第一動作指令相匹配時，輸出用于指示正確的反饋信息。

2.根據權利要求1所述的方法，其特征在于，所述第一動作指令為指向目標物體的指令；

所述識別所述用戶圖像中包括的肢體動作，包括：

在判斷出所述肢體動作為所述指向手勢時，識別所述指向手勢指向的物體；

所述在識別出所述肢體動作與所述第一動作指令相匹配時，輸出用于指示正確的反饋信息，包括：

在判斷出所述肢體動作為所述指向手勢，并且所述指向手勢指向的物體與所述目標物體相匹配時，輸出用于指示正確的反饋信息。

3.根據權利要求2所述的方法，其特征在于，所述獲取采集的用戶圖像，包括：

當所述目標物體為臉部器官時，控制攝像頭以第一焦距拍攝所述用戶圖像；

當所述目標物體部位為非臉部器官時，控制攝像頭以第二焦距拍攝所述用戶圖像；所述第二焦距小于所述第一焦距。

4.根據權利要求1-3任一項所述的方法，其特征在于，在所述以目標語種輸出第一動作指令之前，所述方法還包括：

獲取拍攝到的書本圖像；

從所述書本圖像中識別出第一目標內容；

生成與所述第一目標內容對應的所述第一動作指令。

5.根據權利要求4所述的方法，其特征在于，在所述生成與所述第一目標內容對應的所述第一動作指令之前，所述方法還包括：

獲取用戶身份標識，并查詢與所述用戶身份標識對應的學習記錄；

若所述學習記錄中包括所述第一目標內容的讀音學習，則執行所述生成與所述目標內容對應的所述第一動作指令的步驟。

6.根據權利要求1所述的方法，其特征在于，所述方法還包括：

獲取以目標語種輸入的用戶語音；

識別所述用戶語音中包括的第二動作指令；

控制在屏幕中顯示的虛擬模型執行與所述第二動作指令對應的動作或形態變化。

7.根據權利要求6所述的方法，其特征在于，在所述獲取輸入的用戶語音之前，所述方法還包括：

獲取拍攝到的書本圖像；

從所述書本圖像中識別出第二目標內容；

顯示與所述第二目標內容對應的標準動作；

以及，所述獲取以目標語種輸入的用戶語音，包括：

獲取以所述目標語種描述所述標準動作的用戶語音。

8.根據權利要求7所述的方法，其特征在于，在所述顯示與所述第二目標內容對應的標準動作之前，所述方法還包括：

獲取用戶身份標識，并查詢與所述用戶身份標識對應的學習記錄；

若所述學習記錄中包括所述第二目標內容的釋義學習，則執行所述顯示與所述第二目標內容對應的標準動作的步驟。

9.一種電子設備，其特征在于，包括：

第一輸出單元，用于以目標語種輸出第一動作指令；

獲取單元，用于獲取采集的用戶圖像，并識別所述用戶圖像中包括的肢體動作；

第二輸出單元，用于在識別出所述肢體動作與所述第一動作指令相匹配時，輸出用于指示正確的反饋信息。

10.一種電子設備，其特征在于，包括：

存儲有可執行程序代碼的存儲器；

與所述存儲器耦合的處理器；

所述處理器調用所述存儲器中存儲的所述可執行程序代碼，執行權利要求1-8任一項所述的人機交互方法。